大模型算力荒?浪潮信息也来“掘金卖铲”
时间:2025-03-14 11:05:32 来源:四风阳嘉网
基础大模型的掘金卖铲开发能力提升到一定程度
,就具备了商业化能力 ,大模应用的型算信息落地通道也就打开了。实现AIGC的力荒浪潮能力
,除了算力资源的掘金卖铲限制外,仍存在诸多技术难点打开凤凰新闻,大模查看更多高清图片图片来源@视觉中国刚刚过去的型算信息一周
,浪潮信息发布新品OGAI(Open GenAI Infra)元脑生智,力荒浪潮意在为大模型业务提供AI算力系统环境部署
、掘金卖铲算力调度及开发管理能力的大模软件栈。浪潮信息作为一家以服务器为主营业务的型算信息企业,受到来自生成式AI带来的力荒浪潮算力牵引潜力
,下游客户需求旺盛,掘金卖铲但另一方面 ,大模在英伟达、型算信息英特尔等供应商出口限制的影响下,人工智能芯片普遍短缺
,做软件 ,也是增强市场竞争力的多一种选择 。浪潮信息高级副总裁刘军告诉钛媒体
,当前阶段仍处于大模型开发阶段 ,除了缺算力外
,基础模型能力还没有足够高的提升 ,最终呈现出来的效果也不见得会真正能投入使用。刘军认为 ,算力供给解决到一定程度,基础大模型的开发能力提升到一定程度,就具备了商业化能力,进而在各类场景、应用的落地通道也就打开了。而在中国
,现阶段能真正达到GPT-4的模型的还没有 ,这就意味着将应用创新能力都寄托在OpenAI上也是明显不可能,也是不现实的
。大模型也需要生产力工具据公开信息,2021年9月,浪潮信息就已经在研发大模型,面向大模型场景解决方案,支持AI芯片、服务器
,以构建低时延的分布式系统。浪潮信息发布参数量为2457亿的中文大语言模型“源1.0” 。在“源”大模型的研发过程中,浪潮信息的AI团队逐步建立了完整的从公开数据爬取到数据清洗、格式转化 、数据质量评估的完整流程和工具链,并完成了5TB高质量中文数据集的清洗工作 。“源”大模型的数据集和清洗经验和帮助国内不少AI团队提升了其大模型的性能表现。在这个过程中,浪潮信息遇到了很多大模型研发应用中的问题,例如公共算力调度问题、数据清洗问题、大模型分布式训练性能不佳等等 。为此,浪潮信息团队从三个层面进行优化:一是系统全栈性
,对于涉及多团队、多环节 、多流程的业务
,需要系统性架构和全栈解决方案;二是兼容适配性,由于模型训练需要大量的开源工具
、组件
,但存在兼容和性能方面的问题;三是性能优化的挑战,一个大的集群系统涉及的组件数以千计,怎样优化性能是问题 。举个例子,针对于提升大模型分布式训练的计算效率 ,特别是在实际的AI集群环境中,可能存在GPU之间的互联带宽受限,或者AI服务器之间的网络互联带宽有限的情况,浪潮信息自2022年以来为客户将大模型训练的GPU峰值效率从30%左右提升到50%
,提升GPU利用率。而在“源”大模型研发过程中 ,针对千卡规模算力的高效调度问题,浪潮信息通过对云原生的调度系统进行了改造来大幅加速其启动速度,并重点解决了RDMA网络在容器中的接入和适配优化,从而采取构建满足大模型需求的算力调度系统;针对训练任务的长期稳定运行问题,浪潮信息还引入了多种对集群性能的监控手段和性能数据分析方法
。客户最关心什么但实现AIGC的能力
,除了算力资源的限制外 ,仍存在诸多技术难点,包括在模型的训练、效果测评 、落地场景应用方面兼具挑战性 ,对普通开发者和中小企业来说更是可望不可及 。整体来看,OGAI(Open GenAI Infra)元脑生智软件栈由5层架构组成
,从L0到L4分别对应于基础设施层的智算中心OS产品
、系统环境层的PODsys产品、调度平台层的AIStation产品 、模型工具层的YLink产品和多模纳管层的MModel产品。L0层智算中心OS的定位是面向智算中心等公共算力服务平台
,面向多租户场景 ,提供灵活多样的以裸金属为主的AI算力服务。L1层PODsys聚焦于AI集群部署场景 ,提供了包括基础设施环境安装
、环境部署、用户管理、系统监控和资源调度一整套工具链,旨在打造一个易用、高效、开放、兼容的智算集群系统环境部署方案。L2层AIStation聚焦于AI开发场景
,通过云原生技术对集群系统中的计算资源
、存储资源和网络资源进行统一的接入和纳管
,提供了易于使用的开发环境和作业管理界面 ,并基于内置算力调度系统和训练稳定保障系统来实现易于接入、按需分配
、弹性扩展和高效稳定的AI研发应用支撑平台。L3层YLink聚焦于大模型的开发过程
,通过集成整合浪潮信息在大模型研发过程中的工具和开源工具,为用户提供高效、便捷与标准化的大模型开发与优化流程。L4层MModel定位于多模型管理与服务平台 ,帮助客户更好地管理和评估模型
,加速模型的部署和应用。浪潮信息人工智能与高性能应用软件部AI架构师Owen ZHU还告诉钛媒体,“现在企业面临的最大挑战是,需要用大规模硬件的基础设施才能够训练一个类似于ChatGPT同等能力的模型,这个复杂性是固有的 。”他解释,OGAI技术栈是从L0到L4层是分层解耦设计和实现的,也就是说并不用把整个OGAI技术栈提供给用户
,才能够实现大模型开发
,而是对应需要实现的层级功能进行选择。如果用户只需要提供算力多租户的裸金属方案,可能只需要L0层智算中心OS
,不用关心最终用户会怎样进行大模型开发;如果用户需要模型开发相关工具链,可以按需选择L3层YLink提供的各类工具进行研发生产。关于发布OGAI的初衷,Owen ZHU指出,“浪潮信息做这件事情
,是先行者 ,这是由视角决定。浪潮信息服务了全球客户,包括国内也是最主要的AI应用客户群体 ,能够第一时间感知到大模型市场在缺什么
,遇到了哪些问题。”从用户的角度来看,更强的算力基础设施也会倒逼需求侧进一步升级。“做模型的不懂算力
,做算力的不懂模型”,这种情况长期存在,但很多算法的创新与硬件的发展是相辅相成,两者又需要共同发展
。浪潮信息的这一做法是否切实可行,仍需市场来验证
。
-
欧冠|纽卡斯尔联4:1巴黎圣日耳曼,“喜鹊”崛起势不可当高马尾逐渐消失在校园,“鲶鱼头”更受欢迎,家长不理解也看不懂骑士加时胜76人,恩比德32+13+5+5+6!加兰32+5+8,马克西30分德甲与中国足协牵手合作,宋凯:送U16球员去德国训练比赛澎湃新闻2023-11-24 10:49澎湃新闻2023-11-24 10:49英国皇家社会科学院院士:消除误解和偏见 用网络打造人类命运共同体一组透露着淡淡忧伤的写实性感美女油画︱路易·特雷斯拉绘画作品火箭终结8连败!幕后功臣获赞,申京替偶像说话,乌度卡点名表扬NBA排名大乱!森林狼居第1,魔术力压雄鹿,湖人第7,马刺10连败37年前,那个出生时14.5斤的“巨婴”,现在长大后成啥样了?霍乐迪面对救主很谦虚,利指导扣篮变宋小宝,绿衫军三分险胜雄鹿9岁女孩放学路上失踪,10年后在邻居家发现,父母哭到崩溃北青:马宁裁判组将法律利雅患上乐成亚冠角逐NBA常规赛:快船轻取爵士迎三连胜,莱昂纳德狂轰41+5,哈登8中2日本记者:北方四岛属于哪国?中方的巧妙回答令对方如芒刺背西媒:巴黎分心发售或者外租法比安以及索莱尔
相关内容
- ·原创 正负值-228!联盟倒数第一!离开勇士,普尔彻底废了
- ·8人缺席!莫兰特一人影响一队,灰熊vs太阳启用困难特例签约二将
- ·Redmi宣告K70 Pro将搭载第三代骁龙8 周全进化!
- ·原创 前人砍树!因曼联欧冠表现不佳,英超下赛季欧冠席位将缩减
- ·CBA齐鲁德比,又来了!济南时报2023-12-11 07:51济南时报2023-12-11 07:51
- ·下午四点,足协杯决赛四大看点,山东泰山上海申花谁能笑到最后红薯是“抗癌之王”,能杀死98%的癌细胞,还能降血糖?答案来了
- ·重回熟悉的赛场,首位登陆澳超的女足队员肖裕仪:回娘家的感觉真好江苏一姑娘“女身男相”,网友奔现一见钟情:没见过这么好看的人
- ·还踢什么?上海上港直接冠军!张琳芃飞铲未红牌,球员明天骨裂!你的指甲上有竖纹吗?小心这可能是身体发出的警报!
- ·10队争4个淘汰赛名额!欧冠乱了,大巴黎赢球晋级,2豪门近乎出局
- ·比利时老国王私生女不好惹:打7年官司要求滴血认亲,拿回继承权“一尿成名”任素汐:上半身是平凡,下半身是贪婪,又丑又性感
- ·亚历山大轰40分!霍姆格伦新高36分,雷霆送勇士6连败,库里25分中国首个被注射死刑的富豪,死前向国家捐495亿,只想买一条命
- ·时运不佳!决战墨尔本城之前 浙江惨遭4大致命暴击 小组出线悬了为何溥仪不能生育?看看他小时候,宫女们都对他做了些什么?
- ·原创 50岁的哈姆,就这样改写湖人对阵步行者的结局,苦尽甘来终无憾
- ·国羽四对于男双全副降级16强
- ·中国男足0-3韩国!武磊难救主,黄健翔锐评,孙兴慜赛后首发声
- ·西媒:巴黎分心发售或者外租法比安以及索莱尔
最新内容
- ·7投5中!3分险胜太阳,湖人达到一箭双雕,终于能甩掉拉塞尔了
- ·用着省钱又安全的太阳能热水器,为何有人说已“跌下神坛”了?“一尿成名”任素汐:上半身是平凡,下半身是贪婪,又丑又性感
- ·NBA竞彩推荐11/24 热火VS尼克斯 赛事分析
- ·再见姆巴佩,坚持2亿,转投皇马,佛爷知足,豫备7800万高薪
- ·超赞的户外移动电源——公牛300W户外电源!它小巧轻便,可是能量超级强大哦!baby大瓜!央视亲自下场实锤内幕,怪不得晓明要离婚!
- ·欧文三分绝杀,独行侠险胜湖人,詹姆斯空砍26分无力回天
- ·主动示弱并夸赞对手,申花主帅吴金贵在足协杯决赛前摆出哀兵姿态文汇报2023-11-24 20:04文汇报2023-11-24 20:04
- ·杜兰特、库里重逢太阳主场战胜勇士红薯是“抗癌之王”,能杀死98%的癌细胞,还能降血糖?答案来了
- ·NBA | 湖人季中赛夺冠 詹姆斯MVP实至名归又一领土回归中国版图,面积4.7平方千米,五处竖界碑宣告主权
- ·巴黎圣日耳曼VS摩纳哥
推荐内容
- ·英媒:曼联分心摩纳哥右后卫万德松、中场福法纳
- ·详细升级凸显性价比,试驾雪佛兰2023款开拓者厂家
- ·詹姆斯:不去热火我也有统治力 裁判报告没啥用处这一次,47岁的李小冉,终于走到了这一步
- ·欧冠-阿森纳2-0塞维下轮打平即出线 萨卡传射特罗萨德破门直播吧2023-11-09 05:56直播吧2023-11-09 05:56
- ·怎能让“大黄蜂”连“叮”两次?欧冠第四轮,纽卡再战多特蒙德时隔5年李咏死因被揭开,妻子哈文道破真相,遗体为何不运回国
- ·欧冠前瞻皇家社会VS本菲卡:皇家社会主场强悍!本菲卡褪去黑马外衣!
- ·我国探日工程有何进展?南大专家:太阳探测的终极目标是实现近日探测极目新闻2023-11-08 18:40极目新闻2023-11-08 18:40
- ·原创 178分钟0失误!联盟第1!对不起,保罗,NBA控卫之神要易主了
热点内容
- ·【英超】哈兰德多库皆伤缺,曼城仍逆转卢顿走出低谷
- ·独行侠130—117奇才,又是嘲讽普尔的一天
- ·湖人出局引联盟效仿!公牛彻底陷入被动,高薪低能并不是你的错!
- ·狂轰54+17+9!双状元齐爆发,森林狼西部第一,76人惨遭3连败打劫式交易!湖人计划3换1补强,詹姆斯迎三分射手,哈姆放心了
- ·西甲-莱万破门孔德失误送礼 巴萨2-4赫罗纳送对手登顶
- ·德甲与中国足协牵手合作,宋凯:送U16球员去德国训练比赛37年前,那个出生时14.5斤的“巨婴”,现在长大后成啥样了?
- ·美媒列四方大交易:湖人4换3德罗赞 勇士2换3里夫斯 洛城亏惨?小白篮球2023-11-24 21:41四川小白篮球2023-11-24 21:41四川
- ·布里斯班狮吼vs墨尔本城,主队握有主场优势天下第一淫棍,设计玷污60位女艺人被判入狱29年,仍飞扬跋扈
- ·原创 湖人的绝招,步行者根本看不懂,哈姆后边还有大招
- ·法甲:巴黎圣日耳曼 VS 摩纳哥