大模型算力荒?浪潮信息也来“掘金卖铲”87岁晚节不保,这次再多的名和利,都救不了“自毁前程”的魏纪中
时间:2025-03-15 15:55:02 来源:无妄雨晴网
图片来源@视觉中国刚刚过去的掘金卖铲一周,浪潮信息发布新品OGAI(Open GenAI Infra)元脑生智,大模多的的魏意在为大模型业务提供AI算力系统环境部署、型算信息算力调度及开发管理能力的力荒浪潮利都软件栈。浪潮信息作为一家以服务器为主营业务的也岁企业,受到来自生成式AI带来的晚节算力牵引潜力
,下游客户需求旺盛 ,不保但另一方面,次再在英伟达 、名和英特尔等供应商出口限制的救不纪中影响下,人工智能芯片普遍短缺,自毁做软件 ,前程也是掘金卖铲增强市场竞争力的多一种选择。浪潮信息高级副总裁刘军告诉钛媒体,大模多的的魏当前阶段仍处于大模型开发阶段,型算信息除了缺算力外
,基础模型能力还没有足够高的提升,最终呈现出来的效果也不见得会真正能投入使用 。刘军认为,算力供给解决到一定程度 ,基础大模型的开发能力提升到一定程度,就具备了商业化能力,进而在各类场景、应用的落地通道也就打开了
。而在中国,现阶段能真正达到GPT-4的模型的还没有,这就意味着将应用创新能力都寄托在OpenAI上也是明显不可能
,也是不现实的。大模型也需要生产力工具据公开信息,2021年9月,浪潮信息就已经在研发大模型,面向大模型场景解决方案
,支持AI芯片
、服务器,以构建低时延的分布式系统。浪潮信息发布参数量为2457亿的中文大语言模型“源1.0”
。在“源”大模型的研发过程中,浪潮信息的AI团队逐步建立了完整的从公开数据爬取到数据清洗、格式转化、数据质量评估的完整流程和工具链
,并完成了5TB高质量中文数据集的清洗工作 。“源”大模型的数据集和清洗经验和帮助国内不少AI团队提升了其大模型的性能表现。在这个过程中,浪潮信息遇到了很多大模型研发应用中的问题,例如公共算力调度问题、数据清洗问题
、大模型分布式训练性能不佳等等 。为此,浪潮信息团队从三个层面进行优化
:一是系统全栈性,对于涉及多团队、多环节、多流程的业务,需要系统性架构和全栈解决方案;二是兼容适配性 ,由于模型训练需要大量的开源工具、组件,但存在兼容和性能方面的问题;三是性能优化的挑战
,一个大的集群系统涉及的组件数以千计
,怎样优化性能是问题。举个例子,针对于提升大模型分布式训练的计算效率,特别是在实际的AI集群环境中,可能存在GPU之间的互联带宽受限 ,或者AI服务器之间的网络互联带宽有限的情况,浪潮信息自2022年以来为客户将大模型训练的GPU峰值效率从30%左右提升到50%,提升GPU利用率
。而在“源”大模型研发过程中,针对千卡规模算力的高效调度问题 ,浪潮信息通过对云原生的调度系统进行了改造来大幅加速其启动速度,并重点解决了RDMA网络在容器中的接入和适配优化,从而采取构建满足大模型需求的算力调度系统;针对训练任务的长期稳定运行问题,浪潮信息还引入了多种对集群性能的监控手段和性能数据分析方法。客户最关心什么但实现AIGC的能力 ,除了算力资源的限制外
,仍存在诸多技术难点,包括在模型的训练
、效果测评、落地场景应用方面兼具挑战性 ,对普通开发者和中小企业来说更是可望不可及
。整体来看,OGAI(Open GenAI Infra)元脑生智软件栈由5层架构组成,从L0到L4分别对应于基础设施层的智算中心OS产品
、系统环境层的PODsys产品 、调度平台层的AIStation产品 、模型工具层的YLink产品和多模纳管层的MModel产品
。L0层智算中心OS的定位是面向智算中心等公共算力服务平台,面向多租户场景 ,提供灵活多样的以裸金属为主的AI算力服务 。L1层PODsys聚焦于AI集群部署场景,提供了包括基础设施环境安装、环境部署
、用户管理、系统监控和资源调度一整套工具链,旨在打造一个易用、高效、开放
、兼容的智算集群系统环境部署方案。L2层AIStation聚焦于AI开发场景,通过云原生技术对集群系统中的计算资源 、存储资源和网络资源进行统一的接入和纳管,提供了易于使用的开发环境和作业管理界面,并基于内置算力调度系统和训练稳定保障系统来实现易于接入
、按需分配、弹性扩展和高效稳定的AI研发应用支撑平台。L3层YLink聚焦于大模型的开发过程
,通过集成整合浪潮信息在大模型研发过程中的工具和开源工具
,为用户提供高效
、便捷与标准化的大模型开发与优化流程。L4层MModel定位于多模型管理与服务平台,帮助客户更好地管理和评估模型,加速模型的部署和应用。浪潮信息人工智能与高性能应用软件部AI架构师Owen ZHU还告诉钛媒体 ,“现在企业面临的最大挑战是
,需要用大规模硬件的基础设施才能够训练一个类似于ChatGPT同等能力的模型,这个复杂性是固有的。”他解释
,OGAI技术栈是从L0到L4层是分层解耦设计和实现的,也就是说并不用把整个OGAI技术栈提供给用户,才能够实现大模型开发,而是对应需要实现的层级功能进行选择。如果用户只需要提供算力多租户的裸金属方案 ,可能只需要L0层智算中心OS,不用关心最终用户会怎样进行大模型开发;如果用户需要模型开发相关工具链,可以按需选择L3层YLink提供的各类工具进行研发生产。关于发布OGAI的初衷,Owen ZHU指出,“浪潮信息做这件事情 ,是先行者,这是由视角决定。浪潮信息服务了全球客户,包括国内也是最主要的AI应用客户群体
,能够第一时间感知到大模型市场在缺什么,遇到了哪些问题
。”从用户的角度来看,更强的算力基础设施也会倒逼需求侧进一步升级。“做模型的不懂算力,做算力的不懂模型”,这种情况长期存在,但很多算法的创新与硬件的发展是相辅相成
,两者又需要共同发展。浪潮信息的这一做法是否切实可行,仍需市场来验证 。(本文首发钛媒体APP,作者 | 杨丽)
-
灰熊做空商汤:先有结论、再找论据的做空,已经走入死胡同15岁上北大,25岁自杀,他留下一首诗火了数十年,如今人人都会背手球——天下女子锦标赛:江苏队降级四强不断出席!哈登最新新闻,76人总裁发声,两大新下家出炉源氏木语与公牛集团联手共创,为品质之路夯实基石宋轶被曝上学情书收到手软!当看到学生照后,网友:确实心动了!0-3=出线!中超亚军拒绝爆冷,亚冠PK日本第2,13分稳拿第1库兹马25分普尔18分奇才揭幕战惨负步行者女子被开革抵偿金是3千枚硬币 涉事公司:没纪律不应承发硬币朝鲜队兴尽悲来,国内足联官宣确认,中国女足惊喜反转,球迷沸腾黄蜂蜡作用及食用方法中超积分榜:争冠悬念回来了,上海海港1-2不敌北京国安
相关内容
- ·步行者进决赛!托平:50万很多了,我们队大合同很少
- ·NBA揭幕战,勇士不敌太阳!布克狂轰32+6+8,保罗库里尽力了章子怡:如果再给我一次机会,我会选择嫁给撒贝宁,而不是汪峰
- ·鏖战42分钟,狂轰43+8+5!米切尔尽力了,骑士却逆转失败回顾“一尿成名”任素汐:上半身平凡,下半身贪婪,丑和性感相结合
- ·NBA常规赛:公牛加时险胜猛龙,德罗赞33分神奇逆袭黔首Ss削瓜2023-10-28 13:15广东黔首Ss削瓜2023-10-28 13:15广东
- ·“原上海上港老总”陈戌源,涉案超30亿元,应该死刑吗?白天演员、晚上间谍,隐姓埋名75年,他不只是“最好的姜子牙”
- ·中超积分榜:争冠悬念回来了,上海海港1-2不敌北京国安
- ·攻防两端全面反弹!湖人需要这样的安东尼·戴维斯终于赢了!湖人逆转太阳,杜兰特空砍39分,詹姆斯一锤定音
- ·谢绝13亿报价!错怪张康阳!u23青训获盛赞,国米赢患上战绩+敬畏
- ·东北冰雪旅游升温 南方旅行社北上“掘金”当年中国派出10万军民搜救,为啥一直找不到王伟?22年后才知真相
- ·原创 热刺豪取四连胜,孙兴慜连场破门助球队领跑英超!
- ·原创 76人对哈登的要价曝光,1位全明星+首轮签,向快船索要乔治和曼恩
- ·法甲金靴擦枪走火,本·耶德尔兄弟“睡粉”被控强奸生过孩子的女性为何遭老公嫌弃?医生直言:这个答案很真实
- ·英超最新战报,切尔西0:2,曼城2:1,近五轮首胜,富勒姆5:0大胜
- ·原创 干翻赵睿高诗岩!场均18+10+5+3,CBA天才征服姚明,完爆张镇麟
- ·火箭加时崩盘,遭逆转!文班亚马21+12爆发,杰伦格林赛末拉胯
- ·原创 男足世界杯女足奥运会悬了!宋凯铁腕治军,曝多人要离开国家队
最新内容
- ·独行侠轻取爵士,东契奇创历史!
- ·CBA综合|青岛险胜南京 北控不敌深圳我国为何重新装备7.62毫米机枪?俄军血的代价:轻机枪有时不顶用
- ·德甲:科隆状态略有好转,莱比锡能否重回联赛前四?尤文VS维罗纳
- ·三支中超球队本轮亚冠同时获胜赵露思这次又换对风格了!身穿凸显曲线的针织裙温婉又高级,太美了
- ·AC米兰努力填补伊布离去的空缺,327球拜仁老将成为潜在目标
- ·【西甲前瞻】西班牙国家德比,巴萨残阵难胜皇马
- ·纽约尼克斯VS新奥尔良鹈鹕,印第安那步行者VS克利夫兰骑士
- ·原创 天之骄子遭抛弃?鹈鹕交易方案出炉:锡安成为交易对象,热火冠军稳了
- ·持续补强!美媒:火箭进行5换3交易,季后赛有戏,公牛重建
- ·欧冠19分钟双响!哈兰德“吃人”庆祝,23岁37球比肩梅西拿千万片酬却用三十多个替身,拍戏只会读123,骑马都骑人脖子
推荐内容
- ·曼联顶薪长留拉什福德,太子变国王?先拿英超冠军!吴亦凡不服被判13年,二审上诉!被网友曝在狱中状态差,脸部浮肿
- ·【观察】弗赖堡,突然成了德国足球人才基地李湘胡可都是44岁,一个水桶腰却风韵犹存,一个身材苗条却如老妇
- ·3年1.67亿美金,拒绝推倒重建!湖人表明态度,老詹也该沉下心了布朗尼住院48小时,白人女友守护!詹皇夫妇满意,认可未来儿媳
- ·悉尼FCvs墨尔本胜利,澳超推荐焦点赛事前央视名主持独子被传得绝症,家人已做好心理准备,本人首度回应
- ·肖裕仪加盟澳大利亚球队,中国女足留洋军团凑齐11人,男足仅一人苦苦支撑大清的最后一位格格,一直活到2014年,临终前含泪说出皇室丑闻
- ·自降4000万!大巴黎高薪挖拜仁叛将,后防华丽升级,冲欧冠有望败好感的6部续集烂剧,哪部让你至今都无法原谅?
- ·澳超推荐墨尔本城守门员在投掷照明弹后避免被禁赛杨丽萍再惹争议!新舞蹈女舞者手摸男舞者私密部位,画面被曝光
- ·2023斯巴达勇士儿童赛全国总决赛拉开战幕幼师穿超短裙领舞,后排爸爸们很尴尬!网友:思想肮脏看啥都有问题
- ·@湖北人 新规公布!这类人评职称条件放宽
- ·湖人新闻:老詹将成历史第三人,哈姆帅位晃动,爵士分心拉塞尔
热点内容
- ·近11场8胜防守效率第二,快船四巨头终于有了冠军相?
- ·马刺当年为何如此辉煌,除了邓肯和波波维奇,还因为他117秒棍砸45次!初二男生遭五人暴力殴打,其父铁棍反击活活打死
- ·原创 于根伟当前3+保级判官,吴金贵保亚冠资格,申花5外援出战,不掉队
- ·原创 CBA消息:山东男篮官宣换帅;杜锋弃用赵睿接班人;沈梓捷成核心
- ·原创 湖人夺冠并非偶然!多方解读湖人本赛季的进步,佩林卡功不可没
- ·原创 约基奇22分12篮板9失误!罗斯末节10分却遭弃用,灰熊4分憾负掘金
- ·Whoscored评本轮欧联最佳阵:利物浦3人落选,维尔茨&沙拉维在列
- ·拒绝大逆转!公牛加时擒猛龙 德罗赞33分丢关键罚球卡鲁索制胜3分锅子篮球2023-10-28 11:18辽宁锅子篮球2023-10-28 11:18辽宁
- ·又来一支NBA球队!森林狼安排专人现场考察杨瀚森,中国大个子很受关注54亿到账且暴瘦50斤的贾玲,再次让世界刮目相看!
- ·乔治36分对飙马尔卡宁,克拉克森关键远投,爵士2分击沉快船啦个球2023-10-28 12:18江苏啦个球2023-10-28 12:18江苏