大模型算力荒?浪潮信息也来“掘金卖铲”虞书欣早期比基尼照片曝光!网友:她性感火辣不止眼睛大
时间:2025-03-14 08:18:38 来源:Juliet Harold网 作者:休闲 阅读:657次
图片来源@视觉中国刚刚过去的掘金卖铲一周
,浪潮信息发布新品OGAI(Open GenAI Infra)元脑生智,大模意在为大模型业务提供AI算力系统环境部署、型算信息算力调度及开发管理能力的力荒浪潮辣软件栈 。浪潮信息作为一家以服务器为主营业务的也虞友性企业,受到来自生成式AI带来的书欣算力牵引潜力,下游客户需求旺盛,早期止眼但另一方面,比基在英伟达、尼照英特尔等供应商出口限制的片曝影响下,人工智能芯片普遍短缺 ,光网感火做软件,掘金卖铲也是大模增强市场竞争力的多一种选择
。浪潮信息高级副总裁刘军告诉钛媒体,型算信息当前阶段仍处于大模型开发阶段,力荒浪潮辣除了缺算力外,基础模型能力还没有足够高的提升,最终呈现出来的效果也不见得会真正能投入使用。刘军认为 ,算力供给解决到一定程度 ,基础大模型的开发能力提升到一定程度,就具备了商业化能力
,进而在各类场景
、应用的落地通道也就打开了 。而在中国
,现阶段能真正达到GPT-4的模型的还没有,这就意味着将应用创新能力都寄托在OpenAI上也是明显不可能,也是不现实的
。大模型也需要生产力工具据公开信息,2021年9月 ,浪潮信息就已经在研发大模型,面向大模型场景解决方案
,支持AI芯片、服务器,以构建低时延的分布式系统
。浪潮信息发布参数量为2457亿的中文大语言模型“源1.0”
。在“源”大模型的研发过程中,浪潮信息的AI团队逐步建立了完整的从公开数据爬取到数据清洗、格式转化、数据质量评估的完整流程和工具链
,并完成了5TB高质量中文数据集的清洗工作。“源”大模型的数据集和清洗经验和帮助国内不少AI团队提升了其大模型的性能表现。在这个过程中,浪潮信息遇到了很多大模型研发应用中的问题
,例如公共算力调度问题
、数据清洗问题、大模型分布式训练性能不佳等等 。为此,浪潮信息团队从三个层面进行优化:一是系统全栈性,对于涉及多团队 、多环节、多流程的业务,需要系统性架构和全栈解决方案;二是兼容适配性,由于模型训练需要大量的开源工具、组件 ,但存在兼容和性能方面的问题;三是性能优化的挑战
,一个大的集群系统涉及的组件数以千计,怎样优化性能是问题。举个例子,针对于提升大模型分布式训练的计算效率,特别是在实际的AI集群环境中,可能存在GPU之间的互联带宽受限,或者AI服务器之间的网络互联带宽有限的情况,浪潮信息自2022年以来为客户将大模型训练的GPU峰值效率从30%左右提升到50%
,提升GPU利用率。而在“源”大模型研发过程中,针对千卡规模算力的高效调度问题,浪潮信息通过对云原生的调度系统进行了改造来大幅加速其启动速度
,并重点解决了RDMA网络在容器中的接入和适配优化 ,从而采取构建满足大模型需求的算力调度系统;针对训练任务的长期稳定运行问题,浪潮信息还引入了多种对集群性能的监控手段和性能数据分析方法
。客户最关心什么但实现AIGC的能力,除了算力资源的限制外 ,仍存在诸多技术难点,包括在模型的训练、效果测评
、落地场景应用方面兼具挑战性,对普通开发者和中小企业来说更是可望不可及
。整体来看,OGAI(Open GenAI Infra)元脑生智软件栈由5层架构组成,从L0到L4分别对应于基础设施层的智算中心OS产品
、系统环境层的PODsys产品
、调度平台层的AIStation产品、模型工具层的YLink产品和多模纳管层的MModel产品
。L0层智算中心OS的定位是面向智算中心等公共算力服务平台,面向多租户场景,提供灵活多样的以裸金属为主的AI算力服务。L1层PODsys聚焦于AI集群部署场景
,提供了包括基础设施环境安装、环境部署、用户管理、系统监控和资源调度一整套工具链
,旨在打造一个易用
、高效、开放 、兼容的智算集群系统环境部署方案 。L2层AIStation聚焦于AI开发场景,通过云原生技术对集群系统中的计算资源、存储资源和网络资源进行统一的接入和纳管,提供了易于使用的开发环境和作业管理界面,并基于内置算力调度系统和训练稳定保障系统来实现易于接入
、按需分配、弹性扩展和高效稳定的AI研发应用支撑平台。L3层YLink聚焦于大模型的开发过程 ,通过集成整合浪潮信息在大模型研发过程中的工具和开源工具,为用户提供高效
、便捷与标准化的大模型开发与优化流程
。L4层MModel定位于多模型管理与服务平台,帮助客户更好地管理和评估模型,加速模型的部署和应用。浪潮信息人工智能与高性能应用软件部AI架构师Owen ZHU还告诉钛媒体 ,“现在企业面临的最大挑战是,需要用大规模硬件的基础设施才能够训练一个类似于ChatGPT同等能力的模型
,这个复杂性是固有的
。”他解释,OGAI技术栈是从L0到L4层是分层解耦设计和实现的,也就是说并不用把整个OGAI技术栈提供给用户,才能够实现大模型开发
,而是对应需要实现的层级功能进行选择 。如果用户只需要提供算力多租户的裸金属方案
,可能只需要L0层智算中心OS,不用关心最终用户会怎样进行大模型开发;如果用户需要模型开发相关工具链
,可以按需选择L3层YLink提供的各类工具进行研发生产
。关于发布OGAI的初衷,Owen ZHU指出,“浪潮信息做这件事情,是先行者,这是由视角决定 。浪潮信息服务了全球客户,包括国内也是最主要的AI应用客户群体 ,能够第一时间感知到大模型市场在缺什么,遇到了哪些问题 。”从用户的角度来看
,更强的算力基础设施也会倒逼需求侧进一步升级。“做模型的不懂算力,做算力的不懂模型”,这种情况长期存在,但很多算法的创新与硬件的发展是相辅相成 ,两者又需要共同发展。浪潮信息的这一做法是否切实可行
,仍需市场来验证
。(本文首发钛媒体APP
,作者 | 杨丽)
(责任编辑:休闲)
相关内容
- ·1亿英镑!热刺老板通牒列维,拜仁迎利好,凯恩妻子在慕尼黑找房“双面玉女”刘诗诗现形记:表面人淡如菊,实则情史丰富内心狂野
- ·利拉德加盟热火大概率告破!热火失去加价热情,谈判进入僵局被张艺谋藏了13年,如今成人生赢家的陈婷,当年凭什么赢了巩俐?
- ·成都大运会|国乒包揽7金 钱天一荣膺四冠王午睡可能影响寿命!医生提醒:55岁以后,牢记午睡“三不要”
- ·推荐霆版 2023款雪佛兰开拓者购车指南央视主持人是美国间谍?埋伏20年未被发现,因一句话而被抓
- ·澳大利亚羽毛球果真赛:翁泓阳2比1李梓嘉进决赛 有望夺冠
- ·佩德里修补哈维贯穿伤:巴黎?我要留在巴萨很多年在尺度底线疯狂试探,这国片光预告浑身冒冷汗,还是张艺谋敢拍!
- ·CBA转会截止日和世界杯双重压力!球员面临续约和转会传闻!娱乐圈的“假戏真做”,祸害了多少女明星?
- ·王楠大发雷霆!7岁女儿犯错被妈妈揍,直接上脚踢,富豪爸爸心疼在国外街头偶遇宋佳遛狗,素颜不精致,但自然松弛不做作看着舒服
最新内容
- ·双塔威猛!森林狼撕碎灰熊领跑联盟,爱德华兹伤退,李凯尔准三双
- ·身形像老鹰、脸形似猴子!南宁邕江边来了位“特殊客人”郑恺嫖娼门升级!同行4人IP露端倪,苗苗停更10天,工作室疑默认
- ·交易号码!爱德华兹改穿森林狼5号 李凯尔换回1号娱乐圈的“假戏真做”,祸害了多少女明星?
- ·利拉德交易进展:热火将再次报价 开拓者仍不满足?37岁隆多结婚了!美娇妻身材火辣,NBA极品花魁,不输金卡戴珊
- ·AC米兰意甲赢了9场,看都赢了谁!
- ·帝星凯恩已30,拜仁高层赴伦敦谈判赠而立贺礼刘涛黑历史被扒出,某女星公开指责:她技术很好,为上位不顾一切
- ·NBA花魁厉害,穿泳装在湖边游泳,秀腹肌,不愧是卡戴珊家族的人那英评论破 180W!刀郎《罗刹海市》恐要下架,杨坤现身背影落寞
- ·意甲直播:尤文图斯重建启程!巴萨友谊赛相互检验实力央视谍战剧再出“王炸”,狂追6集不过瘾,就算柳云龙来也没胜算
- ·篮网赢家之路:布里奇斯绝杀老鹰,哈登逼宫将成关键
- ·利拉德交易进展:热火将再次报价 开拓者仍不满足?情妇揭秘头号毒枭私生活:女人如衣服,罩杯比智慧更重要
热点内容
- ·澳超推荐墨尔本城守门员在投掷照明弹后避免被禁赛52岁女神杨珏莹终于结婚了,新郎让人意外,整个娱乐圈都炸了锅
- ·5年2.52亿美金!恭喜湖人,超级球星愿意续约,詹姆斯要打到42岁娱乐圈的“假戏真做”,祸害了多少女明星?
- ·“大黄鱼抱枕”被炒到666元 盒马回应:只赠予不发售,建议子细分说
- ·全联盟通报+罚款!肖华开始重视哈登利拉德问题,76人成受益者央视最帅主持人边策:和母亲通话1小时后跳楼身亡,年仅32岁
- ·每人50万美元到手!湖人夺NBA第一届季中锦标赛冠军,官博连发16个“湖人总冠军”庆祝,王猛:MVP我选詹姆斯被禁五年的国产片,真敢拍!
- ·5年来换了第4个东家!巴萨花6100万买罗克,期待他是新大罗
- ·申花VS上港首发预测:王牌双腰坐镇,归化国脚领衔,两大飞翼出击女运动员“难以启齿”的心酸:比赛前要“刮毛”,赛后忍痛扯泳衣
- ·大模子狂欢,富士康工人流向AI标注厂:用青春饲养AI,最后又被AI扩展
- ·原创 火箭再战马刺!狄龙缺阵更像轮休?乌度卡或放烟幕弹,留力斗灰熊
- ·NBA花魁厉害,穿泳装在湖边游泳,秀腹肌,不愧是卡戴珊家族的人杨丽萍私生活糜乱,上厕所、洗澡全靠男助理,网友:现实版老佛爷