AI大模型技术应用爆发,云市场也在加速变革。4月18日,火山引擎在其举办的“原动力大会”上发布自研DPU等系列云产品,并推出新版机器学习平台:支持万卡级大模型训练、微秒级延迟网络,让大模型训练更稳更快。火山引擎总裁谭待表示,AI大模型有巨大潜力和创新空间,火山引擎会服务客户做好大模型,共同推动各行业的智能化升级。
“国内有数十家做大模型的企业,大多已经在火山引擎云上。”谭待认为,大模型不会一家独大。与其他云厂商力推自家大模型不同的是,火山引擎将接入多家大模型深度合作,为企业和消费者提供更丰富的AI应用。
(相关资料图)
会上,火山引擎宣布与字节跳动国内业务并池。基于内外统一的云原生基础架构,抖音等业务的空闲计算资源可极速调度给火山引擎客户使用,离线业务资源分钟级调度10万核CPU,在线业务资源也可潮汐复用,弹性计算抢占式实例的价格最高可优惠80%以上。
图说:字节跳动副总裁杨震原分享抖音的机器学习实践 采访对象提供(下同)
让大模型训练快速跑起来
自2022年底发布以来,ChatGPT成为人类历史上最快获得上亿用户的消费级互联网应用。最新的GPT-4大模型,更是在法律、数学、生物学等多项测试中超过90%人类。
谭待表示,国内很多科技公司投入到大模型建设中,他们有优秀的技术团队,也有丰富的行业知识和创新想法,但往往缺乏经过大规模场景实践的系统工程能力。火山引擎要做的就是为大模型客户提供高稳定性和高性价比的AI基础设施。
据悉,火山引擎机器学习平台经过抖音等海量用户业务长期打磨,支持单任务万卡级别的超大规模分布式并行训练场景。GPU弹性计算实例可灵活调度资源,随用随取,最高可以为客户节省70%的算力成本。
字节跳动副总裁杨震原认为,业务创新需要试错,试错要大胆、敏捷,但试错也一定要控制成本。通过潮汐、混部等方式,火山引擎实现资源的高利用率和极低成本。以抖音推荐系统为例,工程师用15个月的样本训练某个模型,5小时就能完成训练,成本只有5000元。火爆全网的抖音“AI绘画”特效,从启动到上线只用一周多时间,模型由一名算法工程师完成训练。
MiniMax是目前国内少数已经推出自研大模型产品的AI技术公司,拥有文本、视觉、声音三种通用大模型引擎能力。据MiniMax联合创始人杨斌介绍,MiniMax与火山引擎合作建立了超大规模实验平台,实现千卡级常态化训练;超大规模推理平台有万卡级算力池,支撑单日过亿次调用。在火山引擎的云上,MiniMax大模型业务实现快速突破。
谭待透露,火山引擎的大模型云平台获得智谱AI、昆仑万维等众多企业的良好反馈。国内大模型领域,七成以上已是火山引擎客户。
图说:火山引擎总裁谭待宣布支持“多云多模型”的未来架构
向“多云多模型”架构演进
有评论称,大模型将成为云厂商弯道超车的机会。对此,谭待表示,大模型还在发展初期,面临数据安全、内容安全、隐私保护、版权保护等许多问题需要努力解决。但可以预见,大模型将带动云上AI算力急剧增长,AI算力的工作负载与通用算力的差距会越来越小,这会为各家云厂商带来新的机会,同时也会对数据中心、软硬件栈、PaaS平台带来新的挑战。
以数据中心的算力结构为例,谭待表示:“大模型需要大算力,虚拟化会带来资源损耗,规模越大就损耗越多。未来3年内,大规模的算力中心,都将形成‘CPU+GPU+DPU’的混合算力结构,CPU负责通用计算,GPU负责AI计算,DPU负责资源卸载、加速和隔离,提升资源效率。”
此次原动力大会上,火山引擎发布了新一代自研DPU,实现计算、存储、网络的全组件卸载,释放更多资源给业务负载。火山引擎尽管是“最年轻”的云厂商,其自研DPU已达到业界领先水平,网络性能高达5000万pps转发能力、延迟低至20us。基于自研DPU的各类计算实例性能也有显著提升,例如适用于大模型分布式并行训练场景的GPU实例,相较上一代实例集群性能最高提升3倍以上。
自动驾驶公司毫末智行与火山引擎合作打造智算中心,为DriveGPT自动驾驶生成式预训练模型提供强大的算力支持。毫末智行CEO顾维灏介绍,DriveGPT使用量产车4000万公里的人驾数据训练,参数规模达1200亿,对自动驾驶认知决策模型进行持续优化。
谭待表示,在大模型及下游应用发展推动下,无论传统企业还是初创企业,对AI算力都有迫切需求,企业使用多家云服务将成为常态。同时,各行业有自己高质量的私有语料,大模型不会一家独大,而是会在千行百业生长,形成多模型共生甚至协作的生态,“未来将是‘多云多模型’的时代”。
火山引擎也顺势推出了分布式云原生平台、多云安全、多云CDN、veStack混合云平台等系列产品,支持客户更好地使用多家云服务。“字节跳动用过全球几乎每一朵公有云,以及大多数CDN,形成一套完整的分布式云管理体系和架构实践。”谭待坚信火山引擎是最懂多云和分布式云的云服务商,这些技术能力都会毫无保留地提供给客户。
杨震原进一步表示,火山引擎对内对外提供统一的产品,抖音、今日头条等APP开屏都加上了“火山引擎提供计算服务”。杨震原说:“数字化时代,机器学习可以智能、高效地围绕目标解决问题。数字化的下一步是智能化,我们在机器学习方面的技术积累和经验,都会通过火山引擎提供给外部客户,帮助更多企业做好智能化。”
新民晚报记者 金志刚
关键词:
-
火山引擎发布大模型训练云平台:支持万卡训练,集群性能提升3倍
AI大模型技术应用爆发,云市场也在加速变革。4月18日,火山引擎在其举办的“原动力大会”上发布自研DPU等系列云产品,并
-
江西警方通报:村民被当成猎物遭枪击致死涉事4人被刑拘_环球热议
【江西警方通报: 村民遭枪击致死涉事4人被刑拘 】 警方通报村民疑被当成猎物遭枪击死亡 4月14日,江西上饶,信州公安分局沙溪派出所接到报警
-
2023年甘肃会计初级准考证打印入口4月25日开通
2023年甘肃会计初级准考证打印入口4月25日开通由初级会计师考试栏目提供,查找更多考试报名资讯、准考证打印、成绩查询或2023年甘肃会计初级准
-
当前关注:确保专项行动落细落实 青岛完善发改领域机制创新打法
全市发展改革领域迅速兴起开展“深化作风能力优化营商环境”的热潮
-
涉及24个小区!预计11月底完成!金山启动的这项实事项目,让你不再“失联” 环球报资讯
在地下车库使用手机时,没有信号往往令人尴尬,有时甚至会带来麻烦和安全隐患。为了打通信号盲区“最后一公里”,近日,金山区正式启动小区地
-
iPhone 15 Pro真机曝光 侧边按键变了
又传出了iPhone+15+Pro的消息,在今年的iPhone+15系列上,有望进一步拉大区别。除了高刷显示屏、处理器、摄像头等区别,工业设计上很可能出现
-
咨询函的格式范文英文 咨询函的格式范文
今天来聊聊关于咨询函的格式范文英文,咨询函的格式范文的文章,现在就为大家来简单介绍下咨询函的格式范文英文,咨询函的格式范
-
五千多年前,大家怎么发“朋友圈”? 环球观焦点
良渚刻画符号是文字的祖先在史前时代,人们经常在器物表面描绘或刻画图案用于表达意思《良渚文化刻画符号》一书里共收录有700多个符号它们有的
-
原来这么多冰淇淋、生鲜都在青浦的这些冷链企业里
青浦区聚集多家物流企业、冷链企业总部,目前青浦区冷库容量约200万立方米,约占上海冷库容量的11 42%。届进博会期间,近100个参展商、3000箱
-
国家统计局:一季度全国城镇调查失业率为5.5%_天天观速讯
国家统计局:一季度全国城镇调查失业率为5 5%---中国经济网北京4月18日讯国家统计局今天发布的数据显示,一季度,全国城镇调查失业率平均值为5
-
比亚迪最高技术加持!仰望U8越野车正式开售:109.8万元
比亚迪最高技术加持!仰望U8越野车正式开售:109 8万元
-
山东长岛:深海有人家,海岛迎“三变”|世界观焦点
山东长岛:深海有人家,海岛迎“三变”---长岛人林绍鹏经营的民宿“Dream1902”有点特殊它由百余年前的老房子改建而成,保留原来特色的同时,
-
今日要闻!欧加登(关于欧加登介绍)
1、欧加登一译“奥加登”。2、索马里语意为“灼热的土地”。3、是埃塞俄比亚东部索马利亚州的部分地区,面积约为20000平方公里,北部为豪德高
-
别让"霸王式"扫码成为消费自由的"拦路虎"-全球最资讯
近日,有消费者在北京某餐馆用餐后开发票时,被要求必须扫码关注某公众号才能开具发票,“不关注就拿不到公司抬头”(据4月17日《北京青年报》)。
-
2020年6月21日日环食有哪些特点(2020年6月21日日环食时间表)|环球速讯
2020年6月21日将上演金边日食,这次日环食是21世纪以来食分最大的一次,同时也是8年来我国观测条件最好的一次。那么此次金边日食有哪些特点呢?
-
天天新资讯:挑战“最强大脑”!株洲市首届青少年数独智力运动会落幕
2023年株洲市首届青少年数独智力运动会决赛现场。本文摄影 谭筱。本次赛事于3月中旬以线上的方式进行初赛,共计吸引2000人参加,从初赛胜出的2
-
世界即时看!【比赛日】河南队主场1-1成都蓉城,拿到新赛季第一个积分
【比赛日】首战!加油!2023赛季首战,河南队主场1-1成都蓉城,拿到新赛季第一个积分。
-
法国前经济部长:美国屡屡窃取法国公司信息 侵犯法国主权 时讯
新华社巴黎4月16日电(记者乔本孝)法国前经济部长阿诺·蒙特堡日前在公开听证会上说,美国情报机构屡屡窃取法国公司信息,侵
-
数学与应用数学如何选科习
1、数学与应用数学如何基础数学就是纯数学研究,应用数学,就是生产生活中的数学,计算数学就是研究计算方法(侧重计算机方向)。数学与应用数
-
濮阳市人大常委会任免名单
濮阳市人民代表大会常务委员会公告〔九届〕第一号台前县第十一届人民代表大会常务委员会第七次会议补选朱良才为濮阳市第九届人民代表大会代表