火山引擎发布大模型训练云平台(AI大模型扎堆上线,你觉得谁能强势出圈?)

财经资讯 2023-04-18 20:05:09

4月18日，火山引擎在其举办的“原动力大会”上发布自研DPU（数据处理器）等系列云产品，并推出新版机器学习平台：支持万卡...更多知识由小编为你整理了《火山引擎发布大模型训练云平台》详细内容,欢迎关注学习。

$火山引擎发布大模型训练云平台(AI大模型扎堆上线,你觉得谁能强势出圈?)$

火山引擎发布大模型训练云平台

4月18日，火山引擎在其举办的“原动力大会”上发布自研DPU（数据处理器）等系列云产品，并推出新版机器学习平台：支持万卡级大模型训练、微秒级延迟网络，让大模型训练更稳更快。火山引擎总裁谭待称，AI（人工智能）大模型有巨大潜力和创新空间，火山引擎会服务客户做好大模型，共同推动各行业的智能化升级。

会上，火山引擎宣布与字节跳动国内业务并池。基于内外统一的云原生基础架构，抖音等业务的空闲计算资源可极速调度给火山引擎客户使用，离线业务资源分钟级调度10万核CPU（中央处理器），在线业务资源也可潮汐复用，弹性计算抢占式实例的价格最高可优惠80%以上。

火山引擎还推出了分布式云原生平台、多云安全、多云CDN（内容分发网络）、混合云平台“veStack”等系列产品，支持客户更好地使用多家云服务。“字节跳动用过全球几乎每一朵公有云，以及大多数CDN，形成一套完整的分布式云管理体系和架构实践”，谭待坚信火山引擎是最懂多云和分布式云的云服务商，这些技术能力都会毫无保留地提供给客户。

如何让大模型训练快速“跑”起来？

自2022年底发布以来，ChatGPT（一款对话类人工智能应用）成为人类历史上最快获得上亿用户的消费级互联网应用。最新的GPT-4大模型，在法律、数学、生物学等多项测试中超过90%人类。

谭待认为，国内很多科技公司投入到大模型建设中，他们有优秀的技术团队，也有丰富的行业知识和创新想法，但往往缺乏经过大规模场景实践的系统工程能力。火山引擎要做的就是为大模型客户提供高稳定性和高性价比的AI基础设施。

此前火山引擎机器学习平台经过抖音等海量用户业务长期打磨，字节跳动副总裁杨震原认为，业务创新需要试错，但试错也一定要控制成本。通过潮汐、混部等方式，火山引擎实现资源的高利用率和极低成本。以抖音推荐系统为例，工程师用15个月的样本训练某个模型，5小时就能完成训练，成本只有5000元。火爆全网的抖音“AI绘画”特效，从启动到上线只用一周多时间，模型由一名算法工程师完成训练。

MiniMax（一家国内人工智能企业）是目前国内少数已经推出自研大模型产品的AI技术公司，拥有文本、视觉、声音三种通用大模型引擎能力。据MiniMax联合创始人杨斌介绍，MiniMax与火山引擎合作建立了超大规模实验平台，实现千卡级态化训练；超大规模推理平台有万卡级算力池，支撑单日过亿次调用。在火山引擎的云上，MiniMax大模型业务实现快速突破。

谭待透露，火山引擎的大模型云平台获得智谱AI、昆仑万维等众多企业的良好反馈，国内大模型领域，七成以上已是火山引擎客户。

大模型是云厂商弯道超车机会？

有评论称，大模型将成为云厂商弯道超车的机会。谭待对此称，大模型还在发展初期，面临数据安全、内容安全、隐私保护、版权保护等许多问题需要努力解决。但可以预见，大模型将带动云上AI算力急剧增长，AI算力的工作负载与通用算力的差距会越来越小，这会为各家云厂商带来新的机会，同时也会对数据中心、软硬件栈、PaaS(平台即服务)平台带来新的挑战。

以数据中心的算力结构为例，谭待表示：“大模型需要大算力，虚拟化会带来资源损耗，规模越大就损耗越多。未来3年内，大规模的算力中心，都将形成‘CPU（中心处理器） GPU（图形处理器） DPU（数据处理器）’的混合算力结构，CPU负责通用计算，GPU负责AI计算，DPU负责资源卸载、加速和隔离，提升资源效率”。

此次原动力大会上，火山引擎发布了新一代自研DPU，实现计算、存储、网络的全组件卸载，释放更多资源给业务负载。火山引擎尽管是“最年轻”的云厂商，其自研DPU已达到业界领先水平，网络性能高达5000万pps转发能力、延迟低至20us。基于自研DPU的各类计算实例性能也有显著提升，例如适用于大模型分布式并行训练场景的GPU实例，相较上一代实例集群性能最高提升3倍以上。

自动驾驶公司毫末智行与火山引擎合作打造智算中心，为DriveGPT（自动驾驶生成式模型）自动驾驶生成式预训练模型提供强大的算力支持。毫末智行CEO顾维灏介绍，DriveGPT使用量产车4000万公里的人驾数据训练，参数规模达1200亿，对自动驾驶认知决策模型进行持续优化。

谭待表示，在大模型及下游应用发展推动下，无论传统企业还是初创企业，对AI算力都有迫切需求，企业使用多家云服务将成为常态。同时，各行业有自己高质量的私有语料，大模型不会一家独大，而是会在千行百业生长，形成多模型共生甚至协作的生态。“未来将是‘多云多模型’的时代”，谭待称。

会上，火山引擎还推出了分布式云原生平台、多云安全、多云CDN（内容分发网络）、veStack混合云平台等系列产品，支持客户更好地使用多家云服务。“字节跳动用过全球几乎每一朵公有云，以及大多数CDN，形成一套完整的分布式云管理体系和架构实践”，谭待坚信火山引擎是最懂多云和分布式云的云服务商，这些技术能力都会毫无保留地提供给客户。

杨震原进一步表示，火山引擎对内对外提供统一的产品，抖音、今日头条等APP开屏都加上了“火山引擎提供计算服务”。杨震原说：“数字化时代，机器学习可以智能、高效地围绕目标解决问题。数字化的下一步是智能化，我们在机器学习方面的技术积累和经验，都会通过火山引擎提供给外部客户，帮助更多企业做好智能化”。

【内容声明】文章内容由新财梯网编辑整理，新闻来源：新京报

火山引擎发布大模型训练云平台相关拓展阅读

火山引擎发布大模型训练云平台(AI大模型扎堆上线,你觉得谁能强势出圈?)

AI大模型扎堆上线,你觉得谁能强势出圈?

答：4月2日,百度正式发布百度自动驾驶云Apollo Cloud2.0。百度智能驾驶事业群副总裁、智能网联业务总经理高果荣表示,Apollo Cloud2.0基于大模型实现了自动驾驶数据智能的搜索引擎,大模型的能力积累了自动驾驶数据智能的搜索引擎,从海量数据中能够......更多详细

火山引擎举办视频云科技峰会,发布会上哪些信息值得关注?

答：视频点播、veImageX。实时音视频等核心产品，传输网络、智能生产、智能生产火山引擎视频云还支持虚拟空闲音乐会、数字替身Avatar和一起观看嘀嗒等实用功能，虚拟偶像演唱会支持与虚拟偶像主播实时交流，为观众带来全新的跨维度交流......更多详细

以上就是好财梯网整理的关于火山引擎发布大模型训练云平台(AI大模型扎堆上线,你觉得谁能强势出圈?)的全部内容，希望你在了解【今日财经：##解读】的基础上可以帮助到你，让我们一起学习理财知识。

阅读全文

标签: 火山引擎发布大模型训练云平台

上一篇：天河发布双项政策“大礼包”：“招即奖、来即奖、申即奖”(有人了解广州信息协会这个机构吗?常年有什么活动?) 下一篇：一季度GDP同比增长4.5%！9图速览中国经济良好开局(中国经济已经触底了么)

火山引擎发布大模型训练云平台(AI大模型扎堆上线,你觉得谁能强势出圈?)

火山引擎发布大模型训练云平台

火山引擎发布大模型训练云平台相关拓展阅读

AI大模型扎堆上线,你觉得谁能强势出圈?

火山引擎举办视频云科技峰会,发布会上哪些信息值得关注?

最新文章

推荐文章