国内最大智算中心正式投用:每秒690亿亿次浮点运算 可训练万亿参数大模型

国内最大智算中心正式投用:每秒690亿亿次浮点运算 可训练万亿参数大模型

    正在检查是否收录...

快科技8月31日消息,日前,由中国移动承建的国内运营商最大单集群智算中心在哈尔滨正式运营。

据悉,该智算中心具有单集群算力规模最大、国产化网络设备组网规模最大等特点。

单集群智算中心把所有AI加速卡打造成1个集群,用以支持千万亿级参数的大模型进行训练。

这个集群智算中心通过先进的智算网络技术把上万块GPU芯片像积木”一样拼接在一起,大幅提升GPU节点间的通信效率,将数据训练完成时间缩短20%,从而形成超级算力集群。

这个单集群智算中心共有超过1.8万张AI加速卡,运算能力达到每秒690亿亿次浮点运算,能满足万亿参数的大模型训练要求。

据项目负责人介绍,该只算中心相当于300多万台高性能个人计算机每秒的计算能力,单集群相当于编队,减少互相传输时间,在编队内就把整个计算完成了。

总结

文章要点总结:
中国移动承建的国内最大规模单集群智算中心已在哈尔滨启动运营,标志着算力基础设施建设的一大飞跃。该智算中心凭借超大规模的国产化网络设备和集成能力,将数千万级参数的AI大模型训练效能提升至全新高度。中心内部整合超过1.8万张AI加速卡,形成每秒可进行690亿亿次浮点运算的超级算力集群,效率等同于数百万台高性能计算机,并能缩短20%的数据训练时间。该模式通过高效的智算网络技术将海量GPU芯片紧密融合,确保了强大的计算能力得以在最短时间内输出,是赋能大型模型训练和高端智能应用场景的基石。 大模型模型训练gpuai加速高性能数据训练智能应用高性能计算大型模型基础设施通信效率
  • 本文作者:李琛
  • 本文链接: https://wapzz.net/post-19895.html
  • 版权声明:本博客所有文章除特别声明外,均默认采用 CC BY-NC-SA 4.0 许可协议。
本站部分内容来源于网络转载,仅供学习交流使用。如涉及版权问题,请及时联系我们,我们将第一时间处理。
文章很赞!支持一下吧 还没有人为TA充电
为TA充电
还没有人为TA充电
0
  • 支付宝打赏
    支付宝扫一扫
  • 微信打赏
    微信扫一扫
感谢支持
文章很赞!支持一下吧
关于作者
2.3W+
5
0
1
WAP站长官方

写作灵感干涸?笔灵AI写作工具来拯救,让你的创意泉涌不断

上一篇

Comfyui线稿转绘工作流 一键掉进彩色世界

下一篇
  • 复制图片
按住ctrl可打开默认菜单