12月12日消息,发封装据报道,布全IBM在光学技术方面获得新进展,新光训练有望提升数据中心训练和运行生成式AI模型的电共效率。
IBM推出了新一代光电共封装(CPO)工艺。工艺该技术利用光学连接,模型实现了数据中心内部的速度升倍光速数据传输,完美补充了现有的将提短距离光缆系统。
研究人员展示了光电共封装技术将如何重新定义计算行业在芯片、发封装电路板和服务器之间的布全高带宽数据传输。最大限度地减少GPU停机时间,新光训练同时大幅加快AI工作速度。电共
具体而言,工艺这一新技术带来了三大方面的模型显著优势:
首先,它极大地降低了规模化应用生成式AI的速度升倍成本。与中距离电气互连装置相比,光电共封装技术的能耗降低了五倍以上,同时,数据中心互连电缆的长度也从传统的1米扩展至数百米,进一步提升了数据中心的灵活性和扩展性。
其次,该技术显著提高了AI模型的训练速度。与传统的电线相比,使用光电共封装技术训练大型语言模型的速度几乎提升了五倍。
这意味着,原本需要三个月才能训练完成的标准大语言模型,现在仅需三周即可完成。对于更大的模型和更多的GPU,性能的提升将更为显著。
最后,光电共封装技术还显著提升了数据中心的能效。据估算,每训练一个AI模型所节省的电量,竟然相当于5000个美国家庭一年的耗电量总和。这一数据无疑彰显了该技术在节能减排方面的巨大潜力。
顶: 6857踩: 36
IBM发布全新光电共封装工艺:AI模型训练速度将提升5倍
人参与 | 时间:2024-12-24 20:47:25
相关文章
- [流言板]谁的青春!尼克斯比赛现场,无耻之徒主角艾米
- [流言板]错失绝杀!戈贝尔钉板大帽申京,爱德华兹抛投不中进加时
- [流言板]终于进了!库明加接球三分强投命中追到16分,本场5中1得3分
- 津媒:往年联赛准入工作成了笑话 今年足协对准入要求将非常严格
- 足球报:日本对阵国足将精锐尽出三新人入选为稳步推进球队迭代
- [流言板]火力全开!哈登第1节11中9,三分7中5,得到23分2助攻1抢断
- [流言板]鲍尔全场得到50分5篮板10助攻1抢断,得分创生涯新高
- 美国拟用SpaceX卫星群监视全球目标 星链卫星总计7213颗
- 北京冬奥会双人滑冠军隋文静复出 备战米兰冬奥会
- [流言板]轻松!杜兰特今日出战29分钟创赛季新低,此前最低为37分钟
评论专区