发布于: iPhone转发:0回复:0喜欢:0
回复@李国光1983: 现在的互联是通过PCIE通道吧的吧,传输速度受限,相比NVLINK慢很多。而且现在那种上亿参数的大模型需要更大的规模集群,这方面差距更大了//@李国光1983:回复@张鹏n7t:深算3支持8卡互联,
引用:
2024-03-03 10:51
这篇文章主要讨论了国内AI产业对高端国产GPU的需求增加的背景下,能否用国产芯片来承接Nvidia环境的项目迁移的问题。为了解决这个问题,作者进行了一组测试数据,展示了客流统计算法从Nvidia环境往国产海光CPU+DCU的迁移训练过程。
作者验证了pytorch和paddlepaddle两种深度学习框架,以及目...