发布于: 修改于:雪球转发:0回复:0喜欢:0
首先,大模型的数据来源比较多样,不止期刊,还有书籍、新闻、问答等等。 其次,现在大模型是跨语言的,也就是说中文的大模型,也需要用其他语言的数据来一起训练。 所以我理解,中文大模型的算力需求,跟英文大模型的算力需求相比,并不会有啥区别。
引用:
2024-04-12 05:56
有人对世界三大数据进行统计分析,发现其中自然科学的论文96.94%是用英语发表的,其次是德语0.61%。其他语言都不超过0.5%。
中文的大模型算力,真的有很多运算需求吗?真的需要很多电吗?