第677章 天佑我中华（2 / 5）
“那年长江、嫩江、松江，三江爆发特大洪水，你老家茳西处在重灾区，我站在你老家的土地上，看洪水过境，只觉得人在大自然面前，真真是渺小。
但我中华儿女，万众一心、众志成城，不怕困难、顽强拼搏，坚韧不拔、敢于胜利的伟大抗洪精神，却支撑着亿万渺小的我们，战胜了这场天灾。”
说到这里，老人家露出了回忆的神色，而后继续道：“所以，我觉得你这个电影拍的好。
好就好在，它体现了我们华国人，在面对灾难时的精神，饱和式救援不是空喊，是真真切切发生过，且发生过无数次。
好就好在，它还体现了我们华国人为实现伟大目标，一代又一代人，前赴后继，矢志不渝的信念。
过去，大秦可奋六世之余烈而一统天下；现在，我们亦可踏百年之征程，实现中华民族的伟大复兴。
未来，如果真的有电影里设定的这么一天，我相信，我们也确实可以提出并执行这种持续100代人、横跨2500年的宏伟计划。
这，就是刻在我们华国人骨子里的珍贵品质和非凡志气。这样的品质和志气，你作为华国新一代文艺工作者的绝对代表，应当像现在这样，多去诠释。”
“您放心，我会的。”徐希羽郑重的点了点头。
“我相信你会，我同样相信，你们会为华国文艺界带来一些新的气象。每一代人有每一代人的任务，过往的事情，也是时代的产物，苛责没有意义。
只不过，从现在开始，做好你要做的事，不要辜负了老天给你的天赋，以及群众对你的期待。”老先生说着，拍了拍徐希羽的肩膀。
“您放心，我会的。”徐希羽再次重复了一下自己的答案。
“走吧，看看下一个项目。”老先生说着还把手臂拉远，眯着眼睛的看了看手表。
此时，已经快12点了。
从9点到现在，3个小时里，他看了看地星集团过往的成绩，未来的规划，甚至还玩了一会《西游：后传》。
包括薇古的一些东西，他也看了。
现在，看完《流浪蓝星》这个压轴项目，就只剩【moss-550a】这个大轴了。
该说不说，托《流浪蓝星》里的moss的福。
当前来参观的老先生以及随同人员们，看到这个也叫moss的ai的时候，兴致瞬间就来了。
但随着高文的介绍和测试，众人的表情，纷纷变得严肃了起来。
尤其是刚刚对着徐希羽好一番交代的老先生，摆手打断道：“小高，你等一下。
你是说，你们团队用了国外团队十分之一的成本，训练出了水平差不多的ai模型？”
“对。”高文点了点头，在看徐希羽一眼后，他用着尽量通俗的措辞继续道：“不过十分之一只是一个相对粗略的计算。
目前，我们正在和徐总共同训练moss-550b和wei-550b。用于训练的芯片是英伟达h100的阉割版h800。
由于我们的架构比较优秀，所以，我们实现了处理每万亿个token，也就是ai能够处理的最小数据单元，只需要18万个小时的gpu运算时间。
我们现在有2048块gpu同时运算，所以，处理这些数据，只需要3.7天。而我们整个预训练阶段需要处理的数据，预计需要费266.4万小时。
加上，上下文长度扩展的19万小时，以及后训练的5千小时，我们550b完整训练，只需要费278.8万gpu小时，也就是两个月左右。
因此，现在每块英伟达h800gpu的租赁价格大概是每小时2美元，这代表着，我们550b的总训练成本，只需要557.6万美元。
不过这个成本仅包括我们的官方训练时的成本。不包括与架构、算法或数据的先前研究和消融实验相关的成本。
而作为对比，和我们同水平的chatgpt-4的训练成本，需要超过1亿美元，因此，如果仅仅是算这个，他们的成本，是我们的十八倍。” ↑返回顶部↑
但我中华儿女，万众一心、众志成城，不怕困难、顽强拼搏，坚韧不拔、敢于胜利的伟大抗洪精神，却支撑着亿万渺小的我们，战胜了这场天灾。”
说到这里，老人家露出了回忆的神色，而后继续道：“所以，我觉得你这个电影拍的好。
好就好在，它体现了我们华国人，在面对灾难时的精神，饱和式救援不是空喊，是真真切切发生过，且发生过无数次。
好就好在，它还体现了我们华国人为实现伟大目标，一代又一代人，前赴后继，矢志不渝的信念。
过去，大秦可奋六世之余烈而一统天下；现在，我们亦可踏百年之征程，实现中华民族的伟大复兴。
未来，如果真的有电影里设定的这么一天，我相信，我们也确实可以提出并执行这种持续100代人、横跨2500年的宏伟计划。
这，就是刻在我们华国人骨子里的珍贵品质和非凡志气。这样的品质和志气，你作为华国新一代文艺工作者的绝对代表，应当像现在这样，多去诠释。”
“您放心，我会的。”徐希羽郑重的点了点头。
“我相信你会，我同样相信，你们会为华国文艺界带来一些新的气象。每一代人有每一代人的任务，过往的事情，也是时代的产物，苛责没有意义。
只不过，从现在开始，做好你要做的事，不要辜负了老天给你的天赋，以及群众对你的期待。”老先生说着，拍了拍徐希羽的肩膀。
“您放心，我会的。”徐希羽再次重复了一下自己的答案。
“走吧，看看下一个项目。”老先生说着还把手臂拉远，眯着眼睛的看了看手表。
此时，已经快12点了。
从9点到现在，3个小时里，他看了看地星集团过往的成绩，未来的规划，甚至还玩了一会《西游：后传》。
包括薇古的一些东西，他也看了。
现在，看完《流浪蓝星》这个压轴项目，就只剩【moss-550a】这个大轴了。
该说不说，托《流浪蓝星》里的moss的福。
当前来参观的老先生以及随同人员们，看到这个也叫moss的ai的时候，兴致瞬间就来了。
但随着高文的介绍和测试，众人的表情，纷纷变得严肃了起来。
尤其是刚刚对着徐希羽好一番交代的老先生，摆手打断道：“小高，你等一下。
你是说，你们团队用了国外团队十分之一的成本，训练出了水平差不多的ai模型？”
“对。”高文点了点头，在看徐希羽一眼后，他用着尽量通俗的措辞继续道：“不过十分之一只是一个相对粗略的计算。
目前，我们正在和徐总共同训练moss-550b和wei-550b。用于训练的芯片是英伟达h100的阉割版h800。
由于我们的架构比较优秀，所以，我们实现了处理每万亿个token，也就是ai能够处理的最小数据单元，只需要18万个小时的gpu运算时间。
我们现在有2048块gpu同时运算，所以，处理这些数据，只需要3.7天。而我们整个预训练阶段需要处理的数据，预计需要费266.4万小时。
加上，上下文长度扩展的19万小时，以及后训练的5千小时，我们550b完整训练，只需要费278.8万gpu小时，也就是两个月左右。
因此，现在每块英伟达h800gpu的租赁价格大概是每小时2美元，这代表着，我们550b的总训练成本，只需要557.6万美元。
不过这个成本仅包括我们的官方训练时的成本。不包括与架构、算法或数据的先前研究和消融实验相关的成本。
而作为对比，和我们同水平的chatgpt-4的训练成本，需要超过1亿美元，因此，如果仅仅是算这个，他们的成本，是我们的十八倍。” ↑返回顶部↑