KDD 上的 PPT 掀起 AI 圈风暴，GPT Next 今年发布，性能远超 GPT-4
KDD上的一张PPT，再次掀起AI圈的风暴。
GPT Next今年准是跑不了了，而且有效计算量是GPT-4的100倍，预示着未来模型的能力进一步提升。
这是日本首席执行长Tadao ，在KDD 2024峰会上，透露的关于下一代模型最新信息。
见过这张图的人，一眼便认出，它的出现已经不下3次了....
GPT Next今年发布，疯狂暗示
5月，在巴黎举行的Viva科技节上，研究人员也将2024年，发布的模型称为GPT Next，性能远高于GPT-4。
曾担任AWS日本总裁，直到今年4月，正式加盟成为日本地区的负责人。
他称，与传统软件相比，AI技术正在呈指数级发展。
他进一步表示，虽然GPT-3和GPT-4的能力相对接近，但GPT Next预计将取得实质性地性能跃升。
这恰恰呼应了微软Build开发者大会上，首席技术官Kevin Scott曾说的话，并暗示着截止今年年底，我们将拥有一个功能更强大的模型。
会上，公布的关于猎户座（Orion）和草莓项目更多信息包括：
今年发布的GPT-4 Next，预计将使用迷你版草莓进行训练，其计算资源与GPT-4大致相同，有效计算量是GPT-4的100倍。
这款全新AI模型将在过去基础上，进化近百倍。
这100倍的增长，可能不是指计算资源的规模，而是有效计算量+ 2个OOM，包括对体系结构和学习效率的改进。
最近曝出的Orion，与GPT-4相比，相当于在10k H100上用时几个月完成训练，增加了10倍的计算资源规模，相当于+3 OOM，预计明年发布。
此前，也爆料称，正在开发两个AI新系统：
一个是草莓，在数学和编程等领域，有着更高能力的人工智能模型。另一个是猎户座，可能成为GPT-4的继任者，或者就是GPT Next。
猎户座可能会用草莓生成高质量数据进行训练，而且会大幅提升逻辑推理能力。
另外，还表示，在全球拥有不到2000名员工，其中一半从事人工智能开发。
另一张，网上流传的图称，不要以GPT-4o的进展，来预测 Law。
大模型相当于需要1.5-2年的时间，才能真正进化出下一代。
而且，一名三星的高管称，GPT-5可能有3-5万亿个参数，而GPT-4仅有1.7万亿。
这背后原因，不言而喻。
先机大模型的诞生，需要有强大算力基座。
耗资数百亿美元，打造新基建
知情人士称，Sam 正计算大规模建设AI所需的机器和系统。
而且，这一计划将分散在美国各州展开，预计将耗资数百亿美金。
今年2月，彭博曾报道，奥特曼一直在寻求美政府对该项目的批准。
这一项目希望，形成一个全球投资者联盟，进而为AI发展所需的基础设施提供资金支持。
而最新的细节是，目前正讨论的项目类型包括，建设数据中心，增加能源容量，利用涡轮机、发电机传输电力，并扩大半导体制造。
据称，支持者可能包括加拿大、韩国、日本、阿联酋的投资者。
最近几周，包括奥特曼在内的高管，一直在与投资者会面，推进这笔交易。首席战略官Jason Kuan还前往日本韩国，与投资者谈论这项计划。
还设想微软，能够参与这一项目。
恰在谈判之际，即将开启新一轮数十亿美元的融资，将由 牵头，微软、苹果、英伟达也参与其中。
这轮融资结束后，估值将超过1000亿美元。
又要截胡谷歌？
一位网友听到一些传闻，可能于10月17日周四发布新的东西。
具体是什么，不太确定，有可能是GPT-4o模型更新，也有可能是公开推出。 但有一点可以肯定的是，那就是，它一定不会是全新的前沿模型。
谷歌的首席科学家对此表示，「以一种奇怪的方式得知，我的公司将在10月18日宣布一些事情」。
这样的情况也确实屡见不鲜，从年初谷歌 1.5 Vs Sora，再到5月谷歌支持200万token 1.5 Pro和 GPT-4o，一直打到了现在。
而且，几乎每次重大发布，都要给谷歌来上重重一击。
参考资料：
