当地时间7月22日,埃隆·马斯克在社交平台X上发文宣布,xAI团队、X团队、英伟达及支持公司于当地时间凌晨4时20分开始在孟菲斯超级集群上进行训练。他在评论区透露,其目标是“今年12月前训练出世界上最强大的人工智能”。
据马斯克介绍,这个集群由100000个液冷H100 GPU组成,这些芯片是英伟达去年开始提供的。
马斯克还表示,该集群在单个RDMA结构(即远程直接数据存取结构)上运行。据思科介绍,这种结构可以在计算节点之间提供更高效、更低延迟的数据传输,而不会给中央处理器(CPU)带来负担。
马斯克今年5月曾透露这一计划 ,将英伟达H100串联到一台巨型的超级计算机中,并称其为“算力超级工厂”。马斯克旗下特斯拉的汽车工厂也被称之为超级工厂(Gigafactory)。
xAI的目标是到2024年12月训练出“按每项指标衡量都是全球最强大的AI”。马斯克表示,孟菲斯超级集群将为实现这一目标提供“显著优势”。
不过,外媒表示,不要对这一时间节点报太大期望,因为马斯克以公开提出并错过许多项目(如全自动驾驶汽车、无人驾驶出租车产品Robotaxi和将人类送往火星)的最后期限而闻名。