发布日期:2024-07-24 02:34 点击次数:153
凌晨4:20【SAL-147】勃起したペニクリがスクール水着を圧迫してしまうニューハーフ女子校生達5,大洋此岸的最大超算考研集群初始轰鸣。
「420」亦然马斯克最可爱玩的梗,标志着解脱、不受阻抑和反传统。
马斯克无为把「420」用在他的居品订价,公司开会时代和星舰一辐射时代上等等。
网友也在驳斥区玩笑马斯克超绝典礼感,不到4:20不开工。
强奸乱伦在最新采访中,马斯克表露了更多对于新建超算和xAI模子说明:
- Grok 2上个月完成了考研,苟简用了15K H100
- Grok 2将于下个月发布,与GPT-4十分- Grok 3正在新建10万块液冷H100超算上,初始考研- 预测Grok 3将在12月发布,「届时将成为宇宙上最鉴定的东说念主工智能」
10万块液冷H100,19天完成搭建
值得注目的是,这个人人最大的超算集群,大就大在领有10万块H100,依然液冷的那种。
10万块H100是什么观念呢?
价钱上来看,H100 GPU行为AI的要害组件、硅谷的热点商品,据臆测每块资本在3万到4万好意思元之间,10万块H100即是一笔40亿的大单。
而在全好意思TOP 5的高校机器学习博士曾发帖说,实验室H100数目为0,要用GPU得靠抢。
李飞飞也在采访里示意,斯坦福的当然说话措置小组只好64块A100 GPU。
而马斯克一发轫即是10万块,这个数字令驳斥区垂涎三尺。
算力上来看,算力苟简是OpenAI用于考研GPT4的25000块A100的20倍控制。
耗电上来看,只是是让这个超等联想中心保管运转,所需要的电力总功率就达到70MW,十分于这是一座平时电厂的装机容量,可满足20万东说念主的动力需求。
本年5月,马斯克就曾示意,但愿在2025年秋季前建成「超算工场」。
当今看来,为了加快超等集群的竖立,他遴荐了购买面前一代的H100 GPU,而不是恭候新一代的H200或其他行将推出的基于Blackwell的B100和B200 GPU。
尽管市集预期Nvidia的新Blackwell数据中心GPU将在2024年底前上市,马斯克光显莫得耐烦恭候。
面前AI武备竞赛越生气热,唯快不破,谁能最快地推出居品就能赶紧占领市集。
xAI行为一家初创公司,更是淌若与其他巨头之战中先声夺东说念主。
在之前,马斯克与甲骨文的百亿大单就谈崩了,马斯克嫌弃甲骨文速率太慢,认为对方莫得以可行的速率构建联想集群。
而甲骨文则认为xAI建超算选址承担不了电力的需求,跟着百亿订单的谈判冲突, xAI和甲骨文住手了有计划扩大现存攀附的可能性。
xAI只得田纳西州孟菲斯市竖立我方的东说念主工智能数据中心,与甲骨文的攀附冲突意味着xAI要我方发轫分工,通过10万块H100构建零丁的数据中心,以解脱甲骨文等云提供商才气的截止。
马斯克我方也示意,xAI领有宇宙最强的AI考研集群,可谓遥遥跨越。
宇宙最强Grok-3开训,年底发
在马斯克最新一则采访中,线路了树立超算的一些细节。
据大孟菲斯商会(Greater Memphis Chamber)主席Ted Townsend表露,马斯克只花了苟简一周的时代就决定将xAI的新超等联想机建造在孟菲斯。
Townsend说,进程3月份的几天旋风式谈判之后,马斯克和他的团队遴荐了田纳西州的这座城市,因为这里有鼓胀的电力和快速竖立的才气。
而且,只是破耗了19天超算中心就建造完成,马斯克也在推文中推奖了团队优秀的使命。
Supermicro公司也为xAI提供了大部分硬件搭救,其CEO Charles Liang也在马斯克的推文下发表了驳斥,推奖了团队的推行才气。
如斯之大的考研集群,标的即是为了考研Grok 3。
本月初,马斯克就文书8月底推出Grok 2,在Grok-2尚未发布的情况下,马斯克也表露了Grok-3的部分细节,为最强模子Grok 3造势。
马斯克在本年4月罗致挪威主权基金负责东说念主Nicolai Tangen采访时说,Grok 2需要苟简2万张H100来进行考研。
Grok 3将于年底发布,不错料念念,基于10万个GPU考研的Grok 3性能方面将比Grok 2更进一竿。
如斯浩荡的超算中心,当然需要大宗东说念主才和工夫的搭救,马斯克也不竭在推特上招兵买马,让数据上风、东说念主才上风和算力上风所有这个词延长到极致。