(邪教相關)特斯拉的新專利,如何將上萬個,數十萬個gpu連結在一起,進行共同訓練
在今年夏天以前,世界上最大的資料中心,連結大約20000個h100 GPU單元,大部分報告認為連結的上限在32000個左右
可是今年夏天,xAI搞出了一個10萬個h100的資料中心,在明年春天,先會增加到20萬個,下一步是50萬個
https://images.plurk.com/3mjNsSZStuPvrYfk6mv04P.png
掰噗~
1 weeks ago
這個問題問得很好, 我們請樓下來回答 (eyeroll)
立即下載