테슬라의 슈퍼컴퓨터가 업그레이드됐습니다. 1년 전에는 5760개의 NVIDIA A100 GPU를 썼으나, 이제는 28% 늘어난 7360개의 A100 GPU를 운용합니다. 이로서 GPU 수 기준으로 따지면 세계에서 7번째로 많다고 하네요.
A100은 80GB HBMe2e 메모리가 2TB/s의 대역폭으로 작동하며 400W의 전력을 사용합니다. A100이 탑재된 NVIDIA DGX A100은 또 10페타OPS의 INT8, 5페타플롭스의 FP16 성능을 제공합니다. 테슬라의 슈퍼컴퓨터는 벤치마크가가 나오지 않았으나 6144개의 A100으로 구성된 NERSC 펄무터는 린팩에서 70.87펜타플롭스를 내니 이보다 높을 걸로 예측됩니다.
다만 테슬라가 AI 연구를 위해 NVIDIA 칩을 계속해서 쓰진 않습니다. 일론 머스크는 2020년에 자체 설계한 AI 프로세서인 도조를 도입한다고 밝혔으나, 2021년에는 테슬라 D1 도조 ASIC를 공개했습니다. TSMC N7에서 생한하며 5천만개의 트랜지스터가 내장됩니다.