소식

100,000개의 Nvidia GPU! 머스크, 연말까지 '세계에서 가장 강력한 AI' 훈련 계획

2024-07-23

한어Русский языкEnglishFrançaisIndonesianSanskrit日本語DeutschPortuguêsΕλληνικάespañolItalianoSuomalainenLatina

머스크는 올해 말까지 세계에서 가장 강력한 AI를 훈련시킬 것이라고 말했다.

현지 시간으로 7월 22일, 테슬라 CEO 일론 머스크는 자신의 소셜 플랫폼(멤피스 슈퍼클러스터)에 '교육용'이라는 글을 올렸다.

그는 '멤피스 슈퍼 클러스터'가 10만 개의 수냉식 H100 GPU로 구성되어 단일 RDMA 구조(즉, 네트워크 전송에서 서버 측 데이터 처리 지연을 해결할 수 있는 원격 직접 데이터 저장 구조)에서 실행된다고 소개했습니다. . "세계 최대 규모의 강력한 인공지능 훈련 클러스터" 입니다.

머스크는 또한 올해 12월까지 '모든 지표에서 세계에서 가장 강력한 인공지능'을 훈련시키는 것이 목표라고 덧붙였다.

이전에 Musk는 클러스터가 xAI의 3세대 대규모 언어 모델 Grok-3을 훈련하는 데 사용될 것이라고 밝혔습니다.

올해 5월 머스크는 자신의 인공지능 회사인 xAI가 시장에서 가장 강력한 경쟁자보다 4배 더 큰 규모가 될 것으로 예상되는 '컴퓨팅 파워 슈퍼 팩토리'라는 슈퍼컴퓨터를 구축할 계획이라고 밝혔습니다. 컴퓨터에는 NVIDIA H100 GPU가 탑재됩니다.

1년 전, xAI는 공식 설립을 발표하며 회사의 목적은 "우주의 진정한 본질을 이해하는 것"이라고 밝혔습니다. xAI는 공식 홈페이지를 통해 “우리는 X Corp과 독립된 회사이지만 우리의 사명을 달성하기 위해 X, Tesla 및 기타 회사와 긴밀히 협력할 것”이라고 밝혔습니다.

2023년 11월 xAI는 첫 번째 대형 모델인 Grok-1을 출시했습니다.

이번 달 머스크는 Grok-2가 8월에 출시될 예정이며 더욱 발전된 AI 기능을 가져올 것이라고 발표했습니다. 동시에 그는 Grok-3가 훈련을 위해 100,000개의 NVIDIA H100 칩을 사용할 것이며 연말까지 출시될 것으로 예상된다고 밝혔습니다.

올해 5월 xAI는 Andreessen Horowitz, Sequoia Capital 등 주요 투자자로부터 60억 달러 규모의 시리즈 B 자금 조달을 받았다고 발표했습니다. xAI의 자금 조달 전 가치는 미화 180억 달러이며, 이번 자금 조달 후 자금 조달 후 가치는 미화 240억 달러에 달할 것입니다.

AI 트렌드 속에서 컴퓨팅 파워는 거대 기술 기업들의 전쟁터가 됐다. Meta는 올해 1월에 회사가 올해 말까지 350,000개의 NVIDIA H100 GPU를 배포하여 Meta의 컴퓨팅 성능을 600,000개의 NVIDIA H100 GPU와 동등한 수준으로 확장할 계획이라고 밝혔습니다.오픈AI스타게이트(Stargate)라는 새로운 슈퍼컴퓨터를 구축할 계획이 있는데, 이 슈퍼컴퓨터는 최대 1000억 달러의 비용이 들고 2030년까지 완전히 개발될 예정입니다.