xAI представиха Colossus

xAI обявиха, че са завършили асемблирането на AI обучителна система, съставена от 100 000 графични карти. Постижението беше обявено лично от основателя на стартпа Илън Мъск в социалната мрежа „Х“. Системата, чието име е Colossus, е заработила онлайн през отминалите почивни дни.

Основател и главен изпълнителен директор на xAI, Мъск стартира компанията миналата година с цел конкурирането с OpenAI, припомнят SiliconAngle. В същото време, към настоящия момент той съди OpenAI за нарушаване на договорни нарушения.

Основната технология на xAI са серия от големи езикови модели с името Grok. През май тази година компанията набра финансиране от $6 млрд. при пазарна капитализация от $24 млрд. В публикацията си от тази седмица, Мъск заявява, че Colossus представлява най-мощната система за обучение на изкуствен интелект в света. Ако това е вярно, то означава, че Colossus надминава способностите на Aurora. Системата се води най-мощния суперкомпютър в света и се използва от американското енергийно министерство. През май, Aurora достигна в тестове скорост от 10.6 екзафлопа с 87% активност на хардуера.

Мъск допълва, че Colossus използва 100 000 Nvidia H100 графични карти. Серията H100 прави дебюта си през 2022 и в продължение на година остава най-мощния AI процесор на компанията. Той има способността за обработка на езикови модели 30 пъти по-бързо от предишното поколение графични чипове на Nvidia. xAI Мъск допълва, че xAI планира да удвои броя на графичните чипове на Colossus до 200 000 през следващите месеци. В допълнение, 50 000 от тези чипове ще са от серията H200. Това е подобрена и значително по-бърза версия на H100, която Nvidia представи през миналия ноември.

Актуалният езиков модел на xAI – Grok-2 е обучен на 15 000 графични чипа. Впрягането на силата на Colossus в помощ за обучението на Grok ще означава значително подобряване на способностите му. Очаква се xAI да представят нова версия на Grok до края на годината.