Майбутні моделі ШІ Llama від Meta навчаються на кластері графічних процесорів, який "більший за будь-що інше"

Марк Цукерберг анонсував, що Meta тренує нову версію моделі Llama на безпрецедентно великому кластері графічних процесорів. Компанія нарощує інвестиції в ШІ на фоні зростання операційних витрат на 9% та збільшення продажів на 22%.

Керівник Meta Марк Цукерберг повідомив про новітній маркер у навчанні генеративному штучному інтелекту, - за його словами, наступний випуск моделі Llama тренується на кластері графічних процесорів ‘Bigger Than Anything’.

Пише УНН із посиланням на Wired.

Управління таким гігантським масивом чіпів для розробки Llama 4, ймовірно, представлятиме унікальні інженерні розробки та потребуватиме великої кількості енергії. У середу генеральний директор Meta Марк Цукерберг (Mark Zuckerberg) в середу встановив нову віху в навчанні генеративного ШІ, заявивши, що наступний великий реліз моделі Llama компанії тренується на кластері графічних процесорів, який є "більшим за все".

Довідка

Цього року загальні операційні витрати Meta зросли приблизно на 9%. Загальні продажі (в основному за рахунок реклами) зросли більш ніж на 22%, завдяки чому компанія має вищу маржу і вищі прибутки.

Тим часом компанія OpenAI, яка поки що залишається некомерційною та вважається безумовним лідером у розробці передового ШІ, заявила, що розробляє GPT-5, - наступника моделі, на якій зараз працює ChatGPT.

OpenAI заявила, що GPT-5 буде більшим, ніж його попередник, але нічого не сказала про пул комп'ютерів, які вона використовує для навчання. OpenAI також заявила, що на додаток до масштабу, GPT-5 буде включати в себе інші інновації, в тому числі нещодавно розроблений підхід до міркувань.