“Передова, але неоднозначна”: Google представила Gemini 4 Argon

Google представила свою нову флагманську модель Gemini 4 з деякими вражаючими результатами, але один із звітів припускає, що в окремих випадках вона може “погано справлятися”.

Bloomberg повідомляє, що співробітники Google всередині компанії виявили: показники Gemini 4 у реальному використанні не завжди відповідають результатам бенчмарків. Під час презентації Gemini 4 Argon Google показала, що нова модель випередила конкурентів, зокрема GPT-6 Astra від OpenAI, у багатьох ключових сферах.

Нова передова модель

У звіті наводяться слова співробітників Google, які виявили, що модель “гірше справляється, коли співробітники фактично використовують її в роботі”, а також що вона “має труднощі з виконанням певних завдань із програмування”. У Google, коментуючи ці твердження для Bloomberg, заявили:

Компанія також послалася на слова керівника Google DeepMind Корая Кавукчуоглу наприкінці вересня, який сказав, що “абсолютно точно, що ми завжди будемо на передовій”. У звіті цитують одного зі співробітників Google, який сказав:

Очевидно, що серед співробітників існують різні погляди на продуктивність моделі. Втім, Gemini 4 Argon приносить низку бажаних покращень до моделі, зокрема збільшений ліміт вихідних даних — до 1 мільйона токенів.

Кібербезпека на рівні

Google також пояснила, що модель “має дуже високі можливості у сфері кібербезпеки” та демонструє “провідні результати” в інших сценаріях використання. Argon навчили самостійно знаходити, перевіряти та виправляти критичні вразливості в програмному забезпеченні. Під час ранньої демонстрації модель виявила критичну проблему в медичному програмному забезпеченні, яке використовується лікарнями по всьому світу, потенційно відкриваючи доступ до конфіденційної інформації. За даними Google, на CWE-bench Argon отримала 68%, розділивши перше місце з GPT-6 Astra.

Через кіберзахисні можливості Google вирішила не відкривати Argon одразу для всіх користувачів. Першими доступ отримують учасники Fairwind Program — урядові структури та перевірені партнери, які працюють із кібербезпекою. Gemini 4 Argon коштує “$4 за 1 млн вхідних токенів і $20 за 1 млн вихідних токенів”, але на старті діятиме вступна ціна, удвічі нижча за цю.

Квантові обчислення та захист від prompt injection

Внутрішнє застосування Gemini 4 Argon уже дало Google кілька практичних результатів. Компанія використовує модель для досліджень у сфері квантових обчислень, міграції програмного коду та оптимізації пам’яті у своїх дата-центрах. За даними Google, аналіз телеметрії всієї інфраструктури допоміг звільнити близько 300 ТіБ пам’яті. Окремо агенти Argon залучені до перенесення великих масивів коду C/C++ на Rust, зокрема в бібліотеках re2 і libgav1 та в ядрі Fuchsia OS Zircon, де йдеться про більш ніж 800 тис. рядків коду.

Ще один напрямок роботи Google — захист самої моделі від небезпечної поведінки. Argon отримала посилений захист від непрямих prompt injection-атак, коли шкідливі інструкції намагаються змусити ШІ змінити свою поведінку через дані, які він обробляє. Google також впровадила механізми моніторингу ланцюжка міркувань та дій моделі, які мають зупиняти виконання у разі небезпечної поведінки. Компанія пояснює ці заходи необхідністю посилити контроль перед ширшим розгортанням моделі.

Джерело: 9to5Google