ChatGPT склав майже всі іспити, що існують у США, хоча й не без помилок

До списку іспитів входять тести з літератури, математики, перевірки інтелекту, кмітливості та загального рівня підготовки для вступу в коледж. Щоправда, фундаментальних помилок попередніх версій нейромережа поки що так і не позбулася.

Що відомо

Компанія опублікувала графік, який показує успіхи GPT-4 в складанні іспитів. Синім кольором показано попередню версію мовної моделі, зеленим – нову.

Результати екзаменів / Скриншот 24 каналу

Дані про успіхи GPT-4 слід сприймати з деякою часткою скепсису, оскільки в OpenAI не поспішають надавати підтвердження результатів тестів. Також там не приховують, що підбирали завдання під можливості нейромережі, а також проводили навчання для виконання цих конкретних завдань. Тому високі показники GPT-4 – це більше демонстрація досягнень в адаптації нейромережі до реальної роботи, ніж успіхів у розвитку технологій штучного інтелекту.

Ми бачимо суперечливу ситуацію, коли прогрес у розвитку нейромереж домінує над темпами виправлення помилок у їхніх алгоритмах. Та ж OpenAI всього за два роки випустила вже три покоління нейромереж GPT, але кожна нова версія містить фундаментальні помилки своїх попередниць. Тому в офіційних документах після слів про успіхи нейромережі завжди слідує попередження про те, що результати її роботи не можна використовувати в критично важливих сферах. Занадто часто GPT "фантазує" і просто маніпулює даними.