Моментально после крупных обновлений AI моделей от OpenAI, Google или Anthropic, в обществе начинаются спекуляции о дате и функциях следующего обновления. Регулярные выпуски подпитывали эти слухи, но, по данным Bloomberg, эти времена могут закончиться. Сообщается, что все три основных разработчика испытывают сложности с достижением своих амбициозных целей по улучшению моделей следующего поколения.
Разработка модели Orion от OpenAI развивается не так успешно, как ожидалось. Модель не достигает поставленных целей, особенно в области кодирования. Orion, возможно, не станет революцией по сравнению с GPT-4, как это было в случае с переходом от GPT-3.5 к GPT-4. Это может быть причиной, по которой генеральный директор OpenAI Сэм Альтман публично раскритиковал слухи о дате выпуска модели Orion и обновлении ChatGPT.
Google и Anthropic также сталкиваются с задержками и заниженными ожиданиями. Разработка Gemini от Google продвигается медленнее, чем хотелось бы. Anthropic вынуждена отложить выпуск своей модели Claude 3.5 Opus, несмотря на ранее проведенную рекламную кампанию.
Все разработчики AI сталкиваются с ограничениями в развитии своих моделей. Одной из главных проблем стала нехватка обучающих данных. Компании использовали огромные датасеты для обучения моделей, но даже интернет не бесконечен, особенно когда речь идет о высококачественных данных. Поиск ранее неиспользованной информации становится сложной задачей, отчасти из-за этических и правовых соображений, а также из-за недостатка человеческих примеров для улучшения моделей. Даже если удастся найти достаточно данных, их обработка и интеграция в AI модель стоит значительных ресурсов. Если данные не могут принести существенных улучшений, обновление модели может не оправдать вложений.
В отчете говорится, что OpenAI и его конкуренты ищут другие способы улучшить модели, например, через пост-тренировку Orion с использованием обратной связи от пользователей. Это медленный путь к прогрессу и может свидетельствовать о достижении AI своего предела в быстром росте размеров и функциональности. Простое наращивание вычислительной мощности и большое количество данных больше не могут гарантировать реализации амбиций разработчиков AI. Они должны искать более творческие способы обновления своих моделей без использования всех ресурсов интернета.
Для пользователей следует ожидать более медленных релизов новых функций AI. Это может оказаться полезным, так как даст время на глубокое исследование и освоение всех выпущенных в последние годы инструментов. Есть много интересного для исследования, например, с ChatGPT-o1. Возможно, это даст OpenAI пространство для работы над выпуском видео-креатора Sora AI, который был ограничен в доступе, несмотря на регулярные демонстрации.
Источник: TechRadar