В сфере искусственного интеллекта в последнее время ведется острая дискуссия и постоянно идут споры о том, не достигло ли его развитие узкого места. Соучредитель Anthropic Джек Кларк недавно опубликовал статью, в которой выразил оптимизм по поводу перспектив развития ИИ и изложил свои взгляды на примере модели o3 OpenAI. Он считает, что развитие ИИ не стоит на месте, а ускоряется, но необходимы более инновационные методы, такие как сочетание обучения с подкреплением и дополнительных вычислительных мощностей.
Достигло ли развитие искусственного интеллекта узкого места, Джек Кларк, соучредитель Anthropic, ясно дал понять в недавнем информационном бюллетене, что это не так? Он считает, что недавно выпущенная OpenAI модель o3 показывает, что развитие ИИ не замедлилось, а может ускориться.
В информационном бюллетене под названием «Импорт ИИ» Кларк опровергает утверждения о том, что развитие ИИ достигает своих пределов. «Любой, кто говорит вам, что прогресс замедляется или что масштабирование сталкивается с узкими местами, ошибается», — написал он. Он отметил, что новая модель OpenAI o3 является доказательством того, что в области искусственного интеллекта еще есть огромные возможности для роста, но потребуется другой подход. . Вместо простого масштабирования модели модели o3 используют преимущества обучения с подкреплением и дополнительную вычислительную мощность во время выполнения.
Кларк считает, что эта способность «думать вслух» во время выполнения открывает совершенно новые возможности масштабирования. Он ожидает, что эта тенденция усилится в 2025 году, когда компании начнут сочетать традиционные методы, такие как более крупные базовые модели, с новыми способами использования вычислений во время обучения и вывода. Это совпадает с тем, что заявила OpenAI, когда впервые выпустила свою серию моделей o.
Кларк предупредил, что большинство людей, вероятно, не ожидали, насколько быстро будет развиваться ИИ. «Я думаю, что практически никто не осознает, насколько значительными будут достижения в области искусственного интеллекта в будущем».
Однако он отметил, что вычислительные затраты являются серьезной проблемой. Самая продвинутая версия o3 требует в 170 раз большей вычислительной мощности, чем ее базовая версия, которая уже требует больше ресурсов, чем o1, которая сама требует больше ресурсов, чем GPT-4o.
Кларк объяснил, что эти новые системы затрудняют прогнозирование затрат. Раньше стоимость просто определялась размером модели и длиной выпускаемой продукции. Но для o3 требования к ресурсам могут различаться в зависимости от конкретных задач.
Несмотря на эти проблемы, Кларк по-прежнему убежден, что сочетание традиционных методов масштабирования с новыми приведет к «более значительным» достижениям в области ИИ в 2025 году, чем мы видели до сих пор.
Предсказание Кларка вызвало интерес к собственным планам Anthropic. Компания еще не выпустила модель «вывода» или «времени тестирования», способную конкурировать с O-серией OpenAI или Gemini Flash Thinking от Google.
Ранее анонсированная флагманская модель Opus 3.5 по-прежнему отложена, поскольку, как сообщается, ее улучшения производительности недостаточно, чтобы оправдать эксплуатационные расходы. Хотя некоторые считают, что это указывает на более широкие проблемы в масштабировании больших языковых моделей, Opus 3.5 не является полным провалом. Говорят, что эта модель помогла обучить новый Sonnet 3.5, который стал самой популярной языковой моделью на рынке.
Точка зрения Джека Кларка открывает новый взгляд на будущее направление развития искусственного интеллекта. Хотя затраты на вычисления по-прежнему остаются огромной проблемой, применение инновационных методов и продолжающаяся разработка больших моделей указывают на то, что технология искусственного интеллекта приведет к более значительным изменениям. развитие. В будущем мы увидим, как ИИ продемонстрирует свои мощные возможности в большем количестве областей.