最近、人工知能の分野で激しい議論が行われており、その開発がボトルネックに達しているのではないかという議論が絶えません。 Anthropic の共同創設者である Jack Clark 氏は最近、AI の発展の見通しについて楽観的な見方を表明する記事を発表し、OpenAI の o3 モデルを例として使用して彼の見解を説明しました。同氏は、AIの開発は停滞しているのではなく加速しているが、強化学習と追加のコンピューティング能力を組み合わせるなど、より革新的な手法が必要だと考えている。
人工知能の開発はボトルネックに達しているのでしょうか? Anthropic の共同創設者であるジャック クラーク氏は、そうではないことを最近のニュースレターで明らかにしました。 OpenAI が最近リリースした o3 モデルは、AI の開発が減速しておらず、むしろ加速している可能性があることを示していると彼は考えています。
クラーク氏は「Import AI」と題したニュースレターの中で、AI開発が限界に達しているという主張に反論した。同氏は、「進歩が鈍化しているとか、スケーリングがボトルネックに陥っているなどと言っているのは間違いだ」と述べ、OpenAIの新しいo3モデルはAIにはまだ大きな成長の余地があることを証明しているが、別のアプローチが必要になるだろうと指摘した。 。 o3 モデルは、単にモデルをスケールアップするのではなく、実行時に強化学習と追加のコンピューティング能力を利用します。
Clark 氏は、実行時に「大声で考える」この機能により、スケーリングのまったく新しい可能性が開かれると信じています。同氏は、この傾向が 2025 年に加速すると予想しており、企業はトレーニングや推論の際に、大規模な基本モデルなどの従来の手法とコンピューティングの新しい使用方法を組み合わせ始めるでしょう。これは、OpenAI が最初に o モデル シリーズを発表したときに述べたことと一致します。
クラーク氏は、AIがこれほど早く発展することをほとんどの人は予想していなかったであろうと警告した。 「基本的に、AI の進歩が将来どれほど重要になるかは誰も理解していないと思います。」
ただし、計算コストが大きな課題であると同氏は指摘した。 o3 の最も高度なバージョンは、基本バージョンの 170 倍の計算能力を必要とし、すでに o1 よりも多くのリソースを必要とし、o1 自体は GPT-4o よりも多くのリソースを必要とします。
クラーク氏は、これらの新しいシステムによりコストの予測がより困難になると説明しました。以前は、コストはモデルのサイズと出力の長さによって単純に決定されていました。ただし、o3 の場合、リソース要件は特定のタスクに応じて異なる場合があります。
これらの課題にもかかわらず、クラーク氏は、従来のスケーリング手法と新しい手法を組み合わせることで、2025 年にはこれまでよりも「さらに重要な」AI の進歩がもたらされるだろうと確信し続けています。
クラーク氏の予測は、アンスロピック社自身の計画への関心を引き起こした。同社は、OpenAIのoシリーズやGoogleのGemini Flash Thinkingと競合できる「推論」モデルや「テスト時」モデルをまだリリースしていない。
以前に発表された主力モデル「Opus 3.5」は、その性能向上が運営コストを正当化するのに十分ではないため、保留されたままであると伝えられている。これは大規模な言語モデルのスケーリングにおける広範な課題を示していると考える人もいますが、Opus 3.5 は完全な失敗ではありません。このモデルは、市場で最も人気のある言語モデルとなった新しい Sonnet 3.5 のトレーニングに役立ったといわれています。
ジャック・クラーク氏の視点は、人工知能の将来の開発の方向性について新たな視点を提供するものであるが、コンピューティングコストは依然として大きな課題であるが、革新的な手法の適用と大規模なモデルの継続的な開発は、人工知能技術がより重要な方向性をもたらすことを示している。開発の進歩。将来的には、AI がより多くの分野でその強力な能力を発揮することになるでしょう。