Geekbench は、機械学習タスクを処理する際のデバイスの CPU、GPU、および NPU パフォーマンスを評価するために使用される、新しいクロスプラットフォーム AI パフォーマンス テスト ツール Geekbench AI を発表します。このツールは、Primate Labs が以前にリリースした Geekbench ML プレビュー バージョンをベースに改良されており、ONNX、CoreML、TensorFlow Lite、OpenVINO などの複数のフレームワークをサポートしており、完全精度、半精度、定量化の 3 つのスコア基準を提供します。機器の性能をより完全に評価するための精度測定が含まれます。
Geekbench の開発チームである Primate Labs は、当初 Geekbench ML という名前でソフトウェアを開発し、2021 年にプレビュー バージョンをリリースしました。テクノロジーの発展とニーズの変化に伴い、このソフトウェアは Geekbench AI に名前が変更され、さまざまなタスクを処理する際のさまざまなハードウェアのパフォーマンスを調査することを目的としています。このツールは精度と速度に基づいてパフォーマンスを評価し、ONNX、CoreML、TensorFlow Lite、OpenVINO などの複数のフレームワークをサポートします。
Geekbench AI は、完全精度、半精度、定量化という 3 つのスコア基準を提供します。 Primate Labs によると、スコアにはワークロードの出力が現実とどの程度一致しているか、つまりデバイスがタスクをどの程度正確に実行しているかを評価する精度測定も含まれています。
Geekbench AI のスコアに関連して実際のタスクでデバイスがどのように動作するかをより完全に把握するには、さらに時間が必要です。たとえば、インテリジェンスが組み込まれたデバイスの場合、フレーム レートや読み込み時間だけでなく、予測テキストの精度や画像エディターによって生成された結果の品質も確認することがあります。
現在、このツールは Windows、macOS、Linux、Android、iOS プラットフォームにダウンロードでき、ユーザーはその機能を自分で試して体験することができます。
Geekbench AI の開始により、デバイスの AI パフォーマンスを客観的に評価するための基準が開発者とユーザーに提供され、AI ハードウェアとソフトウェアのさらなる開発の促進に役立ちます。また、クロスプラットフォーム機能により、さまざまなシステムのユーザーによる使用が容易になり、将来的には AI パフォーマンス テストの分野で重要な役割を果たすことになります。