AIエージェント向けCPUの評価に、CPU単体の処理とタスク全体の結果を結び付ける手法が加わった。Armが発表した比較では、サーバー実測から推計したArm AGI CPUのラック性能は、7ワークロード平均でAMD EPYC 9755の1.99倍となった。
CPUの測定をタスク完了結果につなぐ
Armは、代表的なエージェント用途、再現可能なCPU測定、タスク全体の結果による検証を柱とする評価手法を開発した。CPUが担う処理の改善と、エージェントが仕事を完了するまでの結果を対応付ける。
部品単位の測定は、モデル推論やネットワークなどの変動要因からCPU性能を切り分ける。そのうえでタスク全体を評価し、切り分けた処理の改善が完了結果にも反映されるかを確認する。
共通スクリプトで測り、ラック性能を推計
Armによると、性能分析企業Signal65は、サーバー向けプロセッサーのArm AGI CPUとAMD EPYC Turinの比較結果を独立に検証した。対象はツール処理、エージェントの実行制御、推論・計画にまたがる。
比較には両プラットフォームで同じベンチマークスクリプトを使用した。サーバー単位で測った性能を基にラック単位へ換算しており、ラック性能の数値は実測したラック同士の比較とは区別される。
7ワークロード平均でラック性能は1.99倍
Armが発表したラック性能推計では、Arm AGI CPUは7ワークロードの平均でAMD EPYC 9755の1.99倍となった。この倍率が示す対象は、サーバー実測を基にモデル化したラック単位の処理性能である。
Armは、この差を高い計算密度と電力効率によるものとしている。CPU単体の処理速度だけでなく、ラックに収容する計算資源と電力の使い方が推計結果に関わる。
隔離実行環境の作成遅延も短縮
Armの比較では、サンドボックスと呼ぶ隔離実行環境の作成遅延も短くなった。Arm AGI CPUはAMD EPYC 9965に比べ最大45%短く、ラック性能推計とは比較対象の型番が異なる。
Armは、この短縮によってエージェント用の隔離実行環境をより速く起動できるとしている。数値が表すのは環境作成の遅延であり、エージェントのタスク全体にかかる時間の短縮率ではない。