企業向けのAIには、ChatGPTやGeminiなどに代表される対話型・クエリ駆動型のAIとは根本的に異なるインフラが求められます。今後は、人間の関与を最小限に抑えながら、タスクの自律的な計画やワークフローの実行、APIの呼び出し、そして意思決定を行うAIエージェントが、企業におけるAI導入を加速させていくと考えられます。こうしたAIの活用を支えるためには、安定した性能を維持しながら、拡張しても効率性を損なわないよう設計されたコンピューティング基盤が欠かせません。こうした環境において、現代のCPUは優れた性能を発揮します。
プロンプト駆動型のシステムとは異なり、エージェント型のシステムは、単に応答するだけでなく、実際の処理を実行するように設計されています。エージェントは、画像解析、言語理解、文字起こしといった特定のタスクに特化した、複数の比較的小規模なモデルを組み合わせて活用することが理想とされており、これらのモデルは、各企業の固有のデータと統合されるケースが一般的です。データの変化を監視し、必要な処理を開始するとともに、ビジネス全体の意思決定と連携することで、AIエージェントは次世代のデジタルサービスにおける生産性向上の中核となります。そして、企業への導入が進むにつれて、その影響はアプリケーションの設計にとどまらず、システム全体の再設計にまで広がっていきます。
AIエージェントは、既存の業務に単純に組み込めるものではありません。常時稼働する自律型システムは、バックグラウンドで継続的な計算処理を必要とします。そのため、AIエージェントの普及が進むにつれ、インフラの効率性がAIの生産性を左右する重要な要因となっていきます。エージェント戦略を検討する企業には、モデル性能の評価に加え、大規模な処理を継続的かつ効率的に、自律して実行できるコンピューティング基盤の設計が求められます。
散発的な利用から継続的な需要へ
1つのエージェント型ワークフローの中には、複数モデルの呼び出しやデータの取得、検証の繰り返し、そして他のシステムとの連携などが含まれます。このような継続的にリソースを消費する特性を踏まえると、企業がすでに活用しているクラウドネイティブなアプリケーション基盤と同様に、柔軟性の高い運用の仕組みが求められます。しかしながら、これをAIワークロードに適用する取り組みは、いまだ発展途上です。
この変化は、AIコンピューティングスタック全体、特に処理レイヤーにおいて、従来とは異なる新たな要件をもたらします。GPUなどの専用計算ハードウエアにおける効率的なリソース活用技術は、CPUのオーケストレーション技術と比べて、数十年単位で遅れています。AIエージェントにおいては、複雑かつ継続的なワークフローを統括する基盤としてのCPUアーキテクチャの重要性が、一段と高まります。長時間のモデル学習に最適化されたインフラも、大規模なエージェント運用を支える観点から、より低コストで継続的かつ安定した性能を発揮できるよう進化していく必要があります。
自律システムがインフラ需要を押し上げる
エージェントの導入が広がるにつれて、インフラへの需要は増大し、その伸びも大きくなっていきます。自動化された意思決定は新たなプロセスを生み出し、ワークフローはさらに多くのタスクへと分岐していきます。生産性向上を目的に設計されたシステムでは、それ自体の生産性を維持するために必要な計算リソースも必然的に増加します。
こうした掛け算的な効果は、導入の初期段階では見過ごされがちです。導入規模が拡大すれば自律的な処理が増加し、モデルの利用率も高まります。同時に、人との相互作用や新たなデータソースへの対応、さらには推論時のコンテクストの拡張などを通じて機能も広がっていきます。企業は生産性目標を達成するために、新たなAI機能の拡充、自律システムによるインフラ需要の増大、そしてコスト抑制のバランスを継続的に取っていく必要があります。こうした急速な成長を、コストの増大を抑えながら管理するうえでは、Ampereプロセッサーのように効率的で予測可能なコンピューティング基盤が不可欠です。
問われるのは効率性
こうした課題を踏まえると、AIエージェントの持続的な推論はエネルギーと計算容量を継続的に必要とし、コスト管理上の大きなハードルとなります。AIのワークロードは、すでに従来の企業向けアプリケーションと比べて高い電力密度での稼働を必要としており、AIエージェントは、この需要を長期にわたって拡大させていきます。
電力コストが高く、データセンター容量の制約を前提とする環境では、こうした変化は直ちに運用面に影響を及ぼします。AIエージェントの拡張性は、その処理効率に大きく左右されます。
しかしながら、ピーク時の応答性を前提にインフラを過剰に確保すると、さらなる負担が生じます。最大需要に合わせて設計されたシステムは、平常時には大きな余剰キャパシティーを抱えたまま稼働することになり、その結果、非効率な状態が積み重なっていきます。このような環境では、理論上のピーク時性能よりも、実際の運用における効率性やワークロードとの適合性の方が重要になります。
変革の成否はインフラで決まる
AIエージェントの経済性は、モデルの導入やトレーニングへの投資よりも、自律的な稼働に伴う継続的なコストに大きく左右されます。そのコストは、主にエネルギー消費、冷却需要、リソース利用率、運用負荷といった要素によって決まります。これらは、最新の省電力CPUアーキテクチャが大きな優位性を発揮する領域であり、企業は少ない電力とスペースで、より多くのAIを運用できるようになります。
エージェント型のシステムが企業のワークフローに深く組み込まれるにつれて、AIは単なるツールから、常時稼働する業務プロセスの一部へと変化していきます。これは、人件費のような継続的な運用コストを管理することと近い考え方です。企業は、生産性目標を達成するために、AIを継続的かつ予測可能に、そして持続可能なコストの範囲内で運用する必要があります。
AIエージェントは企業の生産性を再定義しますが、その長期的な実用性は、断続的なトレーニングやAI実験、大規模な知識モデルの活用といった用途を支える従来型のインフラではなく、常時稼働するエージェント型推論タスクのために特別に設計されたインフラにかかっています。単純な性能の高さ以上に、効率性こそが、組織の生産性向上とAI時代におけるビジネス変革の成否を左右する要因となります。Ampereは、常時稼働するAIエージェントに必要な効率的でスケーラブルなコンピューティング基盤を提供することで、企業が隠れた運用コストを抑えつつ、AIエージェントの潜在能力を最大限に引き出すことを支援します。
関連リンク
英語記事:The Hidden Operational Costs of Agentic AI
原文:Sean Varley, Product Marketing, Ampere Computing
翻訳・編集:AI⇒SoftBank Group編集部