オブザーバビリティー基盤を手掛ける米Grafana Labs(グラファナラボ)は、監視の対象をシステムの稼働状況から、AIエージェントのやり取りの内容や回答の品質にまで広げている。システム運用の調査・分析にAIを使う機能も強化し、「AIのためのオブザーバビリティー」と「オブザーバビリティーのためのAI」の両面で製品を展開する。来日した共同創業者のアンソニー・ウッズ氏は11月5日の国内メディア向けの説明会で、AI時代においてオブザーバビリティーは「人とエージェントの双方が、ソフトウェアの動作やエンドユーザーに価値を届けられているかを理解する上で欠かせない」と強調した。
アンソニー・ウッズ 共同創業者
ウッズ氏によると、エージェントは素早く応答し、システム上はエラーなく処理を終えていても、回答の中身が誤っていたり、不適切な行動を取っていたりすることがある。応答速度やエラー率といった従来の指標では、こうした問題は捉えられないとする。
この課題に対して、同社は「Grafana Agent Observability」を投入した。推論やツールの呼び出しを含む会話全体をテレメトリーとして取り込んで分析するほか、モデル別、エージェント別、顧客別のトークンコストも可視化する。本番環境の会話をハルシネーションやプロンプトインジェクション、個人情報の漏えいといった観点で継続的に評価する機能もあり、ウッズ氏は「稼働状況と同じように品質を監視する」と説明した。
運用面では、AIアシスタント「Grafana Assistant」を提供している。専用のクエリ言語を使わなくても、自然言語で質問するだけで、監視データの検索からグラフの作成までを担う。インシデント対応では、エージェントが根本原因を調べる「Assistant Investigations」を用意。AIがユーザーの環境を理解するための「Knowledge Graph」も備えている。
(藤岡 堯)