AIエージェントは、いつの間にか一線を越えました。もはやヘルプページの小さなウィジェットではありません。顧客に対応し、注文を照会し、返品を処理し、1日に何千回も社内APIを呼び出しています。つまり、これは本番環境のソフトウェアです。そして本番環境のソフトウェアは監視されるべきものです。
問題は、エージェントのデータがどこに置かれてきたかです。その多くはエージェントプラットフォーム独自のダッシュボードにあり、エンジニアリングチームが実際にビジネスを監視している場所とは別の世界です。レイテンシが急上昇したり、連携が失敗し始めたりしたとき、オンコール担当者は依存先のサービスと並べてエージェントを見ることができません。信頼しているツールでアラートを設定することもできず、応答の遅延を原因となったステップまでたどることもできません。
本日、これを変えるべくMaven Telemetryをアルファ版としてリリースします。
Maven Telemetryでできること
Maven TelemetryはMaven App Directory内のアプリです。エージェントにインストールすると、そのエージェントのアクティビティを、多くの最新監視ツールがすでに対応しているオープンスタンダードであるOpenTelemetry(OTLP)経由で、お使いのオブザーバビリティ・プラットフォームにストリーミングします。送信されるシグナルは3種類です。
トレース。 すべての会話は1つのトレースとなり、組織名とエージェント名で名付けられるため、一目でエージェントを見分けられます。その中では、エージェントが行う各ターンと各アクションがそれぞれ独自のスパンとなり、メッセージ、アクション、会話のサマリーに関するログレコードが付随します。応答が遅かった場合、どのアクションが原因で遅くなったのかを正確に確認できます。
メトリクス。 Mavenの会話分析は5分ごとにメトリクスとしてプッシュされます。それに加えて、アクション、ターン、会話全体のレイテンシ・ヒストグラムや、会話が人間のエージェントに引き継がれた際の応答までの所要時間も送信されます。ユーザー数には、エージェントが対話するすべてのユーザーが含まれ、匿名ユーザーと識別済みユーザーに分けられます。
ログ。 Mavenのイベントはログとして届き、すでに実行している検索やアラートにそのまま利用できます。
お使いのスタックにそのまま対応
セットアップはプロジェクトではなく、数分で完了するよう設計されています。一覧からプラットフォームを選ぶだけです — Datadog、Dynatrace、Grafana Cloud、Honeycomb、New Relic、OpenObserve、SigNoz、Splunk — Maven Telemetryは、そのプラットフォームに必要な項目のみを尋ねます。同じエージェントのデータを最大5つの送信先に同時に送ることができるため、DatadogのSREチームとGrafanaの分析チームが同じソースから作業できます。
プッシュではなくプルを好みますか?各エージェントは、Prometheus、OTLP/JSON、OTLP/protobuf形式のMetrics APIと、Health APIを公開でき、どちらも設定したキーで保護されます。キーを空のままにすると、両方とも閉じたままになります。
デフォルトで非公開
オブザーバビリティは、コントロールを犠牲にすべきではありません。会話テキストや個人データは、有効にすることを選択しない限りエクスポートされません。まずはパフォーマンスシグナルから始め、監視ツールに他に何を加えるかは後で判断できます。
エンジニアリングチームがこだわった、その他の詳細をいくつか紹介します。
- 各リージョンは自身のデータのみをエクスポートするため、データ居住地の境界が保たれます。
- アプリに特定のデータソースへの権限が不足している場合、そのメトリクスのみが保留されます。それ以外はすべて流れ続け、Health APIがどの権限を付与すべきかを教えてくれます。
- すべてのエクスポートは、単一の保護されたトランスポートを経由します。
なぜ重要なのか
エージェントが他のスタックと同じダッシュボードに表示されるようになれば、他のスタックと同じように運用できます。応答レイテンシにSLOを設定する。アクションのエラー率が上昇したら誰かに通知する。エージェントをインシデント対応手順に組み込む。エージェントのパフォーマンスを、運用リーダーが毎朝確認している画面と同じ場所に表示する。
そしてMavenのエージェントは、最初の質問から購入、更新まで、カスタマーライフサイクル全体にわたって機能するため、そうした会話の一つひとつが、チームが測定し改善できる対象になります。
今日から始める
Maven Telemetryは現在、すべてのMaven組織向けにアルファ版として提供されています。App Directoryを開き、エージェントにMaven Telemetryをインストールして、ドキュメントにある5ステップのクイックスタートに従ってください。アルファ版の間、皆様のフィードバックをお待ちしています。
まだMavenのお客様でない方へ。Mavenのエージェントがビジネスにどのような価値をもたらすかをご覧ください — デモを予約。
自社の会話でお試しください。
無料の個別デモをお申し込みください。



