エージェントの動作をトレースして調査する

トレースの確認

5 minutes

Splunk Agent Observabilityを開き、先ほど生成したトラフィックから実際のトレースを確認します。

Exercise エージェントの動作を調査する
1

プロジェクトとエージェントストリームを開く

1. ブラウザで https://console.multitenant.galileocloud.io のSplunk Agent Observabilityコンソールにアクセスし、 workshop orgを選択します

2. 前のステップで GALILEO_PROJECT フィールドに設定した名前(例: project-120)を使用してプロジェクトを開きます

3. default エージェントストリームを選択します

プロジェクトとエージェントストリームの選択

2

トレースリストを確認する

最近のトレースのリストを確認します。送信したメッセージごとに1つのトレースがあります。入力トークン数、出力トークン数、Span数など、一目で確認できる主要なシグナルに注目してください。

トレースリスト

3

トレースを開いてSpanツリーを確認する

Lisinoprilの用量に関する質問のトレースを開きます。チャットボットノードのネストされた LLM span と、search_medicine_qa(検索)の tool span を含む単一のトレースが表示されます。ツリーを展開して、エージェントのパスをエンドツーエンドで追跡します。

ネストされたSpanを含むトレース詳細

4

Spanを検査する

Healthcare Assistant Spanを選択し、 システムメッセージとユーザーメッセージAvailable ToolsOutputToken CountsLatencyAgent Cost がキャプチャされていることを確認します。これは、エージェントがなぜそのように回答したかを説明するための詳細情報です。

Span詳細

5

Trace Graphを表示する

次に、 Trace graph タブをクリックします。このタブは、この特定のインタラクションがシステム全体でどのようにステップごとに実行されたかを視覚的に表示します。

Trace Graph