Semantic Kernel Agent Telemetry:從邊界到驗證行
在受控應用程式邊界使用 Semantic Kernel Agent Telemetry,保持事件契約較小,並在建置聚合檢視之前驗證已知結果。
- 1
選擇結果
語義核心代理監控
- 2
定義合約
operation_id、工作流程、plugin_name、function_name、agent_name、model_alias 和發布
- 3
埋點邊界
包裝 Kernel.InvokeAsync 或所屬代理邊界,並在完成後發出一個終端應用程式結果。
- 4
核實證據
Exercise a known fixture, then inspect agent_run_completed for one correctly typed terminal row.
開始之前
先決條件和界限
- 在受信任的 .NET 服務中設定的語義核心
- 具有短超時和伺服器端金鑰的共享 Telemetry 日誌 API 包裝器
- 穩定的外掛、功能、代理、模型、工作流程和版本名稱
交貨設定
安裝並初始化伺服器端
使用一個共享的 HttpClient 和伺服器端金鑰、較短的超時時間和一個小的允許列表日誌 API 包裝器。 將攝取憑據保留在瀏覽器包、客戶端可見的環境變數、原始碼控制、日誌和異常訊息之外。
- 1準備一個具有有限網路行為的可重用伺服器端交付客戶端。
- 2在成功、失敗、重試或超時邊界處新增結果事件。
- 3在啟用警示之前傳送受控裝置並檢查儲存的行。
片段
從一個結構化事件開始
在工作流程完成、失敗或重試的位置新增此形狀。然後從真實的欄位建置儀表板。
Semantic Kernel Agent Telemetry事件
var startedAt = Stopwatch.GetTimestamp();
var status = "success";
string? errorType = null;
try
{
return await kernel.InvokeAsync(
"SupportPlugin",
"ResolveCase",
arguments,
cancellationToken
);
}
catch (Exception error)
{
status = "failed";
errorType = ClassifyAgentError(error);
throw;
}
finally
{
await telemetry.LogAsync("agent_run_completed", new
{
operation_id = operationId,
workflow = "support_resolution",
plugin_name = "SupportPlugin",
function_name = "ResolveCase",
status,
error_type = errorType,
duration_ms = Stopwatch.GetElapsedTime(startedAt).TotalMilliseconds,
release = appRelease,
}, cancellationToken);
}活動合約
operation_id、工作流程、plugin_name、function_name、agent_name、model_alias 和發布
狀態、duration_ms、tool_call_count、retry_count、human_handoff 和 error_type
input_tokens、output_tokens、estimated_cost_usd、已接受以及批准後的環境
實施檢查點
檢查站 1
包裝 Kernel.InvokeAsync 或所屬代理邊界,並在完成後發出一個終端應用程式結果。
檢查站 2
語義核心發出 OpenTelemetry 相容的日誌、指標和追蹤。在該後端保留詳細的跨度,而不是將所有跨度屬性複製到 Telemetry 中。
檢查站 3
請勿傳送提示、聊天曆史記錄、函式參數、函式結果、工具負載、模型內容、憑據或不受限制的異常訊息。
驗證
證明事件已到達
在演練已知的成功和失敗案例後執行此命令。如果您的最終事件契約與程式碼片段不同,請替換後備資料表名稱。
Semantic Kernel Agent Telemetry 驗證查詢
SELECT *
FROM agent_run_completed
ORDER BY timestamp_utc DESC
LIMIT 20;實施參考
在啟用新的生產路徑之前,請檢查事件合約、資料安全指南和上游主要文件。
生產邊界
保持結果事件小且可恢復
該模式提供了
- 除了上游工作流程之外,還有一個有界的、SQL 就緒的結果。
- 用於儀表板、警示和跨事件關聯的穩定欄位。
- 用於驗證成功、失敗、重試和超時行為的夾具驅動路徑。
該模式不提供
- OTLP 匯出器、自動收集管道或詳細追蹤和診斷日誌的替代品。
- 僅因為有效負載包含事件 ID,所以僅傳送一次。
- 收集原始提供商有效負載、使用者內容、憑證或受監管資料的權限。
事件架構起點
此工作流程的事件契約
在將查詢或程式碼片段適應生產之前,請檢查行粒度、發出邊界、所需型別、隱私類、範例有效負載和驗證清單。
相關產品功能
繼續此工作流程 AI代理監控
透過可審查的 SQL 連線代理執行、工具使用、模型成本、品質和產品結果。
相關 SQL 查詢範例
用 SQL 回答下一個問題
針對此工作流程中的結構化欄位執行查詢,檢查範例結果,並將有用的答案轉換為儀表板或警示。
按實施系列瀏覽
比較相關整合模式
與此整合配對的範本
更多整合