使用 CrewAI workflow telemetry 傳送並驗證事件
在受控應用程式邊界使用 CrewAI workflow telemetry,保持事件契約較小,並在建置聚合檢視之前驗證已知結果。
- 1
選擇結果
多代理工作流程可觀測性
- 2
定義合約
run_id、crew_name 和呼叫狀態
- 3
在結果處發出
將既有的 Crew 和輸入傳給 run_research_crew。此包裝僅支援同步 kickoff;非同步方法、串流和恢復的檢查點需要各自的生命週期處理。
- 4
核實證據
Exercise a known fixture, then inspect crew_invocation for one correctly typed terminal row.
開始之前
開始之前
- 已存在的同步 Crew,設定 stream=False,並使用應用程式自身的輸入
- 伺服器端 TELEMETRY_API_KEY;本範例使用 Python 標準函式庫 HTTP,而非 Telemetry SDK
- 內容策略涵蓋任務輸入、代理輸出、記憶體、知識和工具負載
交貨設定
安裝並初始化伺服器端
此同步 Crew 包裝使用 Python 標準函式庫 HTTP 傳送事件;不需要安裝或初始化 Telemetry SDK。 將攝取憑據保留在瀏覽器包、客戶端可見的環境變數、原始碼控制、日誌和異常訊息之外。
- 1使用 run_research_crew 包裝既有的同步 Crew,並保持 stream=False。
- 2在成功、失敗、重試或超時邊界處新增結果事件。
- 3在啟用警示之前傳送受控裝置並檢查儲存的行。
片段
從一個結構化事件開始
在工作流程完成、失敗或重試的位置新增此形狀。然後從真實的欄位建置儀表板。
CrewAI workflow telemetry事件
import json
import os
import sys
from time import perf_counter
from urllib.request import Request, urlopen
from uuid import uuid4
def emit_crew_invocation(event):
try:
key = os.environ.get("TELEMETRY_API_KEY")
if not key:
return
request = Request(
"https://api.telemetry.sh/log",
data=json.dumps({"table": "crew_invocation", "data": event}).encode("utf-8"),
headers={"Authorization": key, "Content-Type": "application/json",
"User-Agent": "telemetry-crew-example/1"},
method="POST",
)
with urlopen(request, timeout=1) as response:
if not 200 <= response.status < 300:
raise RuntimeError("telemetry_delivery_unconfirmed")
except Exception:
try:
print("Telemetry delivery unconfirmed", file=sys.stderr)
except Exception:
pass
def run_research_crew(research_crew, inputs):
# Use an already configured, synchronous, non-streaming Crew.
if getattr(research_crew, "stream", False):
raise ValueError("This wrapper requires stream=False")
run_id = str(uuid4())
started_at = perf_counter()
status, error_type = "interrupted", None
try:
result = research_crew.kickoff(inputs=inputs)
status = "returned"
return result
except Exception as error:
status = "failed"
error_type = "timeout" if isinstance(error, TimeoutError) else "crew_error"
raise
finally:
# Neither metadata creation nor export may replace the crew outcome.
try:
emit_crew_invocation({
"run_id": run_id,
"crew_name": "research_crew",
"status": status,
"error_type": error_type,
"duration_ms": round((perf_counter() - started_at) * 1000),
"release": os.environ.get("APP_RELEASE"),
})
except Exception:
pass
# Pass your application's existing Crew and inputs:
# result = run_research_crew(research_crew, inputs)事件結構
run_id、crew_name 和呼叫狀態
duration_ms、有限的 error_type 類別和 release
檢查設定
檢查站 1
將既有的 Crew 和輸入傳給 run_research_crew。此包裝僅支援同步 kickoff;非同步方法、串流和恢復的檢查點需要各自的生命週期處理。
檢查站 2
kickoff 返回不代表工作已被接受或已交付下游。請單獨記錄審核決定;本範例不測量任務數、委派、重試或費用。
檢查站 3
不要在這些事件中包含輸入、輸出、記憶、知識、工具資料或例外文字。
檢查站 4
HTTP 匯出使用一秒通訊端逾時,並非嚴格的總時限。匯出和診斷失敗不改變原始結果或例外;同步交付仍可能增加延遲。不提供持久佇列、重試或關閉排空。
檢查站 5
當需要步驟級診斷時,使用 CrewAI 自己的追蹤或回撥,並與批准的執行 ID 相關聯。
驗證
證明事件已到達
在演練已知的成功和失敗案例後執行此命令。如果您的最終事件契約與程式碼片段不同,請替換後備資料表名稱。
CrewAI workflow telemetry 驗證查詢
SELECT *
FROM crew_invocation
ORDER BY timestamp_utc DESC
LIMIT 20;實施參考
在啟用新的生產路徑之前,請檢查事件合約、資料安全指南和上游主要文件。
在哪裡記錄事件
保持結果事件小且可恢復
該模式提供了
- 除了上游工作流程之外,還有一個有界的、SQL 就緒的結果。
- 用於儀表板、警示和跨事件關聯的穩定欄位。
- 用於驗證成功、失敗、重試和超時行為的夾具驅動路徑。
該模式不提供
- OTLP 匯出器、自動收集管道或詳細追蹤和診斷日誌的替代品。
- 僅因為有效負載包含事件 ID,所以僅傳送一次。
- 收集原始提供商有效負載、使用者內容、憑證或受監管資料的權限。
事件結構描述範例
此工作流程的事件結構描述
在將查詢或程式碼片段適應生產之前,請檢查行粒度、發出邊界、所需型別、隱私類、範例有效負載和驗證清單。
相關產品功能
繼續此工作流程 AI代理監控
透過可審查的 SQL 連線代理執行、工具使用、模型成本、品質和產品結果。
相關 SQL 查詢範例
更多 SQL 範例
針對此工作流程中的結構化欄位執行查詢,檢查範例結果,並將有用的答案轉換為儀表板或警示。
按實施系列瀏覽
比較相關整合模式
與此整合配對的範本
更多整合