本文解答 AgentLoop 在產品認知、接入與快速上手、全棧觀測、評估與實驗方面的常見問題。
一、產品認知
1、AgentLoop 是什嗎？
AgentLoop 是阿里雲推出的面向企業級智能體的一站式自進化平台。圍繞「觀測與審計 → 評估與實驗 → 持續最佳化」構建智能體進化資料飛輪，持續提升企業 Agent 的品質、效率、成本與安全性。如需瞭解完整的產品架構和核心能力，參見什麼是 AgentLoop。
2、AgentLoop 與傳統 APM / LLMOps 工具有什麼區別？
傳統 APM 工具面向常規微服務，無法理解 Agent 的多步推理鏈路和 Token 消耗結構；LLMOps 工具面向 LLM 範式，僅提供片段化的可觀測和基礎評估能力。AgentLoop 面向 Agent 範式設計，核心差異體現在三方面：一是全棧觀測採用端到端無侵入採集並自動提取 Trajectory 軌跡；二是評估體系引入 Agent-as-a-Judge，評估器本身具備規劃和多步推理能力；三是構建了從觀測到最佳化的完整閉環資料飛輪，而非單點工具。
二、接入與快速上手
1、如何使用 AgentLoop？
無需登入即可體驗 Playgroud。接入完整流程參考AgentLoop QuickStart 全流程實踐。
2、多應用部署時如何區分不同的 Agent 應用？
同一接入環境下區分多應用，只需在啟動參數中設定不同的 --serviceName，其餘參數（licenseKey、workspace、project、endpoint）可保持一致。例如用 Docker 啟動多個執行個體分別服務不同使用者時，每個執行個體配置不同的 serviceName 即可在 AgentLoop 控制台按應用維度獨立觀測。
3、AgentSpace 如何組織和管理資源？
AgentSpace 是 AgentLoop 中組織和管理資源的頂層工作空間，一個 AgentSpace 對應一個團隊、業務線或獨立專案的完整資源邊界。建議為每個業務域（如客服、營運、研發）建立獨立的 AgentSpace 實現資源隔離，基於阿里雲 RAM 進行許可權控制。AgentSpace 的建立和管理操作詳見空間管理。
三、全棧觀測
1、AgentLoop 能觀測到 Agent 的哪些資料？
AgentLoop 採集覆蓋 Agent 全棧調用鏈路：使用者終端 → 網關 → Agent 智能體 → 上下遊依賴（Tool、Model）。具體資料包括：
Trajectory（完整執行軌跡）：Agent 從接收請求到返回結果的完整決策和執行路徑。
模型調用：輸入/輸出內容、Token 消耗、延遲。
工具調用：調用參數、傳回值、耗時、狀態。
對話記錄：完整的多輪互動上下文。
錯誤資訊：異常堆棧和錯誤分類。
效能指標：端到端延遲、各環節耗時佔比。
2、同時使用 Agent 架構和裸 OpenAI SDK 時如何避免重複採集？
如果同時啟用 Agent 架構外掛程式和 OpenAI 外掛程式，會導致 LLM Span 重複採集。建議二選一：若已通過架構探針採集到完整鏈路（含 LLM 調用），則無需再單獨接入 OpenAI 外掛程式。
3、會話資料如何查詢？有 SDK 嗎？
AgentLoop 暫無獨立的會話查詢 SDK，會話級資料通過 SLS SQL 查詢實現。典型做法：按 attributes.gen_ai.session.id 彙總，可統計單會話的以下維度：
維度 | 說明 |
| 會話中的對話輪次 |
| 輸入和輸出的 Token 消耗量 |
| 模型調用次數 |
| 工具調用次數 |
| Agent 調用次數 |
| 會話活躍時間長度 |
| 會話總耗時 |
4、如果 Agent 未使用 AgentLoop 展示的主流開發架構，如何採集資料？
如果未使用 AgentLoop 支援的主流架構，需要通過 OTel SDK 自訂埋點採集 GenAI 資料。使用主流 Agent 開發架構時，AgentLoop 已內建 GenAI 埋點，無需額外操作。
5、為什麼有時候大盤上看不到ttft
部分架構（如Claude Agent SDK）並沒有暴露出底層模型訪問的介面，所以這些架構無法採集到ttft這種指標。
四、評估與實驗
1、什麼是 Agent-as-a-Judge？與傳統 LLM-as-a-Judge 有什麼區別？
Agent-as-a-Judge 是 AgentLoop 引入的評估範式——評估器本身作為具備規劃、工具使用和推理能力的 Agent，基於完整 Trajectory 軌跡進行深度評估。與傳統 LLM-as-a-Judge 僅做單輪文本判斷不同，Agent-as-a-Judge 能夠：
理解多步推理過程。
分析工具調用的合理性。
追蹤決策分支邏輯。
這使其評估效果更接近人類專家。
2、多輪 Session 評估是否支援？
當前評估器僅支援按單次 Trace / Trajectory 評估單輪互動。多輪 Session 評估已納入產品規劃，預計 2026 年 9 月左右上線。