日誌迴流將 SLS(Log Service)推理日誌轉化為可用於模型微調或評測的結構化資料集。
功能概述
日誌迴流功能將 SLS(Log Service)中的推理日誌資料迴流到百鍊平台,經過格式化處理後產生結構化資料集(JSONL 格式),可用於模型微調或模型評測。迴流產出的是結構化資料,而非原始日誌的直接副本。
支援範圍
日誌迴流支援建立以下兩類資料集:
- 訓練集:訓練情境為文本產生,訓練方式支援 SFT(監督微調)。
- 評測集:支援文本產生情境。
日誌迴流目前僅在華北2(北京)和新加坡 Region 可用,其他 Region 不顯示日誌迴流入口。單次迴流上限為 10 萬條,可多次迴流到同一資料集的不同版本以積累更多資料。
日誌迴流支援平台存储(預設)。儲存方式的差異和選擇指引,請參見建立日誌迴流資料集。
迴流產生的資料集可直接用於下遊任務:訓練集可用於模型調優,評測集用於模型評測。
開通並授權相關服務
使用日誌迴流前,請確認當前 Region 為華北2(北京)或新加坡(其他 Region 不顯示日誌迴流入口),並在模型監控頁面完成以下服務開通和許可權授權。全部完成後授權配置抽屜自動關閉,進入日誌迴流表單。
開啟審計日誌和推理日誌
審計日誌和推理日誌各需完成三個步驟,共六個條件全部滿足後才能使用日誌迴流。審計日誌是推理日誌的前置依賴,必須先完成審計日誌的全部步驟。
審計日誌- 授權 SLS 服務關聯角色:單擊立即授权,授權 AliyunServiceRoleForSFMAccessSLS 角色。未授權時顯示紅色未授权標籤。
- 開通 SLS Log Service:未開通時顯示未开通狀態和跳轉連結,單擊後前往 SLS 控制台完成開通。
- 開啟審計日誌:單擊创建并开启审计日志,系統建立 LogStore(日誌庫)執行個體並輪詢等待就緒(最多 60 秒)。
- 授權推理日誌的 SLS 服務關聯角色。
- 確認 SLS Log Service已開通。
- 開啟推理日誌:審計日誌未開啟時該按鈕置灰,需先完成審計日誌開啟。
Important開啟必須按序:先審計日誌,再推理日誌。關閉必須反序:先關閉推理日誌,再關閉審計日誌。關閉日誌後已有資料不可複原,操作前請確認不再需要日誌資料。推理日誌開啟後 SLS 持續產生儲存和讀寫費用,不再需要時應及時關閉。
下表匯總了日誌迴流涉及的服務關聯角色。
角色名稱 | 用途 | 授權時機 |
|---|---|---|
AliyunServiceRoleForSFMAccessSLS | 百鍊訪問 SLS 日誌資料 | 審計日誌和推理日誌各授權一次 |
建立日誌迴流資料集
日誌迴流提供三個入口,均可進入配置表單建立資料集:
模型監控列表頁
在模型监控列表頁頂部,單擊日志回流。首次使用時先完成授權配置,授權通過後自動展示日誌迴流表單。

模型監控詳情頁
在模型監控詳情頁的時間選取器地區,單擊日志回流。從此入口進入時,表單自動預填當前頁面的時間範圍、API Key 和模型,且模型不可修改。
資料管理頁
在資料管理頁面建立資料集時,匯入方式選擇日志回流。該選項僅在訓練集(文本產生 + SFT)或評測集(文本產生)時可見。
配置迴流參數
進入日誌迴流表單後,按從上到下的順序配置以下參數。部分參數有前置依賴:API Key 過濾需先選時間範圍,模型選擇需先選時間範圍和 API Key。修改時間範圍、資料類型、訓練情境或訓練方式會聯動重設其他參數,建議嚴格按順序填寫。各參數取值說明見下表。
預估日誌迴流資料:系統根據篩選條件顯示預估的迴流資料條數。超過 10 萬條時紅色警告,超出部分不會被迴流。查詢結果過多時,確定按鈕禁用,需縮小篩選範圍。
Note表單聯動重設規則:修改時間範圍會重設 API Key(回到全部)和模型選擇(清空);修改資料類型、訓練情境或訓練方式會重設儲存位置和匯入方式。
Important儲存方式、資料類型和訓練方式在建立後均不可更改,選擇前請仔細確認。
參數 | 說明 | 是否必填 | 取值說明 |
|---|---|---|---|
迴流位置 | 資料集的儲存方式 | 是 | 平台儲存(預設)。建立後不可更改 |
資料集名稱 | 資料集在列表中的顯示名稱 | 是 | 中文、英文、數字、底線、斜杠、連字號,最大 50 字元。建議採用 功能情境_模型名_時間 格式命名。建立後不可修改 |
資料集描述 | 資料集用途補充說明 | 否 | 最大 200 字元 |
類型與格式 | 資料集用途類型 | 是 | 訓練集或評測集。選擇評測集時訓練情境和訓練方式隱藏。建立後不可更改 |
訓練情境 | 訓練情境類型(僅訓練集顯示) | 是 | 當前僅支援文本產生 |
訓練方式 | 微調方法(僅訓練集顯示) | 是 | SFT,選項由系統動態展示。建立後鎖定 |
時間範圍 | 迴流日誌的時間段 | 是 | 最近 30 天(含當天),精確到時分秒。修改會重設 API Key 和模型選擇 |
API Key 過濾 | 按 API Key 篩選日誌資料 | 是 | 全部(不過濾)、其他(排除已列出 Key)、或選擇具體 Key(多選) |
模型選擇 | 迴流目標模型 | 是 | 最多 10 個,按能力類型過濾不匹配模型置灰 |
查看迴流結果
提交日誌迴流任務後,在資料管理列表頁查看資料集和匯入進度。
列表頁展示
日誌迴流建立的資料集在列表頁中的匯入方式顯示為日志回流,儲存位置根據建立時的選擇顯示為平台存储。
可在列表頁查看任務的匯入狀態。任務失敗時,可查看系統返回的具體失敗原因。
平台儲存模式下,匯入完成後系統自動發布資料集版本,無需手動操作。
詳情頁資訊
資料集詳情頁展示的資訊根據儲存方式有所不同:
- 平台儲存(OSS 匯入):展示發布狀態、資料量、建立時間、FileID、資料類型、匯入狀態和 OSS 匯入地址。
- 其他情況:展示發布狀態、資料量、建立時間、FileID、資料類型和匯入狀態。
追加日誌迴流資料
在資料管理頁面,向已有資料集追加新一批日誌迴流資料,有以下兩種方式:
匯入資料頁
進入已有資料集的匯入資料頁面,選擇日志回流作為匯入方式。表單參數與建立流程一致,詳見建立日誌迴流資料集。此方式額外支援按工作空間過濾。
此方式適用於所有儲存類型的資料集。
新增版本彈窗
在資料集詳情頁,單擊新增版本,在彈窗中選擇日誌迴流匯入方式。僅平台儲存資料集可用此方式。
增量迴流最佳實務
推薦分批次迴流,針對不同時段或不同模型分別執行迴流任務,逐步積累高品質訓練集。每批次可精準選擇表現良好的模型和業務高峰時段的資料,確保資料品質優於一次性大量迴流。
常見問題
API Key 過濾的「其他」包含哪些請求?
問題:API Key 過濾中其他包含哪些請求?
其他過濾掉已列出 Key 的請求,包含已刪除的 Key 或其他工作空間產生的日誌。全部則不按 Key 過濾。三種模式(全部/其他/逐個選擇)的完整說明見建立日誌迴流資料集的 API Key 過濾參數。
10 萬條上限是資料集總量限制嗎?
問題:單次迴流上限 10 萬條,是否意味著資料集總量也被限制在 10 萬條?
不是。10 萬條是單次迴流的上限,並非資料集的總量上限。可以多次迴流到同一資料集的不同版本,累計資料量不受此限制。例如分批次針對不同時段迴流,每次 10 萬條以內,最終資料集可以積累遠超 10 萬條的資料。
審計日誌和推理日誌是同一個操作嗎?
問題:開啟日誌需要分別Action Trail日誌和推理日誌,兩者有什麼關係?
兩者需分別開啟,且必須先完成審計日誌才能開啟推理日誌。操作步驟詳見開通並授權相關服務。
預估資料量為什麼和實際迴流結果不一致?
問題:提交前顯示的預估資料量與迴流完成後的實際條數有差異。
預估資料量是基於篩選條件的近似估算值,實際迴流完成後的資料條數可能略有差異,這是正常現象。預估值用於協助判斷是否需要調整篩選條件(如超過 10 萬條時提示縮小範圍),不代表精確計數。