Platform For AI：LVM-視頻文本相似性過濾（DLC）

支援的計算資源

DLC

演算法說明

通過採樣若干視訊框架，計算視訊框架畫面的描述和訓練資料中的描述文本（訓練資料樣本檔案中<__dj__video>欄位後面的內容）的相似性，從而過濾相似性過低的視頻來保證視頻的品質，常用於後續視頻產生模型的訓練。訓練資料檔案格式說明：

輸入資料支援jsonl格式檔案，

輸入資料格式為jsonl格式檔案；其中文字欄位中的"<__dj__video>"和"<|__dj__eoc|>"分別對應視頻描述文本的起始和終止標誌。

{"videos":["oss://bucket_name.oss-cn-hangzhou.aliyuncs.com/video/data/video1.mp4"],"text":"<|__dj__video|> optional video caption <|__dj__eoc|>"}
{"videos":["oss://bucket_name.oss-cn-hangzhou.aliyuncs.com/video/data/video2.mp4"],"text":"<|__dj__video|><|__dj__eoc|>"}
{"videos":["oss://bucket_name.oss-cn-hangzhou.aliyuncs.com/video/data/video3.mp4"],"text":"<|__dj__video|> a person pointing to a piece of wood on the ground<|__dj__eoc|>"}
{"videos":["oss://bucket_name.oss-cn-hangzhou.aliyuncs.com/video/data/video4.mp4", "oss://bucket_name.oss-cn-hangzhou.aliyuncs.com/video/data/video5.mp4"],"text":"<|__dj__video|><|__dj__eoc|>"}

• videos欄位，為視頻的OSS路徑。

• text欄位，即上述演算法說明中的描述文本。

輸入/輸出

輸入樁

• 通過讀OSS資料組件，讀取訓練資料檔案所在的OSS路徑。

• 配置此演算法參數視頻資料OSS路徑，選擇訓練資料檔案。

關於訓練資料檔案，詳情請參見演算法說明。

輸出樁

過濾結果。詳情請參見下文中的參數說明。

配置組件

在Designer工作流程頁面添加LVM-視頻文本相似性過濾（DLC）組件，並在介面右側配置相關參數：