データセットから NSFW (Not Safe For Work) スコアが高い動画をフィルタリングします。MP4 形式の動画のみがサポートされています。
サポートされるコンピューティングリソース
仕組み
各動画からフレームをサンプリングし、フレームごとに NSFW スコアを計算します。スコアのしきい値を超えた動画は除外されます。通常、動画生成モデルのトレーニングデータをキュレーションするために使用されます。
入力と出力
入力ポート
-
[Read File Data] コンポーネントを使用して、OSS からトレーニングデータを読み取ります。
-
[OSS データパス]を設定して、動画データまたは動画メタデータファイルを含む OSS ディレクトリを選択します。以下のパラメーター表をご参照ください。
-
任意の LVM Data Processing (DLC) コンポーネントを入力として使用できます。
出力ポート
フィルタリング結果です。出力の詳細については、以下のパラメーター表をご参照ください。
コンポーネントの設定
以下のパラメーターを使用して、ビジュアルモデリングで [LVM-NSFW フィルター (DLC)] コンポーネントを設定します。
|
タブ |
パラメーター |
必須 |
説明 |
デフォルト値 |
|
|
フィールド設定 |
動画データ OSS パス |
いいえ |
初回実行時に上流コンポーネントがない場合は、動画データを格納する OSS ディレクトリを手動で選択します。コンポーネントは、OSS バケットのルートディレクトリに video_meta.jsonl という動画メタデータファイルを生成します。次回以降の実行では、video_meta.jsonl を直接選択します。 |
デフォルト値なし |
|
|
出力ファイル OSS パス |
はい |
フィルタリング結果を格納する OSS ディレクトリです。出力ファイルは以下のとおりです：
|
デフォルト値なし |
||
|
出力ファイル名 |
はい |
フィルタリング結果のファイル名です。 |
result.jsonl |
||
|
パラメーター設定 |
NSFW スコアのしきい値 |
はい |
NSFW スコアの最大値です。 |
0.5 |
|
|
サンプリングフレーム数 |
はい |
サンプリングするフレーム数です。フレームは動画の再生時間にわたって均等に配置されます。 |
1 |
||
|
実行チューニング |
プロセス数 |
はい |
プロセス数です。 |
4 |
|
|
リソースグループの選択 |
パブリックリソースグループ |
いいえ |
インスタンスタイプ (CPU または GPU)、インスタンス数、および VPC です。 |
デフォルト値なし |
|
|
専用リソースグループ |
いいえ |
vCPU、メモリ、共有メモリ、GPU、およびインスタンス数です。 |
デフォルト値なし |
||
|
最大実行時間 (秒) |
いいえ |
最大実行時間 (秒) です。この制限を超えると、タスクは終了します。 |
デフォルト値なし |
||