Queen SDK は、Alibaba Cloud ビデオクラウドチームが開発したスマートレタッチ SDK です。この SDK は、画像レタッチ、顔レタッチ、クロマキー、ステッカー、メイクアップ、ジェスチャー認識、ボディシェイプ、ヘアスタイリング、拡張現実 (AR) ライティングなど、幅広い機能を提供します。これらの機能は、ライブストリーミング、ビデオ会議、ショートビデオ制作などのシナリオで使用できます。このトピックでは、Queen SDK の利点、主要機能、およびシナリオについて説明します。
はじめに
Alibaba Cloud Queen SDK は、使いやすく、さまざまな強力な機能を提供するスマートレタッチ SDK です。Queen SDK は、独自のインテリジェントビジョンアルゴリズムと、顔と人間の体検出および認識テクノロジーを採用しています。モバイルデバイスで、基本的な顔レタッチ、高度な顔レタッチ、顔のシェイプ、メイク、ステッカー、クロマキー、ジェスチャーと姿勢の認識など、ビデオクリエイターに編集および処理機能を提供します。Queen SDK は、ライブストリーミングやビデオ制作中の多様なレタッチ要件を満たすのに十分な機能を提供します。Queen SDK は、Android、iOS、および Web で使用できます。
利点
独自の顔キーポイント検出テクノロジーは、106 の基本ポイントと 280 の高精度ポイントを認識します。このテクノロジーにより、レタッチ効果がより鮮やかになります。
インテリジェントビジョンアルゴリズムとリアルタイムレンダリングテクノロジーは定期的に最適化され、ユーザーエクスペリエンスが継続的に向上します。
顔のレタッチとシェイプ効果、フィルター、ステッカー、素材は継続的に更新および改善され、レタッチのオプションが増えます。
包括的な開発者サポートにより、問題に対するタイムリーなソリューションが提供され、サービスの信頼性が確保されます。
機能
機能 | 説明 |
顔レタッチ | 顔全体と手動の顔レタッチをサポートします。顔全体のレタッチは 5 つのスタイルを提供します。手動の顔レタッチでは、肌の美白、スムージング、ブライトニング、バラ色の頬の追加、画像のシャープ化、彩度とコントラストの調整、目の下のクマ、ほうれい線、首やしわなどのしわの除去、歯のホワイトニング、目の輝き、口紅とチークの適用ができます。各効果の強度レベルを調整できます。 |
顔のシェイプ | 顔全体と手動の顔のシェイプをサポートします。顔全体のシェイプは 5 つのスタイルを提供します。手動の顔のシェイプは、次の効果をサポートしています。
|
メイク | 顔全体のメイクと手動メイクをサポートします。顔全体のメイクスタイル: シンプル、ピュア、ビンテージ、成熟。手動メイク効果: 口紅、涙袋、チーク、眉、ハイライト、アイシャドウ、アイライナー、まつげ。各効果の強度レベルを調整できます。メイク効果は、顔の動きや表情にリアルタイムで適応します。 |
フェイスプレイ | 顔検出および追跡テクノロジーに基づいて、ピクセル化やフェイスマスクなどの面白い効果を提供します。 |
フィルター | 34 個のフィルターを提供し、さらに追加されています。リアルタイムレンダリングがサポートされています。 |
ステッカー | 静止画とアニメーションを含む 79 個のステッカーを提供し、新しいステッカーが追加されています。ステッカーは顔にシームレスにマッチし、顔の動きや表情にリアルタイムで適応します。 |
クロマキー | 青と緑の両方のスクリーンをサポートします。この機能は、さまざまな照明条件や角度で、人体を複雑な背景から正確に識別して分離し、リアルタイムの体追跡を維持します。 |
画像のマット | 実際の背景の置き換えをサポートします。この機能は、さまざまな照明条件や角度で、人体を複雑な背景から正確に識別して分離し、リアルタイムの体追跡を維持します。 説明 この機能を使用して、背景のぼかし、透明な背景、背景の置き換えを実装できます。 |
ジェスチャー認識 | 手とジェスチャーのキーポイントを正確に検出してキャプチャし、数字、ハート、拳、かぎ爪、バルカン式敬礼などの 25 の一般的なジェスチャー、およびさまざまな動的ジェスチャーを認識します。 |
動きの検出 | 挙手、ハンドハート、腕組み、スーパーマンポーズなどの 13 の静的姿勢、および縄跳び、ジャンピングジャック、スクワット、アームサークル、ダイヤモンドストレッチ、チェストストレッチ、腹筋、腕立て伏せ、膝付き腕立て伏せなどの 9 つの動きを識別します。これらの動きの回数はリアルタイムでカウントされます。 |
ボディシェイプ | 体、脚、腕、首、ウエストの痩身、脚の長さの変更、頭のサイズ変更、胸の拡大ができます。自然なボディシェイプ効果により、体が均整の取れたように見えます。 |
ヘアスタイリング | さまざまな姿勢や背景環境で髪の毛の領域を正確に識別し、8 色の髪の色を提供します。 |
AR ライティング | 手と指の動きを追跡するため、画面にリアルタイムで書き込みや描画ができます。この機能は、ライブストリーミング、教育、高度なインタラクションに役立ちます。 |
アニ文字 | 人間の顔のさまざまな角度と表情の変化をキャプチャします。アニ文字は、顔の表情認識アルゴリズムに基づいて特定の方法で変化するように設定できます。これにより、楽しく面白い効果が生まれます。ウィンク、まばたき、口、目、眉の動きなど、51 のさまざまな表情をサポートしています。 |
ライブネス検出 | 口を開ける、頭を右に振る、頭を上下に動かすなどの動きを分析することにより、人物が生身の人間かどうかを判断します。 |
異常行動検出 | 人物が携帯電話を持っているか、イヤホンを装着しているか、ディスプレイモニターがあるかどうかを識別します。また、カメラ範囲からの退出、立ち上がる、座る、手を挙げるなどの異常行動も検出します。 |
顔認証と類似性チェック | 顔のキーポイント検出と特性計算アルゴリズムに基づいて、さまざまな角度からの類似性を等級付けすることにより、顔を認証します。 |
一般的なシナリオ
ライブストリーミング
リアルタイムのレタッチが必要なさまざまなライブストリーミングシナリオに適用されます。
長編および短編ビデオ
ビデオ制作のための豊富な効果セットを提供します。
オンライン教育
教師が授業中の外見を改善するのに役立ちます。自然なレタッチ効果により、教師はより親しみやすい印象になります。
ビデオ会議
ビデオ会議中にリアルタイムのレタッチとインタラクション効果を提供します。
Queen SDK を試す
詳細については、「Queen SDK のデモをダウンロードする」をご参照ください。
詳細については、「Queen SDK をダウンロードする」をご参照ください。