このトピックでは、Lakehouse Migration のスケジューリング移行ツールの基本機能について説明します。
概要
Lakehouse Migration (LHM) を使用すると、オープンソースのスケジューラや他のクラウドプラットフォームのスケジューラから DataWorks へワークフローを迅速に移行できます。
-
スケジューリング移行プロセスは、ソースジョブのエクスポート、異種ジョブの変換、DataWorks へのジョブインポートの 3 つのステップで構成されます。中間結果が公開されるため、移行プロセス全体を制御できます。
-
柔軟で設定可能な変換設定により、DataWorks + MaxCompute、EMR、Hologres などの複数のコンピューティングエンジンをサポートします。
-
移行ツールは軽量でデプロイが容易であり、JDK 17 ランタイム環境とネットワーク接続性のみが必要です。
-
移行プロセス全体がローカルで実行され、中間結果はアップロードされないため、データセキュリティが確保されます。
スケジューリング移行の機能マトリックス
LHM ツールは現在、以下のスケジューラータスクの DataWorks への自動移行をサポートしています。