E-MapReduce (EMR) ワークフローは、ワークフローとタスクのスケジュールに使用できるフルマネージド サービスです。このサービスは、オープンソースの Apache DolphinScheduler と完全に互換性があります。EMR ワークフローは、使いやすいスケジューリング サービスを提供します。視覚化された操作インターフェイスに基づいてワークフローとタスクを簡単に管理し、データウェアハウスを効率的に構築できます。これにより、本番タスクを安定して実行できます。
パブリックプレビュー
詳細については、「EMR ワークフローのパブリックプレビュー」をご参照ください。
利点
EMR ワークフローはすぐに使えるサービスであり、デプロイメントと O&M は不要です。
EMR ワークフローは、Alibaba Cloud インフラストラクチャに基づいて、安定した信頼性の高いクラウドネイティブ サーバーレス サービスを提供します。
EMR ワークフローは、Resource Access Management (RAM) のアカウントシステムと互換性があり、エンタープライズレベルのセキュリティと隔離機能を提供します。
EMR ワークフローは、EMR クラスタ、および Hive、Spark、Flink などのさまざまなビッグデータ コンピューティングおよびストレージエンジンとシームレスに統合されています。
EMR ワークフローは、Apache DolphinScheduler と互換性のある API 操作を提供します。EMR ワークフローでは、オープンソースの Apache DolphinScheduler を使用して作成されたタスクと、旧バージョンの EMR タスクを数クリックで移行することもできます。
特徴
EMR ワークフローには次の特徴があります。
さまざまなタスクタイプをサポート。EMR ワークフローは、SHELL、SPARK、HIVECLI など、複数のタイプのタスクをスケジュールできます。
視覚化されたタスク編集。EMR ワークフローを使用すると、視覚的な方法でワークフローを作成できます。詳細については、「ワークフローの管理」トピックの ワークフローの作成 セクションをご参照ください。
リアルタイム監視。EMR ワークフローを使用して、タスクをリアルタイムで監視し、ログを表示できます。詳細については、「タスクの管理」トピックの タスクとタスクインスタンスの管理 セクションをご参照ください。
スケジュールされたタスク管理。EMR ワークフローを使用して、スケジュールされたタスクを作成および管理できます。詳細については、「ワークフローの管理」トピックの スケジュールされたワークフローの構成 セクションをご参照ください。
例外ベースのアラート。EMR ワークフローは、例外が発生した場合にアラートを生成し、通知を送信できます。これにより、タスクの例外をできるだけ早く処理できます。詳細については、「セキュリティ管理」トピックの セキュリティ管理 セクションをご参照ください。
ファイル管理。視覚的な方法でファイルを作成およびアップロードできます。詳細については、「リソース管理」をご参照ください。