すべてのプロダクト
Search
ドキュメントセンター

Dataphin:オフラインモードの構成の概要

最終更新日:Feb 06, 2025

ストリームバッチ統合タスクのオフラインモードでは、タスクリソース、時間パラメーター、Checkpoint など、タスクのリアルタイム関連のプロパティを定義する必要があります。このトピックでは、ストリームバッチ統合タスクのリアルタイムモードに関連する構成について説明します。など。このトピックでは、ストリームバッチ統合タスクのリアルタイムモードに関連する構成について説明します。

オフラインモードの構成エントリ

  1. Dataphin ホームページの上部にあるメニューバーから、開発 セクションに移動します。

  2. 以下の操作ガイドを使用して、ストリームバッチ統合タスク オフラインモード 構成パネルにアクセスします。

    image.png

オフラインモードの構成

オフラインモードの構成パネル内で、以下の表に詳述されているように、ストリームバッチ統合タスク オフラインモードのリソースと依存関係に関連するパラメーターを構成します。

構成項目

説明

スケジュール構成

スケジュール構成では、本番環境内のノードの定期的なスケジュールを定義できます。構成設定にあるスケジューリングプロパティを使用して、タスクスケジュールサイクルと有効日の両方を設定できます。スケジュールの設定方法については、「オフラインモードのスケジュール構成」をご参照ください。

リソース構成

  • オープンソース Flink リアルタイムコンピューティングソース

    本番環境と開発環境の両方で、オープンソース Flink によって作成されたタスクのリソースキュー、エンジンバージョン、並列処理の次数、Task Manager の数量、JobManager メモリ、および Task Manager メモリを構成します。詳細については、「オープンソース Flink オフラインモードリソースの構成」をご参照ください。

  • Ververica Flink リアルタイムコンピューティングソース

    Ververica Flink のストリームバッチ統合タスクでは、本番環境と開発環境の両方で、リソースクラスター、エンジンバージョン、並列処理の次数、Task Manager の数量、JobManager メモリ、Task Manager メモリなど、オフラインモードリソースを構成できます。これらのリソースの構成については、「Ververica Flink オフラインモードリソースの構成」をご参照ください。

  • Alibaba Blink リアルタイムコンピューティングソース

    Alibaba Blink で作成されたストリームバッチ統合タスクでは、リソースキューとエンジンバージョンを含むオフラインモードリソース設定を構成できます。構成については、「Alibaba Blink オフラインモードリソースの構成」をご参照ください。

変数構成

これは、リアルタイムコンピューティングタスクの変数パラメーターを設定するために使用されます。構成については、「オフラインモードの変数構成」をご参照ください。

ランタイムパラメーター

ストリームバッチ統合タスクを開発する場合、オフラインモードのランタイムパラメーターを構成することは、タスクの実行動作とパフォーマンスを管理するために不可欠です。これには、実行試行履歴の JobManager のメモリと TaskManager のスロットタイムアウトの設定などが含まれます。構成については、「オフラインモードのランタイムパラメーター構成」をご参照ください。

依存ファイル

オフラインモードでテキスト、Python、または Jar ファイルなどの外部リソースを必要とする ストリームバッチ統合タスク の場合、これらの必要なリソースファイルを Dataphin にアップロードできます。アップロード後、タスクの依存ファイルに含めて、適切な実行を確保します。構成については、「オフラインモードの依存ファイル構成」をご参照ください。

依存関係

オフラインモードでは、ストリームバッチ統合タスク は制御されたシーケンスで実行されます。これは、ビジネスフロー内の各ノードのスケジューリング依存関係を構成することで実現され、ビジネスデータの効率的かつタイムリーな生成を保証します。構成手順については、「オフラインモードの依存ファイル構成」をご参照ください。