Data Lake Formation とは - Data Lake Formation - Alibaba Cloud ドキュメントセンター

Alibaba Cloud Data Lake Formation（DLF）は、クラウドベースのデータレイクとレイクハウスを迅速に構築できるフルマネージドサービスです。このサービスは、顧客に統合されたメタデータ管理、統合された権限とセキュリティ管理、そしてワンクリックのデータ探索機能を提供します。 DLF は、ユーザーがクラウドネイティブのデータレイクとレイクハウスの構築と管理を迅速に完了し、さまざまなコンピューティングエンジンとシームレスに統合し、データサイロを打破し、ビジネスの洞察を得るのに役立ちます。

料金

DLF のデータ探索、権限管理、レイク管理機能は、パブリックプレビューの無料段階にあり、課金されません。
メタデータ管理機能は従量課金制です。メタデータオブジェクトストレージは、月間最大 100 万まで無料です。この制限を超える数量には料金が適用されます。詳細については、[課金]をご参照ください。
API リクエストは、月間最大 100 万まで無料です。この制限を超える数量には料金が適用されます。詳細については、[課金]をご参照ください。

アーキテクチャ

[データカタログ]: コンソールを使用して、データレイク内のデータカタログを表示および管理します。
[データベーステーブルと関数]: コンソールを使用して、データレイク内のデータベーステーブルと関数情報を表示および管理します。 [CreateDatabase] および [CreateTable] によってメタデータを操作し、サードパーティのアプリケーションサービスに統合します。マルチバージョン管理をサポートし、メタデータ抽出によってメタデータを自動的に生成できます。
[データ権限]: レイクのデータ権限制御を強化して、データセキュリティを確保します。データカタログ、データベース、データテーブル、データ列、関数の 5 つの粒度レベルの権限をサポートします。
[データレイク管理]: レイクのデータストレージに関する分析と最適化の提案を提供し、データライフサイクル管理を強化し、使用コストを最適化し、データ O&M を促進します。
[データ探索]: ワンクリックのデータ探索機能を提供し、Spark 3.0 SQL 構文をサポートし、履歴クエリを保存し、データをプレビューし、結果をエクスポートし、TPC-DS テストデータセットをワンクリックで生成できます。

シナリオ

シナリオ 1：クラウドベースのデータレイクの構築

DLF を [E-MapReduce] および [OSS] と統合することで、クラウドベースのデータレイクを迅速に構築できます。

シナリオ 2：データレイクハウスアーキテクチャの構築

DLF を [MaxCompute]、[DataWorks]、および [E-MapReduce] と統合することで、データレイクハウスアーキテクチャを迅速に構築できます。

シナリオ 3：フルマネージドレイクハウスデータアーキテクチャの構築フルマネージドのレイクハウスデータアーキテクチャ

DLF を [Databricks] および [OSS] と統合することで、クラウド上にフルマネージドのレイクハウスデータアーキテクチャを構築できます。

シナリオ 4：データ分析

メタデータ抽出機能とデータ探索機能を使用して、OSS 内の構造化データと半構造化データを迅速に分析および探索できます。

料金