DataWorks は、MaxCompute、E-MapReduce、Hologres、Realtime Compute for Apache Flink、AnalyticDB、StarRocks、Platform for AI (PAI) などのビッグデータおよび AI サービスと統合された包括的なデータプラットフォームです。データウェアハウス、データレイク、レイクハウスなどの最新のデータアーキテクチャ向けに、エンドツーエンドのデータ統合、開発、ガバナンス、分析機能を提供します。2009 年以来 Alibaba Group が実績を重ねてきたビッグデータの方法論に基づいて構築された DataWorks は、企業がデータライフサイクル全体を管理するのに役立ち、金融、小売、製造業など何千もの顧客にデジタル変革の推進に利用されています。
機能
DataWorks は、データライフサイクル全体にわたるデータワークフローを効率化するための強力な機能群を提供します。その機能は、データモデリングや統合からセキュリティ、分析に至るまで、すべてをカバーする 6 つのコアモジュールで構成されています。
|
コアモジュール |
主な機能 |
|
データモデリング |
標準化され、再利用可能なデータウェアハウス資産を体系的に設計および管理します。 |
|
データ統合 |
クラウドまたはオンプレミス環境の多様なソース間で、リアルタイムおよびオフラインのデータ同期を可能にします。 |
|
Data Studio |
SQL、Spark、Python をサポートするオンライン IDE で、バッチ、ストリーム、機械学習タスクを開発します。複雑なタスクの依存関係とスケジュールを設定します。 |
|
データ資産ガバナンス |
データ品質、データマップ、データ資産管理などの機能でデータ資産を統制し、品質ルールの定義、データリネージの追跡、データカタログの管理を行います。 |
|
データセキュリティ |
データマスキング、きめ細かなアクセス制御、セキュリティ監査などの機能により、データライフサイクル全体にわたるデータコンプライアンスとセキュリティを確保します。 |
|
データ分析 |
SQL クエリやスマートデータディスカバリーなどのツールを使用して、インタラクティブな分析を実行し、ビジネスインサイトを獲得します。シームレスなアプリケーション統合のために、コードなしで高性能なデータ API を生成します。 |
メリット
包括的な機能と卓越したパフォーマンス
プラットフォームの統一された機能は、統合や開発からガバナンス、サービスに至るまで、データライフサイクル全体をカバーします。高いパフォーマンスを実現するよう設計されており、毎日ペタバイト級のデータを処理し、何百万もの複雑なタスクをスケジューリングして、要求の厳しい大規模なエンタープライズワークロードに対応します。
インテリジェントで使いやすい設計
完全なグラフィカルユーザーインターフェイスと柔軟なウェブベースの IDE により、習熟までの時間が短縮されます。SQL と Python のサポートに加え、コード生成やスマート Q&A のための組み込みインテリジェント Copilot により、初心者から経験豊富なユーザーまで、迅速に生産性を向上させることができます。
費用対効果が高く、すぐに利用可能
クラウドネイティブでフルマネージドなアーキテクチャにより、データ開発とガバナンスの機能をすぐに利用できます。このモデルは、自社構築プラットフォームに伴う研究開発コストと運用保守コストを大幅に削減し、リソースをビジネスイノベーションに集中できます。
セキュア、安定、高信頼性
厳格なテナント分離と、きめ細かなアクセス制御システムにより、金融機関レベルのセキュリティが保証されています。プラットフォームの安定性はエンタープライズ規模で実証されており、Alibaba Group のグローバルショッピングフェスティバルなどのイベント時のピーク負荷にも対応しています。
対象ユーザーと代表的な顧客
-
技術担当者：データ開発とモデリングの中核業務を行うデータエンジニアおよびアルゴリズムエンジニア。
-
ビジネス担当者：セルフサービスのデータクエリと分析を行うオペレーションスペシャリストおよび BI アナリスト。
-
管理担当者：データガバナンスとコンプライアンス管理を担当するデータ資産管理者およびデータセキュリティ責任者。
DataWorks は、公共サービス、金融、小売、インターネット、自動車、製造業など、さまざまな業界の顧客にサービスを提供しています。代表的な顧客は次のとおりです。
-
China State Grid のビッグデータセンター：DataWorks を使用して、本部および 27 の省/市レベルの企業から集まるペタバイト級のデータを一元管理しています。エンドツーエンドのデータプラットフォームガバナンスと監視システムにより、全体的なデジタル変革を加速させています。
-
フォーチュン 500 企業 Mondelēz China：DataWorks のインテリジェントなデータモデリングを活用し、エンドツーエンドのデータガバナンスを実現しています。これにより、データプラットフォームのセルフサービス機能が大幅に強化され、分散型のデータ駆動型意思決定とデジタルリテール変革が可能になりました。
-
上場企業 iDreamSky：自社開発のスケジューリングシステムを、オープンソースの EMR エンジンをベースにした DataWorks に置き換えました。これにより、同社の技術スタッフはビジネスオペレーションにより集中できるようになり、ゲームにおけるデータ駆動型の意思決定をサポートしています。
お客様事例の詳細については、「お客様事例」をご参照ください。
クイックスタート
サービスの有効化
DataWorks は、Chrome 69 以降を搭載した PC でのみ使用できます。
ほとんどのエンタープライズユーザーにとって、まずはDataWorks サービスを有効化し、主要なデータ開発とガバナンス機能の大半をカバーする Professional Edition から始めるのが最適です。
購入前に、「概要」、「購入ガイド」、「DataWorks エディションの選択と課金」をご参照ください。
ラーニングパス
DataWorks ドキュメントのホームページにあるラーニングパスを利用して、その概念、基本操作、高度な機能を素早く理解できます。
製品サポート
販売前および販売後のお問い合わせについては、チケットを送信できます。
付録：DataWorks の進化
Alibaba Group 内での発展の歴史
2009 年の創設以来、DataWorks は Alibaba の事業運営とともに進化してきました。MaxCompute や Hologres といったビッグデータコンピューティングエンジンの能力を活用することで、複数の技術段階を経て、Alibaba のデータプラットフォームとデータガバナンスへの取り組みの発展を支えてきました。現在、DataWorks は Alibaba Group 内で 1 日あたり 50,000 人以上のアクティブユーザーを抱えており、これは平均して従業員の 3 人に 1 人が使用していることになります。300 以上のデータアプリケーションをサポートし、Alibaba Group 全体で 100 以上の事業部門にサービスを提供しています。
|
フェーズ (年) |
テーマ |
事業展開 |
プラットフォーム開発 |
|
フェーズ 1 (2012) |
多様な事業成長とデータ価値の発見 |
1688、AliExpress、Taobao、eTao など、複数の事業チームが並行して発展しました。 |
デジタル変革をサポートするために、さまざまなデータプラットフォームが共存していました。
|
|
フェーズ 2 (2015) |
縦割り事業のサイロ化が出現 |
縦割り事業の発展：
|
データプラットフォームを統一するための「月面着陸計画」が開始：
|
|
フェーズ 3 (2018) |
データプラットフォームが持続的な事業成長をサポート |
データ駆動型の事業展開：
|
データプラットフォームの構築と資産化：
|
|
フェーズ 4 (2021) |
クラウドデータプラットフォームが事業とともに成長 |
ビジネスとデータの深い統合による完全なクラウドネイティブ化：
|
データプラットフォームがビジネスに貢献し、正のフィードバックループを形成：
|
Alibaba Cloud 上での発展の歴史
DataWorks は 2015 年に Alibaba Cloud で正式にローンチされ、長年にわたるビッグデータの専門知識をクラウドの顧客に提供し始めました。継続的な機能のイテレーションを通じて、DataWorks はさまざまな業界の顧客やパートナーと連携しています。エンドツーエンドのデータガバナンスを提供することで、顧客がデータを効果的に管理・活用できるようにし、データ品質と効率の向上を支援しています。
|
年 |
マイルストーン |
説明 |
|
2009 |
Alibaba Group で DataWorks プロジェクトが開始 |
社内製の DataX データ同期エンジンとタスクスケジューリングエンジンを開発し、超大規模な Hadoop クラスターにサービスを提供。 |
|
2013 |
「月面着陸計画」が開始、技術スタックの変革 |
コードネーム：月面着陸計画。グループはプラットフォーム統一計画を開始し、Hadoop から MaxCompute へ完全に移行。DataWorks は MaxCompute に完全に対応するよう最適化されました。 |
|
2015 |
DataWorks がクラウドで正式にローンチ |
コードネーム：Shujia Platform。「Shujia Platform」のコア製品として、DataWorks はパブリッククラウド市場に参入し、企業や政府機関の顧客へのサービス提供を開始した。 |
|
2017 |
国際展開 |
世界中の 12 以上の Alibaba Cloud リージョンでのデプロイを完了し、全世界の顧客へのサービス提供を開始。 |
|
2018 |
DataWorks V2.0 リリース |
ワンストップのインテリジェントなビッグデータクラウド研究開発プラットフォームに進化し、データ統合、データ開発、データサービス、アプリケーション開発を網羅。 |
|
2019 |
DataWorks V3.0 リリース |
複数のコンピューティングエンジンからのタスクのハイブリッドオーケストレーションをサポートし、新しい包括的なデータガバナンスシステムを導入。 |
|
2020 |
完全なオープン化とエコシステム構築 |
パートナーエコシステムを構築するための新しいオープンプラットフォームをローンチ。Forrester Wave™ for Cloud Data Warehouses で「Strong Performer」として認定。 |
|
2022 |
データガバナンス機能のアップグレード |
「データモデリングとガバナンスセンター」 製品をローンチ。中国のデータガバナンス市場で市場シェア No.1 を達成 (IDC)。 |
|
2024 |
AIGC を導入し、新しい Data+AI 機能をローンチ |
コアリリース：Copilot。データ開発・分析機能をアップグレードし、Copilot 製品をリリース。OpenLake レイクハウスアーキテクチャに基づいたエンドツーエンドの Data+AI 開発とガバナンスを提供。 |