遷移至阿里雲 MaxCompute

MaxCompute 為您提供完善的數據遷移方案及多種經典分佈式運算模型,可快速解決海量數據儲存與運算問題,有效降低企業成本。

遷移到 MaxCompute 的好處

開箱即用,5 分鐘開通全新數據倉。與雲端主要流式服務深度整合,輕鬆接入各種來源的流式數據。

  • 湖倉一體的數據體系

    ▪ 融合數據湖的靈活性、豐富生態與數據倉的企業級服務能力

    ▪ 利用「智能數據倉」科技,統一儲存/整合元數據

    ▪ 提供統一開發/數據管理/數據管治體驗

  • 整體成本更低

    ▪ 只需為實際使用的作業與儲存付費

    ▪ 成本比 Hadoop Hive 低 90%

    ▪ 成本比其他雲端數據倉低至少 30%

    ▪ 毋須為平台進行營運維修,將營運維修所投入的資源減至最少

  • 實現數據倉現代化流程

    ▪ 傳統數據倉在基礎設施層面無法滿足企業需求

    ▪ 獲享雲端運算架構的極致彈性和性能提升

    ▪ 獲享企業級全域數據開發與數據管治能力

  • 便捷的遷移流程

    ▪ 完整的數據及應用程式遷移評估方案

    ▪ 便捷的數據、工作流、應用程式遷移工具與方案

    ▪ 遷移專家團隊服務

遷移案例

阿里雲某金融行業客戶表示:「阿里雲 MaxCompute Migration Assistant (MMA) 與 DataWorks 遷移助手等工具協助我們在 2 週內將 PB 級數據及上萬份表格遷移上雲,並在 5 個工作天內完成了上千項核心作業改造。完成遷移後,任務基準線提前了 3 小時,性能提升了 30%

阿里雲某遊戲行業客戶表示:「在自建群集網絡出口極度受限的情況下,阿里雲打破了以網絡傳輸為基礎的搬站模式,結合 MMA 與 OSS Data Transport 服務,在三個工作天內助我們完成了數據遷移此項『不可能的任務』,也讓我們贏得了內部業務團隊的認可

阿里雲某母嬰社群平台客戶表示:「我們遷移的數據量超過 1PB,單份表格規模逾 80TB。在這種極端場景下,阿里雲 MMA 以高於其他工具三倍的性能優勢,消除了我們最初的顧慮,最終高效、穩定、準確地協助我們完成了數據遷移,實現業務落戶雲端的目標

整體遷移流程

1

資訊採集

基本資訊調研
您的遷移週期和人力預期

2

方案評估

架構配對
數據與應用程式遷移評估

3

成本估算

配置報價、雲端資源數量等

4

遷移過程

數據遷移、同步校驗
應用程式遷移:任務+調度
權限遷移:權限配對

5

驗證與切換

驗證目標庫可供使用
自動完成常規改善流程
流暢切換、上線運行

遷移評估與架構

遷移通用架構圖

從 Hadoop 遷移

現況調研
方案支援人員發送 Hadoop 調查表格,由遷移客戶方配合完成現況調研,內容包括:

1. 群集規模:儲存、運算、YARN 資源等維度的資訊整理;

2. 網絡環境:如 IDC 內部網絡出口頻寬、專線連通 IDC 至阿里雲;

3. 常用組件、機械配置、現有數據架構圖;

4. Hadoop 群集表格/作業情況;

5. 遷移後期望:如週期、成本。

  • 方案評估

    1. 現有架構遷移阿里雲的產品架構配對;
    2. 源數據流程圖架構切換至阿里雲產品架構的解決方案;
    3. 數據驗證方案;
    4. 其他類型的作業遷移評估方案,如 UDF、MapReduce、外部表格、Spark 作業;
    5. 遷移過程及計劃評估。

  • 成本預估

    包括產品、產品說明、配置報價、數量等。

遷移通用架構圖

從其他雲端遷移

現況調研
1. 儲存與運算資源等維度資訊整理;

2. 常用組件、機械配置、現有數據架構圖;

3. 表格/作業情況;

4. 遷移後期望。

  • 方案評估

    1. 現有架構遷移阿里雲的產品架構配對;

    2. 數據流程圖架構切換至阿里雲產品架構的解決方案;

    3. 數據驗證方案;

    4. 遷移過程及計劃評估。

  • 成本預估

    包括產品、產品說明、配置報價、數量等。

遷移通用架構圖

從傳統數據倉遷移

1. 儲存與運算資源等維度資訊整理;

2. 常用組件、機械配置、現有數據架構圖;

3. 表格/作業/儲存過程狀況;

4. 遷移後期望。

  • 方案評估

    1. 現有架構遷移阿里雲的產品架構配對;

    2. 數據流程圖架構切換至阿里雲產品架構的解決方案;

    3. 數據驗證方案;

    4. 遷移過程及計劃評估。

  • 成本預估

    包括產品、產品說明、配置報價、數量等。

遷移工具

遷移評估—MMA

遷移評估—MMA

MaxCompute Migration Assistant (MMA) 可提供解決方案,助您將數據從不同數據源遷移到 MaxCompute。目前,從 Hive 遷移到 MaxCompute 屬最常見場景。

下載連結
數據遷移工具—Data Integration

數據遷移工具—Data Integration

Data Integration 是穩定高效、彈性伸縮的數據同步平台,致力在複雜網絡環境下,為豐富的異構數據源之間提供高速穩定的數據移動​​及同步功能。

詳細資料
數據遷移工具—DataX

數據遷移工具—DataX

DataX 是 Alibaba Group 內廣泛使用的數據同步工具,可達致 MySQL、Oracle、Postgre、HDFS 等各種異構數據源之間的高效數據同步。

詳細資料
作業遷移—遷移助手

作業遷移—遷移助手

遷移助手是 DataWorks 上的作業遷移利器,支援 Oozie 及 Azkaban 等開源調度引擎作業快速上雲,並提供詳盡的遷移報告。

詳細資料

遷移影片