湖倉一體新能力:EMR支援Hologres和MaxCompute資料來源

更新時間:
Copy as MD

阿里雲E-MapReduce(簡稱EMR)支援Spark、Trino計算引擎直接存取HologresMaxCompute表,為您提供了更加完善的湖倉一體化的解決方案,以及更加高效、穩定的資料分析體驗。

背景資訊

Hologres是阿里巴巴自主研發的一站式即時數倉引擎,支援海量資料即時寫入、即時更新、即時加工、即時分析,支援標準SQL(相容PostgreSQL協議),支援PB級資料多維分析(OLAP)與即席分析(Ad Hoc),支援高並發低延遲的線上資料服務(Serving),提供企業級離線上一體化全棧數倉解決方案。

MaxCompute是適用於資料分析情境的企業級SaaS(Software as a Service)模式雲資料倉儲,以Serverless架構提供快速、全託管的線上資料倉儲服務,消除了傳統資料平台在資源擴充性和彈性方面的限制,最小化使用者營運投入,使您可以經濟並高效地分析處理海量資料。

湖倉一體
隨著EMR支援Hologres和MaxCompute資料來源,您可以:
  • 高效訪問線上資料: 直接使用線上資料進行巨量資料分析,無需匯出HologresMaxCompute中的資料至OSS等中心化儲存,從而避免了匯出資料可能引起的資料丟失和安全問題,同時還提高了資料處理和分析的速度,使您可以更加靈活地利用自己的資料,並快速響應業務需求。
  • 降低資料處理成本:由於無需進行資料ETL的操作,以及額外的資料存放區和管理,降低了資料分析的整體成本。

使用限制

適用於EMR-3.45.1及之後版本、EMR-5.11.1及之後版本。

Spark配置Hologres資料來源

詳細資料,請參見Spark對接Hologres