資料湖儲存

使用 Alibaba Cloud Object Storage Service(OSS)構建資料湖,具備 99.9999999999%(12 個 9)可用性、99.995% SLA 和高延展性。

概覽

資料湖是一種支援大規模資料工作負載的新型資料分析架構。Alibaba Cloud 資料湖儲存以 Object Storage Service (OSS) 為強大基礎,為結構化、半結構化和非結構化資料提供集中儲存,是 IoT、遊戲、線上教育和廣告業務的理想解決方案。OSS 與 Hadoop、HIVE、Spark、Presto、Impala 等主流巨量資料生態系統無縫協作。

方案亮點

  • 未經處理資料儲存

    將來自多個來源的資料集中攝取並儲存到資料湖中,不受資料結構、模式和規模的限制。

  • 穩健基礎

    99.9999999999%(12 個 9)持久性保障,99.995% SLA,以及強大的遠程災備恢複能力,有效應對系統故障。

  • 高效能資料處理

    藉助 OSS Append Object 功能實現資料並行上傳與下載,支援追加新資料的同時即時讀取,提升工作負載分析效率。

  • 可擴充的彈性架構

    基於儲存與計算解耦的架構,按業務需求分別調整儲存與計算資源,降低總體擁有成本(TCO)。

瞭解更多資料湖儲存

聯絡我們

Alibaba Cloud 資料湖儲存如何支援教育、遊戲和廣告

您的挑戰

教育情境所需的音視頻、圖片、系統日誌及線上訊息等資料分散儲存,形成資料孤島,增加了資料分析和營運成本。

我們的解決方案

  • 該解決方案以 OSS 作為統一儲存中心,支援多種格式的教育資料,方便全球各類線上教育資料來源輕鬆上傳課件,包括圖片、視頻、音頻和文字檔。可通過 EMR 構建計算叢集,無縫對接 Spark、Hive、Presto 等巨量資料處理服務。還能基於課件分析測試結果,評估每位學生的學習品質,並藉助智能演算法提供定製化指導和精準內容推薦。結合 Alibaba Cloud CDN,可以超低延遲向全球學生發佈點播課件。

Object Storage Service

加密、安全的雲端儲存體服務,可儲存、處理和訪問海量資料。

瞭解更多

訊息佇列 Kafka 版

全託管的 Apache Kafka 服務,助您快速構建巨量資料分析資料管道。

瞭解更多

您的挑戰

遊戲行業需要高效的資料分析能力以及時調整遊戲情境,同時要求儲存和計算資源具備高度延展性,以應對流量高峰和升級需求。

我們的解決方案

  • 該解決方案採用 EMR 部署 Hadoop、Hive 等多種資料處理平台和系統叢集,滿足不同遊戲情境的資料分析需求。藉助 OSS,您可以將冷資料歸檔到更低成本的儲存中,並將熱資料存放在高可用執行個體中,從而最佳化資源使用率和效能。OSS + EMR 組合架構可提供與 Hadoop Distributed File System (HDFS) 一致的速度、可靠性和成本效益。儲存與計算執行個體可獨立擴縮容,靈活調整系統效能和規模,簡化管理和營運,同時降低升級成本。

Object Storage Service

加密、安全的雲端儲存體服務,可儲存、處理和訪問海量資料。

瞭解更多

訊息佇列 Kafka 版

全託管的 Apache Kafka 服務,助您快速構建巨量資料分析資料管道。

瞭解更多

DataWorks

安全的離線資料開發環境,提供強大的 Open API,打造再開發生態。

瞭解更多

您的挑戰

廣告行業面臨搜尋流量與內容需求不斷變化的挑戰,常駐計算叢集容易導致效能不足或資源浪費。

我們的解決方案

  • 該解決方案利用 ECS 構建高彈性 Kubernetes 叢集,部署 Hadoop、Hive、Presto 等資料處理平台。活動期間可擴容應對流量高峰,低峰期可縮容以節省成本。各類格式的查詢資料統一儲存在 OSS 中;冷資料歸檔至 OSS Archive Storage,定期訪問的資料存放在 OSS 標準儲存以確保高可用。通過可配置規則檢索和管理資料,按需擴充儲存容量,輕鬆最佳化儲存成本。該解決方案使用 Alibaba Cloud Elasticsearch 對網站資料進行快速索引和精確搜尋,使用訊息佇列 Kafka 版監控網站活動並收集即時統計資料。此外,使用 DLA 處理互動式查詢,使用 EMR Druid 處理即時查詢和即席查詢。這些任務由 Hadoop、Hive、Presto 等計算叢集處理,結果儲存在 OSS 標準儲存中。

Elastic Compute Service

彈性、安全的虛擬雲端服務器,滿足您的各類雲託管需求。

瞭解更多

Alibaba Cloud Elasticsearch

雲端式的 Elasticsearch 服務,內建 Kibana 整合,並深度整合 Alibaba Cloud VPC、Cloud Monitor 和 Resource Access Management 等服務。

瞭解更多

Data Lake Analytics

互動式分析服務,支援使用標準 SQL 文法和 BI 工具低成本分析雲上儲存的資料。

瞭解更多

瞭解更多資料湖儲存

聯絡我們

安全與合規

致力於為全球主要司法管轄區提供穩定、可靠、安全且合規的雲基礎設施服務。
瞭解更多
  • CSA STAR
  • ISO 27001
  • SOC2 Type II 報告
  • C5
  • 等保 2.0
  • MTCS

開始使用 Alibaba Cloud 解決方案

瞭解並體驗 Alibaba Cloud 的強大能力。

聯絡我們