檔案儲存體 CPFS

全託管、可擴充的並行檔案系統,滿足高效能運算情境的需求。

高效能檔案儲存體服務

檔案儲存體 CPFS(Cloud Parallel File Storage)是阿里雲推出的全託管、可擴充並行檔案系統,滿足高效能運算情境的需求。

檔案儲存體 CPFS 提供了統一的命名空間,支援成百上千的機器同時訪問,擁有數十 GB 的吞吐、數百萬的 IOPS 能力的同時還能保證亞毫秒級的延時。

檔案儲存體 CPFS 應用於 AI 訓練、自動駕駛、基因計算、影視渲染、石油勘探、氣象分析、EDA 模擬等情境,適用於高吞吐、高IOPS,海量檔案的 IO 密集型業務。

產品規格

400MB/s/TiB 基準(智算版邀測)

  • IOPS:最高可達 3000萬
  • 吞吐:最高可達 2TB/s
  • 平均單路 4k 讀延遲:0.25ms
  • 平均單路 4k 寫延遲:0.6ms
立即購買

200MB/s/TiB 基準

  • IOPS:最高可達 280萬
  • 吞吐:最高可達 100000MBps
  • 平均單路 4k 讀延遲:0.4ms
  • 平均單路 4k 寫延遲:0.6ms

支援與 OSS 資料移轉

立即購買

100MB/s/TiB 基準

  • IOPS:最高可達 280萬
  • 吞吐:最高可達 100000MBps
  • 平均單路 4k 讀延遲:0.6ms
  • 平均單路 4k 寫延遲:0.8ms

支援與 OSS 資料移轉

立即購買

產品優勢

高效能

採用分布式並行架構,最高可達 2TB/s 吞吐,3000 萬 IOPS。

彈性可擴充

支援線上擴容,效能隨容量擴充線性提升。

與 OSS 資料湖融合

支援與 OSS 資料流動,降低資料存放區成本。

簡單易用

分鐘級建立高效能檔案系統。

產品功能

高效能運算檔案儲存體

支援標準的 POSIX、MPI-IO、NFS 協議,高效能運算程式無需進行任何介面適配和效能最佳化即可高效率執行。

相容 POSIX/MPI/NFS

相容標準 POSIX/MPI-IO/NFS 協議,高效能應用程式無需進行任何更改,即可直接通過 ECS 或容器 CSI 介面串連 CPFS 讀寫資料。

高吞吐,低延時

新一代並行架構,使用者 I/O 在用戶端和儲存節點間完全並行訪問,通過叢集彙總,吞吐可以線性增加。同時基於全閃 SSD 介質,提供亞毫秒級時延。

並發訪問最佳化

中繼資料和資料均採用分布式的並行架構,無懼小檔案,支援百萬級 IOPS,幾千台伺服器同時並發訪問,適合 GPU 多機多卡訓練。

與阿里雲計算生態密切整合

與 E-HPC、容器 ACK、無影等計算平台整合,支援方便的掛載 CPFS 檔案系統。使用者可以在雲上分鐘級構建高效能運算和分析平台。

與 E-HPC 深度整合

通過 E-HPC 控制台可以快速建立 CPFS 檔案系統並搭建完整的高效能運算平台。

支援容器 ACK CSI 介面

CPFS 支援阿里雲ACKContainer Service。通過 CSI 介面,Container Service可以方便的利用 CPFS 的高速 I/O 能力。同時實現計算力大規模Auto Scaling。

支援無影CloudDesktop

CPFS 通過 NFS 協議服務支援無影案頭直接掛載。實現開發調試終端與高效能運算叢集的資料共用。

應用情境

  • 情境描述與概要

    將 CPFS 、NAS、OSS 和 ESSD 等多個儲存產品組合與 GPU 雲端服務器、SCC、神龍彈性裸金屬等計算叢集無縫對接。通過容器化部署服務實現資源彈性調度,提供超高吞吐和超高 IOPS 能力。

  • 情境需求與痛點

    AI 資料流複雜,儲存系統 IO 存在瓶頸。
    AI 訓練、推理需求高效能運算儲存。
    面對快速增長的資料,如何做好高效、低成本資料生命週期管理。

  • 解決方案與優勢

    CPFS 與 AI 情境完美結合,支援海量小檔案訪問,提升 AI 訓練效能。
    CPFS 靈活整合多種計算叢集,提供超高吞吐和超高 IOPS 能力。
    雲上雲下資料流轉和生命週期管理,滿足高效計算和成本最佳化。

  • 方案效果與價值

    CPFS 高效能 IO 加速訓練時的小檔案讀取效率,提升業務模型的訓練迭代效率,有力的支撐了客戶業務增長帶來的大容量和高效能的需求。
    OSS 冷熱資料分級儲存能力,為客戶提供海量資料長期儲存服務,進一步協助客戶節省開支。

  • 情境描述與概要

    自動駕駛情境下,每台測試車每天將產生幾十 TB 資料,針對這些資料需要進行快速分析,也要兼顧資料存放區的成本。

  • 情境需求與痛點

    業務創新為要,降低 IT 支出成本。
    海量資料需要實現高速處理。

  • 解決方案與優勢

    資料通過專線上傳至 OSS。
    需要訓練的資料,從 OSS 匯入到 CPFS,利用 GPU 和 CPFS 檔案系統的強大處理能力,在雲端進行模型訓練。
    訓練完成後,資料歸檔到 OSS 進行長期儲存。

  • 方案效果與價值

    CPFS 高效能、靈活擴充的能力,有力的支撐了客戶業務增長帶來的大容量和高效能的需求。
    OSS 冷熱資料分級儲存能力,為客戶提供海量資料長期儲存服務,進一步協助客戶節省開支。

推薦搭配使用

  • 情境描述與概要

    檔案儲存體 CPFS 為影視渲染提供幾十GBps吞吐和百萬 IOPS 的效能,線上擴容,業務無需中斷,專線上雲,確保資料安全。

  • 情境需求與痛點

    幾十 GBps 熱點資料訪問,需要極高的儲存吞吐能力。
    閉源商業渲染應用,需要應用零改造訪問共用儲存。
    不同專案算力,容量、效能需求不同,需要隨需而變。
    計算密集型業務,成本高昂,需要在各個環節控製成本。

  • 解決方案與優勢

    CPFS 高效能提供百萬 IOPS 和幾十GBps吞吐,支援前端緩衝加速。
    CPFS 提供極致彈性,磁碟層按需進行容量擴容,緩衝層按需(效能)購買,應用無感知。
    CPFS 高性價比,支援按照容量購買空間,按效能配置緩衝,無需副本,無需拷貝,單份資料提供極致效能,有效降低TCO。

  • 方案效果與價值

    CPFS 提供高吞吐和高IOPS,極大的提高了渲染任務的執行效率,簡化日常營運工作,降低整體成本。

  • 情境描述與概要

    以高效能並行檔案儲存體 CPFS 為核心,充分利用與 OSS 和 NAS 之間的資料分層流動, 與神龍、GPU 和容器等計算產品無縫結合,為 AI、超算、模擬和生信等業務提供高效能運算儲存解決方案。

  • 情境需求與痛點

    海量業務帶來的吞吐和 IO 效能瓶頸。
    傳統檔案儲存體無法彈性擴充性能和容量。
    營運需要重度參與資料管理和效能維護。

  • 解決方案與優勢

    超高效能儲存提高了計算資源的利用率。
    便於效能升級和容量擴充,減少營運管理成本。
    與雲上無縫對接,資料冷熱分層,降低成本。

  • 方案效果與價值

    阿里雲 CPFS 檔案系統提供超高吞吐與 IOPS,有效應對上千節點的資料讀寫壓力,提升了計算效率,顯著降低業務的整體成本,助力企業實現降本增效。

phone 聯絡我們
Hi, I'm Alibaba Cloud AI Assistant!
I can help with questions and solutions.