Yüksek performanslı dosya depolama hizmetleri
Cloud Parallel File Storage (CPFS), Alibaba Cloud tarafından sağlanan tamamen yönetilen bir paralel dosya sistemidir. CPFS'yi yüksek performanslı hesaplama gerektiren senaryolarda kullanabilirsiniz.
CPFS, birleşik bir ad alanı sunar ve yüzlerce sunucunun eş zamanlı erişimini destekler. Ayrıca milisaniye altı gecikme sağlamak için onlarca GB/s G/Ç aktarım hızı ve milyonlarca IOPS sağlar.
CPFS dosya sistemleri; yapay zeka eğitimi, otonom sürüş, genomik hesaplama, film işleme, petrol araması, hava tahmini ve elektronik tasarım otomasyonu (EDA) yazılımı emülasyonu gibi yüksek aktarım hızı, yüksek IOPS ve büyük veri hacmi gerektiren G/Ç yoğun iş yüklerinde kullanılabilir.
Teknik Özellikler
400 MB/s/TiB Taban Çizgisi (CPFS for Lingjun Davetli Önizleme)
-
![]()
IOPS: 30 milyona kadar
-
![]()
G/Ç aktarım hızı: 2 TB/s'ye kadar
-
![]()
Tek soketli sunucudan 4 KiB dosya okuma
ortalama gecikmesi: 0,25 ms -
![]()
Tek soketli sunucuya 4 KiB dosya yazma
ortalama gecikmesi: 0,6 ms
IOPS: 30 milyona kadar
200 MB/s/TiB Taban Çizgisi
-
![]()
IOPS: 2,8 milyona kadar
-
![]()
G/Ç aktarım hızı: 100.000 Mbit/s'ye kadar
-
![]()
Tek soketli sunucudan 4 KiB dosya okuma
ortalama gecikmesi: 0,4 ms -
![]()
Tek soketli sunucuya 4 KiB dosya yazma
ortalama gecikmesi: 0,6 ms
OSS ile CPFS arasında veri geçişini destekler.
100 MB/s/TiB Taban Çizgisi
-
![]()
IOPS: 2,8 milyona kadar
-
![]()
G/Ç aktarım hızı: 100.000 Mbit/s'ye kadar
-
![]()
Tek soketli sunucudan 4 KiB dosya okuma
ortalama gecikmesi: 0,6 ms -
![]()
Tek soketli sunucuya 4 KiB dosya yazma
ortalama gecikmesi: 0,8 ms
OSS ile CPFS arasında veri geçişini destekler.
Avantajlar
Yüksek Performans
Dağıtık eş zamanlı mimariye dayalı olarak 2 TB/s G/Ç aktarım hızı ve 30 milyon IOPS sağlar.
Ölçeklenebilir
Otomatik ölçeklendirmeyi ve doğrusal olarak iyileştirilmiş performansı destekler.
Object Storage Service Veri Gölü Entegrasyonu
Object Storage Service ile veri iletişimini destekler ve veri depolama maliyetlerini azaltır.
Kullanımı Kolay
Birkaç dakika içinde yüksek performanslı bir dosya sistemi oluşturmanızı sağlar.
Özellikler
Yüksek Performanslı Hesaplama Dosya Depolama
CPFS; standart Portable Operating System Interface (POSIX), MPI-IO ve Network File System (NFS) protokollerini destekler. API işlemleri çağırmadan veya performans optimizasyonu yapmadan yüksek performanslı hesaplama programlarınızı verimli bir şekilde çalıştırabilirsiniz.
POSIX, MPI-IO ve NFS protokolleriyle uyumlu
CPFS; POSIX, MPI-IO ve NFS protokolleriyle uyumludur. Yüksek performanslı programlarınızda herhangi bir değişiklik yapmadan, bir ECS örneğini veya Container Storage Interface (CSI) arayüz eklentisini kullanarak CPFS'den doğrudan veri okuyabilir veya CPFS'ye veri yazabilirsiniz.
Yüksek aktarım hızı ve düşük gecikme
CPFS, istemcilerin ve depolama düğümlerinin eşzamanlı G/Ç aktarım hızını sağlamak için yeni nesil paralel mimari kullanır. Ayrıca kümeleri birleştirerek doğrusal olarak iyileştirilmiş G/Ç performansı sunar ve tamamen flaş SSD depolamaya dayalı milisaniye altı gecikme sağlar.
Eşzamanlı erişimde geliştirilmiş performans
CPFS, meta verileri ve verileri depolamak için dağıtık paralel mimari kullanır ve çok sayıda küçük dosya için milyonlarca IOPS destekler. Binlerce sunucu tarafından eşzamanlı olarak erişilebilen CPFS, çoklu GPU sunucuların eğitimi için uygundur.
Alibaba Cloud bilişim hizmetleriyle derin entegrasyon
CPFS; Elastic High Performance Computing (E-HPC), Container Service for Kubernetes (ACK) ve WUYING Workspace gibi bilişim platformlarına bağlanabilir. Birkaç dakika içinde bulutta yüksek performanslı bir hesaplama ve analiz platformu oluşturabilirsiniz.
E-HPC ile derin entegrasyon
E-HPC konsolunu kullanarak hızlıca bir CPFS dosya sistemi oluşturabilir ve eksiksiz bir yüksek performanslı hesaplama platformu kurabilirsiniz.
ACK ile uyumlu
CPFS, ACK'ye bağlanabilir. Böylece ACK, CSI eklentisini kullanarak CPFS'nin yüksek G/Ç performansından yararlanabilir ve hesaplama gücünün büyük ölçekli otomatik ölçeklendirmesini etkinleştirebilir.
WUYING Workspace ile uyumlu
CPFS, NFS üzerinden doğrudan WUYING Workspace'e bağlanabilir. Bu sayede geliştirme ve hata ayıklama terminalleri ile yüksek performanslı hesaplama kümeleri arasında veri paylaşımı yapabilirsiniz.
Yaygın Senaryolar
-
Açıklama
Alibaba Cloud; CPFS, NAS, OSS ve ESSD gibi birden fazla depolama hizmetini ile Elastic GPU Service, SCC ve ECS Bare Metal Instance gibi bilişim kümesi hizmetlerini konteynerleştirilmiş dağıtım yoluyla birleştirir. Bu sayede kaynakların ölçeklenebilirliği ile yüksek G/Ç aktarım hızı ve IOPS performansı sağlanır.
-
Gereksinimler ve Zorluklar
Yapay zeka modellerinin veri akışları karmaşıktır. Depolama sisteminin G/Ç performansında darboğazlar oluşur.Yapay zeka eğitimi ve çıkarım işlemleri için yüksek performanslı bilişim ve depolama gereklidir.Hızla artan veri hacmini yönetmek için verimli ve maliyet etkin veri yaşam döngüsü yönetimi gerekir. -
Çözümler ve Avantajlar
CPFS, yapay zeka eğitiminde büyük miktarda veriye eşzamanlı erişimi destekler. Bu sayede yapay zeka eğitimi performansı artar.CPFS, yüksek performanslı G/Ç aktarım hızı ve IOPS sağlamak için birden fazla bilişim kümesi hizmetini entegre eder.CPFS, Alibaba Cloud üzerindeki veri merkezleri ve hizmetler arasındaki iletişimi sağlar; yüksek performanslı ve maliyet etkin hesaplama gücü sunmak için veri akışlarını ve yaşam döngüsünü yönetir. -
Etkiler
CPFS'nin yüksek G/Ç performansı, Yapay Zeka eğitimi sırasında küçük dosyaların okunma verimliliğini artırır. Bu durum iş modeli yineleme verimliliğinizi yükseltir ve artan yüksek kapasite ile performans ihtiyaçlarınızı karşılar.CPFS, soğuk ve sıcak verilerin katmanlı depolanmasını sağlamak için Object Storage Service kullanır. Bu özellik, büyük miktarda verinin maliyet etkin bir şekilde uzun süreli depolanması için uygundur.
İlgili Hizmetler
-
Açıklama
Otonom sürüş model eğitiminde, her test aracı için günde onlarca TB veri üretilir. Bu verilerin hızlı bir şekilde analiz edilmesi ve maliyet etkin bir biçimde depolanması gerekir.
-
Gereksinimler ve Zorluklar
İş inovasyonuna odaklanın ve BT harcamalarını azaltın.Büyük miktardaki verileri verimli bir şekilde işleyin. -
Çözümler ve Avantajlar
Veriler bir Express Connect hattı üzerinden Object Storage Service'e yüklenir.Veriler Object Storage Service'ten CPFS'ye aktarılır ve GPU ile CPFS'nin işleme yeteneklerine dayalı olarak bulutta model eğitimi için kullanılır.Ardından veriler, uzun süreli depolama amacıyla Object Storage Service'te arşivlenir. -
Etkiler
CPFS'nin yüksek performansı ve ölçeklenebilirliği, artan yüksek kapasite ve performans ihtiyaçlarınızı karşılayabilir.CPFS, soğuk ve sıcak verilerin katmanlı depolamasını uygulamak için Object Storage Service kullanır. Bu özellik, büyük miktardaki verilerin uzun vadeli ve maliyet etkin bir şekilde depolanması için uygundur.
İlgili Hizmetler
-
Açıklama
CPFS, onlarca Gbit/s G/Ç aktarım hızı ve milyonlarca IOPS sağlar. İş kesintisi olmadan depolama alanını çevrimiçi olarak genişletebilirsiniz. Veri güvenliğini sağlamak için veriler bir Express Connect hattı üzerinden buluta yüklenir.
-
Gereksinimler ve Zorluklar
Sıcak verilere onlarca Gbit/s hızında erişmek, yüksek G/Ç aktarım hızı performansı gerektirir.Kapalı kaynak kodlu ticari işleme uygulamalarında değişiklik yapmadan paylaşılan depolama sistemine erişim sağlanmalıdır.Bilişim, veri depolama ve performans gereksinimleri projelere göre farklılık gösterir.Yoğun bilişim gerektiren işlerin maliyetleri yüksektir ve her aşamada kontrol edilmesi gerekir. -
Çözümler ve Avantajlar
CPFS, ön uç önbelleğe almayı hızlandırmak için kullanılabilecek milyonlarca IOPS ve onlarca Gbit/s G/Ç aktarım hızı sağlar.CPFS'nin yüksek ölçeklenebilirliği, uygulamalarınızı etkilemeden iş gereksinimlerinize göre disk alanını genişletmenize ve önbelleği yükseltmenize olanak tanır.CPFS maliyet etkindir. Kopyalara veya çoğaltmalara gerek kalmadan depolama alanını ve önbellek performansını iş gereksinimlerinize göre yapılandırabilirsiniz. CPFS, en iyi performansı sunmak için verilerinizi kullanır ve Toplam Sahip Olma Maliyetini (TCO) düşürmenize yardımcı olur. -
Etkiler
CPFS'nin yüksek performanslı aktarım hızı ve IOPS değeri, işleme görevlerinin yürütme verimliliğini büyük ölçüde artırır, günlük operasyon ve bakımı basitleştirir ve genel maliyetleri düşürür.
İlgili Hizmetler
-
Açıklama
CPFS ile Object Storage Service arasındaki ve CPFS ile NAS arasındaki veri akışlarında katmanlı depolama mimarisi kullanılır. CPFS, bu depolama avantajını ECS Bare Metal Instance, Elastic GPU Service ve ACK'nin hesaplama gücüyle birleştirir. Yapay Zeka, süper hesaplama, simülasyon ve biyoinformatik gibi yüksek performanslı hesaplama ve depolama gerektiren senaryolar için çözümler sunar.
-
Gereksinimler ve Zorluklar
Büyük miktardaki veriler nedeniyle G/Ç aktarım hızı performansında darboğazlar oluşur.Geleneksel dosya depolama sistemleri, performansın ve depolama alanının esnek bir şekilde ölçeklendirilmesini desteklemez.Veri yönetimi ve performans bakımı için yoğun O&M iş yükleri gerekir. -
Çözümler ve Avantajlar
CPFS'nin yüksek performanslı depolama özelliği, bilişim kaynaklarının kullanımını iyileştirir.CPFS, teknik özellikleri yükseltmenize ve depolama alanını daha maliyet etkin bir şekilde büyütmenize yardımcı olur.CPFS, soğuk ve sıcak verileri ayrı ayrı depolamak için diğer bulut depolama hizmetlerine bağlanır. Bu sayede maliyetlerinizi düşürmenize yardımcı olur. -
Etkiler
CPFS, binlerce düğümün yoğun okuma ve yazma iş yükleriyle etkin bir şekilde başa çıkmanıza, bilişim verimliliğini artırmanıza ve genel iş maliyetlerini önemli ölçüde düşürmenize yardımcı olmak için yüksek performanslı G/Ç aktarım hızı ve IOPS sunar.
