Dataflow memungkinkan perpindahan data antara fileset Cloud Parallel File Storage (CPFS) dan bucket Object Storage Service (OSS). Sebelum memindahkan data antara fileset dan bucket, Anda harus membuat dataflow yang sesuai. Topik ini menjelaskan cara membuat dan mengelola dataflow di Konsol CPFS.
Prasyarat
Fileset CPFS telah dibuat dan berada dalam status Normal. Untuk informasi selengkapnya, lihat 管理Fileset.
Bucket OSS sumber telah diberi tag (kunci: cpfs-dataflow, nilai: true). Jangan menghapus atau mengubah tag ini selama menggunakan dataflow; jika tidak, dataflow CPFS tidak dapat mengakses data di bucket tersebut. Untuk informasi selengkapnya, lihat Tag an OSS bucket.
Jika beberapa dataflow CPFS, atau beberapa dataflow dari CPFS yang sama, menggunakan bucket OSS yang sama sebagai penyimpanan sumber, Anda harus mengaktifkan versioning untuk bucket OSS guna mencegah konflik data saat beberapa dataflow mengekspor data ke bucket OSS yang sama. Untuk informasi selengkapnya, lihat Overview of versioning.
Jika Anda ingin mengonfigurasi pembaruan metadata otomatis, pastikan layanan EventBridge telah diaktifkan. Untuk informasi selengkapnya, lihat Activate EventBridge and grant permissions.
CatatanSaat ini, fitur pembaruan metadata otomatis hanya didukung di wilayah China (Hangzhou), China (Chengdu), China (Shanghai), China (Shenzhen), China (Zhangjiakou), dan China (Beijing).
Catatan penggunaan
Penagihan
Setelah dataflow dibuat, Anda akan dikenai biaya berdasarkan bandwidth dataflow. Untuk informasi selengkapnya, lihat Billable items.
Saat Anda mengonfigurasi pembaruan otomatis, CPFS menggunakan EventBridge untuk mengumpulkan event modifikasi objek dari penyimpanan OSS sumber, yang mengakibatkan biaya event. Untuk informasi selengkapnya, lihat EventBridge billing.
Izin
Saat membuat dataflow, CPFS memperoleh peran terkait layanan AliyunServiceRoleForNasOssDataflow dan AliyunServiceRoleForNasEventNotification. Untuk informasi selengkapnya, lihat Service-linked roles for CPFS.
Buat dataflow
Masuk ke Konsol NAS.
Di panel navigasi kiri, pilih File System > File System List.
Di bilah navigasi atas, pilih wilayah.
Pada halaman File System List, klik nama sistem file.
Pada halaman detail sistem file, klik Dataflow.
Pada tab Dataflow, klik Create Dataflow.
Pada kotak dialog Create Dataflow, konfigurasikan parameter berikut.
Parameter
Deskripsi
Fileset ID /Name
Pilih fileset.
PentingMembuat dataflow memerlukan fileset kosong. Pastikan fileset tidak berisi data; jika tidak, pembuatan dapat gagal.
OSS Bucket Path
Pilih bucket OSS sumber untuk dikaitkan dengan fileset CPFS.
OSS Bucket SSL
Tentukan apakah akan mengaktifkan enkripsi transport (HTTPS).
Automatic Metadata Update
Tentukan apakah akan mengaktifkan fitur pembaruan metadata otomatis.
Metadata update interval (minutes)
Saat fitur pembaruan metadata otomatis diaktifkan, Anda harus menentukan interval pembaruan metadata dalam satuan menit.
OSS Prefix
Saat fitur pembaruan metadata otomatis diaktifkan, Anda harus menentukan direktori pembaruan otomatis.
Batasan:
Panjang harus 2 hingga 1024 karakter.
Jalur harus diawali dan diakhiri dengan garis miring (/).
Jalur harus merupakan awalan yang sudah ada di bucket OSS.
EventBridge Status
Status layanan EventBridge.
Pembaruan otomatis bergantung pada layanan EventBridge. Pastikan layanan EventBridge telah diaktifkan.
Bandwidth (MB/s)
Bandwidth throughput maksimum dataflow. Satuan: MB/s.
Nilai yang valid:
600
1200
1500
Bandwidth throughput dataflow tidak boleh melebihi bandwidth I/O sistem file.
SLR Authorization
Anda harus menyetujui otorisasi peran terkait layanan yang memungkinkan CPFS mengakses sumber daya layanan OSS dan EventBridge. Untuk informasi selengkapnya, lihat Service-linked roles for CPFS.
Klik OK.
Operasi terkait
Anda dapat menggunakan konsol untuk melihat dataflow yang telah dibuat, mengubah konfigurasi dataflow, menghapus dataflow, atau menghentikan dataflow.
Operasi | Deskripsi | Prosedur |
View a dataflow | Anda dapat melihat dataflow yang telah dibuat dan membuat tugas dataflow pada dataflow tertentu. | Pada tab Dataflow, Anda dapat melihat informasi konfigurasi dataflow tertentu. |
Modify a dataflow | Anda hanya dapat mengubah interval pembaruan metadata, menambahkan direktori pembaruan otomatis awalan OSS, serta mengubah bandwidth dan deskripsi dataflow. |
|
Stop a dataflow | Setelah dataflow dihentikan, penagihan berhenti pada siklus penagihan berikutnya. Penting Setelah dataflow dihentikan, data tidak dapat diimpor atau diekspor, dan tugas yang sedang dijalankan akan dibatalkan. |
|
Enable a dataflow | Anda dapat mengaktifkan dataflow yang berada dalam status Stopped. |
|
Delete a dataflow | Setelah dataflow dihapus, semua tugas dataflow tersebut akan dihapus, dan data tidak dapat lagi disinkronkan. |
|