Data Lake Formation (DLF) menyediakan API manajemen tabel yang kompatibel dengan REST Catalog Apache Paimon. Struktur penyimpanan file yang sepenuhnya kompatibel dengan Paimon memungkinkan mesin atau aplikasi pendukung untuk dengan mudah membuat, memperbarui, mengkueri, dan menghapus tabel yang dikelola oleh DLF.
Hirarki utama data dalam katalog adalah sebagai berikut:
Catalog: Entitas logis tingkat atas untuk organisasi metadata. Sebuah catalog mengatur sumber daya metadata secara hierarkis, memungkinkan isolasi dan kontrol izin di seluruh layanan serta pengguna. Selain itu, catalog mengelola penyimpanan data lake dan operasi tabel lake.
Database: Pengelompokan logis metadata dalam sebuah catalog, menawarkan organisasi dan kontrol akses lebih rinci dibandingkan catalog.
Tabel: DLF mendukung berbagai jenis tabel untuk manajemen terpadu dan kompatibilitas tanpa batas dengan berbagai mesin komputasi serta format. Enkripsi data saat diam tersedia atas permintaan melalui pengajuan tiket.
Tampilan: Disimpan dalam DLF, tampilan mendukung berbagai dialek SQL, memungkinkan konfigurasi untuk mesin komputasi yang berbeda.
Fungsi: Disimpan dalam DLF, fungsi saat ini mendukung JAR Flink (Java dan Python) serta fungsi Lambda Java yang dieksekusi pada mesin Spark.