Tüm Ürünler
Search
Belge Merkezi

Data Lake Formation:Manage and configure DLF catalogs

Son Güncelleme:Oct 07, 2026

Katalog, DLF'deki en üst düzey meta veri kapsayıcısıdır. Bu konuda katalogların nasıl oluşturulacağı, görüntüleneceği, yapılandırılacağı ve silineceği açıklanmaktadır.

Önkoşullar

Başlamadan önce aşağıdakilerin hazır olduğundan emin olun:

  • DLF'yi kurma (tek seferlik etkinleştirme ve yetkilendirme)

  • (RAM kullanıcıları) AliyunDLFFullAccess izin ilkesi veya katalogla ilgili eylemleri içeren özel bir ilke. Daha fazla bilgi için bkz. API izinlerini yönetme.

  • (RAM kullanıcıları) super_administrator veya admin sistem rolü ya da katalogla ilgili veri izinlerine sahip özel bir rol. Daha fazla bilgi için bkz. Bir kullanıcıya veri izni verme.

Not

RAM kullanıcılarının katalogları yönetebilmesi için hem API izinlerine hem de veri izinlerine ihtiyacı vardır.

Sınırlamalar

Her bölgede hesap başına en fazla 10 katalog oluşturabilirsiniz. Limit artırımı talep etmek için destek talebi oluşturun.

Katalog oluşturma

  1. DLF konsolu sayfasında oturum açın

  2. Catalogs sayfasında Create Catalog seçeneğine tıklayın.

  3. Aşağıdaki parametreleri yapılandırın.


    Parametre


    Gerekli


    Varsayılan


    Açıklama


    Catalog Name


    Evet


    --


    Katalog için benzersiz bir ad.


    Description


    Hayır


    --


    Katalog açıklaması.


    Storage Type


    Evet


    Standard Storage


    Standard Storage olarak sabittir.


    Storage Redundancy Type


    Evet


    LRS


    Veri yedeklilik ilkesi. Geçerli değerler: LRS ve ZRS.

    Storage Redundancy Type seçenekleri:

    • LRS (Yerel Yedekli Depolama): Verileri tek bir alanda depolar. Alan kullanılamaz hale gelirse verilere erişilemez. Varsayılan seçenektir.

    • ZRS (Alanlar Arası Yedekli Depolama): Daha yüksek kullanılabilirlik sağlamak için verileri bir bölgedeki birden fazla alanda çoğaltır.

    Önemli
    • Katalog oluşturulduktan sonra yedeklilik türü ZRS'den LRS'ye değiştirilemez.

    • ZRS, daha yüksek veri kullanılabilirliği sağlar ancak LRS'ye göre daha yüksek maliyete neden olur.

  4. Terms of Service öğesini okuyup seçin ve ardından Create Catalog seçeneğine tıklayın.

Katalog görüntüleme

  1. Sol gezinme bölmesinde Catalogs seçeneğine tıklayın.

  2. Ayrıntılarını görüntülemek için bir katalog adına tıklayın.

  3. Details sekmesinde temel katalog bilgilerini görüntüleyin.

  4. DLF kullanıcılarına veya rollerine katalog düzeyinde izinler vermek için Permissions sekmesine tıklayın. Veri yetkilendirmelerini yönetme.

  5. Depolama katmanlamasını yapılandırmak için Storage Optimization sekmesine tıklayın. Daha fazla bilgi için bkz. Depolama katmanlamasını yapılandırma.

  6. Dosya parçası yaşam döngüsünü ve varsayılan Paimon tablosu özelliklerini yapılandırmak için Catalog Configuration sekmesine tıklayın. Daha fazla bilgi için bkz. Katalog yapılandırma.

Katalog yapılandırma

Depolama katmanlamasını yapılandırma

Storage Optimization sekmesinde, yaşam döngüsü kurallarıyla katalog tablolarındaki sıcak ve soğuk verileri otomatik olarak katmanlamak için Intelligent Tiering özelliğini kullanın.

Katalog düzeyi ve tablo düzeyi davranışı

  • Katalog düzeyi: Etkinleştirildiğinde Intelligent Tiering tüm tablolar için geçerli olur ve katalog ayarlarını devralır. Tablo düzeyindeki geçersiz kılmalar "Katalogdan Devralındı" durumunu kaldırır.

  • Tablo düzeyi: Katalog düzeyi katmanlama devre dışı bırakılmış olsa bile tek tek tablolar için Intelligent Tiering özelliğini etkinleştirebilirsiniz.

Katmanlama stratejisi


Strateji


Açıklama


Last Access Time


Kuralları, tablo veya bölüm verilerine en son ne zaman erişildiğine göre tetikler.


Last Update Time


Kuralları, tablo veya bölüm verilerinin en son ne zaman güncellendiğine göre tetikler.

Katmanlama kuralları

Verileri depolama sınıfları arasında geçirmek için kuralları yapılandırın. Minimum depolama süresi sınıfa göre değişir.


Kural


Varsayılan (gün)


Açıklama


Transition to Infrequent Access


30


Belirtilen gün sayısı sonunda verileri Sık Olmayan Erişim (IA) depolamaya taşır. IA verilerine hesaplama motorları tarafından düşürülmüş performansla erişilebilir.


Transition to Archive


60


Belirtilen gün sayısı sonunda verileri Arşiv depolamaya taşır. Arşivlenen verilere hesaplama motorları tarafından erişilemez.


Transition to Cold Archive


180


Belirtilen gün sayısı sonunda verileri Soğuk Arşiv depolamaya taşır. Soğuk arşivlenen verilere hesaplama motorları tarafından erişilemez.

Transition to Infrequent Access ve Transition to Archive kuralları ek bir seçeneği destekler:

  • Convert to Standard Storage Upon Access: Erişildiğinde bölümü veya bölüm olmayan tabloyu otomatik olarak Standart depolamaya geri yükler.

Not

Convert to Standard Storage Upon Access yalnızca Tiering Strategy değeri Last Access Time olarak ayarlandığında kullanılabilir.

Dosya parçası yaşam döngüsünü yapılandırma

Catalog Configuration sekmesinde bu katalog düzeyi ayarlarını yapılandırın.

File Fragment Lifecycle

Dosya parçaları için son kullanma süresini ayarlayın (minimum: 1 gün). Süresi dolan parçalar otomatik olarak silinir ve kurtarılamaz.

Varsayılan Paimon tablosu özelliklerini yapılandırma

Advanced Settings

Yeni oluşturulan Paimon tabloları için varsayılan özellikleri ayarlayın. Yapılandırma anahtarı biçimi: table-default.<Paimon table property>. Özellik ayrıntıları için bkz. Apache Paimon yapılandırma belgeleri.

Örneğin, Silme Vektörlerini varsayılan olarak etkinleştirmek için table-default.deletion-vectors.enabled=true yapılandırmasını belirtin. Bir tablo oluşturulduğunda sistem table-default. ön ekini kaldırır ve deletion-vectors.enabled=true değerini tablo özelliği olarak uygular.

Not

Tablo oluşturma sırasında açıkça belirtilen özellikler önceliklidir ve bu ayar tarafından geçersiz kılınmaz.

Katalog silme

Önemli

Bir kataloğu silmeden önce aşağıdaki koşulların karşılandığından emin olun. Aksi takdirde silme işlemi başarısız olur.

  • Katalogdaki tüm tabloları ve default dışındaki tüm veritabanlarını silin.

  • Tüm tablolar silindikten sonra kataloğu silmeden önce 24 saat bekleyin.

  1. Catalogs sayfasında hedef kataloğu bulun ve Actions sütununda Delete seçeneğine tıklayın.

  2. İletişim kutusunda OK seçeneğine tıklayın.

Sonraki adımlar