DataWorks:Lindorm hesaplama kaynağını ilişkilendirme

Sınırlamalar

• Bölgeler: Çin (Hangzhou), Çin (Şanghay), Çin (Pekin), Çin (Shenzhen), Çin (Chengdu), Çin (Hong Kong), Japonya (Tokyo), Singapur, Malezya (Kuala Lumpur) ve Endonezya (Cakarta).

• İzinler:

  • DataWorks'te Lindorm görevlerini çalıştırmak için bir DataWorks Serverless kaynak grubu kullanmanız gerekir.

  • Yalnızca O&M veya Workspace Administrator rolüne sahip çalışma alanı üyeleri ya da AliyunDataWorksFullAccess iznine sahip olanlar hesaplama kaynakları oluşturabilir. Üye rollerini görüntülemek veya izin atamak için bkz. Çalışma alanı üyelerini ekleme ve üye rollerini ve izinlerini yönetme.

Hesaplama Kaynakları sayfasına gitme

1. DataWorks Workspaces sayfasına gidin. Üst gezinme çubuğunda hedef bölgeyi seçin ve bir hesaplama kaynağı oluşturmak istediğiniz çalışma alanını bulun. Çalışma alanı ayrıntıları sayfasına gitmek için çalışma alanı adını veya Operation sütunundaki Details seçeneğine tıklayın.

2. Sol gezinme bölmesinde Computing Resources seçeneğine tıklayın.

Bir Lindorm hesaplama kaynağını ilişkilendirme

Computing Resources page üzerinde, Lindorm hesaplama kaynağını ilişkilendirmek için parametreleri yapılandırın.

1. İlişkilendirilecek hesaplama kaynağı türünü seçin.

   1. Associate Computing Resources seçeneğine tıklayarak Associate Computing Resources sayfasını açın.

   2. Associate Computing Resources sayfasında, hesaplama kaynağı türü olarak Lindorm öğesini seçerek Bind Lindorm Computing Resource yapılandırma sayfasına gidin.

2. Lindorm hesaplama kaynağını yapılandırın.

   Associate Lindorm Computing Resource sayfasında aşağıdaki parametreleri yapılandırın.

   Bölüm	Parametre	Açıklama
   Basic Information	Configuration Mode	Yalnızca ApsaraDB for RDS desteklenir.
   	Instance	DataWorks ile ilişkilendirilecek Lindorm örneğini seçin. Açılır listede mevcut bölgedeki Lindorm örnekleri görüntülenir.
   	Database Name	Bu hesaplama kaynağı için varsayılan veritabanını seçin. DataWorks, görevleri çalıştırırken bu veritabanına bağlanır. Varsayılan değer default değeridir.
   	Username/Password	DataWorks'ün bu Lindorm hesaplama kaynağıyla kimlik doğrulaması yapması için kullanıcı adını ve parolayı girin. Kimlik bilgilerini almak için Lindorm konsolu'na gidin, Instance Name öğesine tıklayın ve sol gezinme bölmesinin Database Connection bölümünde kimlik bilgilerini bulun.
   	Computing Resource Instance Name	Görevleri yapılandırırken kaynağı tanımlamak ve seçmek için bu adı kullanın.
   Connection Configuration	Connected state	Bağlantı yapılandırması bölümünde, DataWorks'ün Lindorm görevlerini çalıştırmak için kullandığı Serverless kaynak grubunu seçin ve kaynak grubunun Lindorm örneğinize erişebildiğini doğrulamak için Test Connectivity seçeneğine tıklayın. Daha fazla bilgi için bkz. Ağ bağlantısı çözümleri.

3. Lindorm hesaplama kaynağının yapılandırmasını tamamlamak için Confirm seçeneğine tıklayın.

Genel Bilgiler

DataWorks'te, zamanlama düğümlerinin çalışma zamanında kullandığı Spark parametrelerini aşağıdaki yollarla yapılandırabilirsiniz:

Yöntem 1: Her DataWorks modülünün Lindorm görevleri için kullandığı Spark ayarlarını kontrol etmek amacıyla çalışma alanı düzeyinde genel Spark parametrelerini yapılandırın. Ayrıca genel parametrelerin modüle özgü parametrelere göre öncelikli olup olmadığını da tanımlayabilirsiniz. Daha fazla bilgi için bkz. Genel Spark parametrelerini yapılandırma.

Yöntem 2: Data Studio'da, düğüm düzenleme sayfasında tek tek düğüm görevleri için Spark özelliklerini ayarlayın. Diğer modüller görev başına Spark özelliği yapılandırmasını desteklemez.

Erişim kontrolü

Yalnızca aşağıdaki roller genel Spark parametrelerini yapılandırabilir:

• Alibaba Cloud hesabı.

• AliyunDataWorksFullAccess iznine sahip bir RAM kullanıcı veya RAM rolü.

• Workspace Administrator rolüne sahip bir RAM kullanıcı.

Genel Spark parametrelerini görüntüleme

1. Computing Resources page adresine gidin ve ilişkilendirdiğiniz Lindorm hesaplama kaynağını bulun.

2. Spark parametre yapılandırma bölmesini açmak için Spark Parameters seçeneğine tıklayın.

Genel Spark parametrelerini yapılandırma

Genel Spark parametrelerini yapılandırmak için şu adımları izleyin. Belirli parametrelerle ilgili ayrıntılar için bkz. İş yapılandırması.

1. Computing Resources page adresine gidin ve ilişkilendirdiğiniz Lindorm hesaplama kaynağını bulun.

2. Spark parametre yapılandırma bölmesini açmak için Spark Parameters seçeneğine tıklayın.

3. Genel Spark parametrelerini ayarlayın.

   Her modül için genel Spark parametrelerini ve öncelikleri yapılandırmak amacıyla Spark Parameters bölmesinin sağ üst köşesindeki Edit Spark Parameters seçeneğine tıklayın.

   Not

   Bu, çalışma alanı düzeyinde bir ayardır. Devam etmeden önce doğru çalışma alanında olduğunuzdan emin olun.

   Parametre	Adımlar
   Spark Property	Her modülün Lindorm görevlerini çalıştırırken kullandığı Spark özelliklerini yapılandırın. Daha fazla bilgi için bkz. İş yapılandırması. Add seçeneğine tıklayın ve Spark Property Name ile karşılık gelen Spark Property Value değerlerini girin. Not Veri soy ağacı ve çıktı toplamayı etkinleştirmek için aşağıdaki özellikleri yapılandırın: Spark Property Name değerini spark.sql.queryExecutionListeners olarak ayarlayın. Spark Property Value değerini com.aliyun.dataworks.meta.lineage.LineageListener olarak ayarlayın. Spark özellik ayarlarıyla ilgili daha fazla bilgi için bkz. İş yapılandırması.
   Global Settings Take Precedence	Bu seçeneği belirlerseniz genel yapılandırmalar, ürün modülleri içindeki yapılandırmalara göre öncelikli olur. Bu durumda, görevler genel olarak yapılandırılan Spark özelliklerine göre çalıştırılır. Genel yapılandırma: Spark Parameters sayfasında Lindorm hesaplama kaynağı için ayarlanan Spark özellikleri. Yol: Management Center > Computing Resources. Şu anda genel Spark parametrelerini yalnızca Data Studio ve Operation Center modülleri için ayarlayabilirsiniz. Ürün modülleri içindeki yapılandırma: Data Studio: Lindorm Spark ve Lindorm Spark SQL düğümleri için, düğüm düzenleme sayfasının Configuration Items sekmesinden tek bir düğüm görevi için Spark özelliklerini ayarlayabilirsiniz. Diğer ürün modülleri: Bir modül içinde Spark özelliklerinin ayrı ayrı ayarlanması desteklenmez.

4. Genel Spark parametrelerini kaydetmek için Confirm seçeneğine tıklayın.