DataWorks:SQL query and analysis (legacy)

Desteklenen veri kaynakları

SQL sorgusu özelliği; MaxCompute, Hologres, EMR, CDH, StarRocks, ClickHouse, SelectDB, Doris, AnalyticDB for MySQL 3.0, AnalyticDB for PostgreSQL, Tablestore, MySQL, PostgreSQL, Oracle ve SQL Server dahil olmak üzere veri kaynaklarını destekler.

Veri kaynağı izinleri

Özelliğe erişim

DataWorks Veri Analizi sayfasında oturum açın, hedef bölgeye geçiş yapın ve Enter Data Analysis seçeneğini tıklayın.

• Gezinme çubuğunda Switch to New DataAnalysis seçeneğini görüyorsanız, eski Veri Analizi sayfasındasınız demektir.

• (Önerilmez) Gezinme çubuğunda Return to Legacy DataAnalysis seçeneğini görüyorsanız, eski Veri Analizi sayfasına geri dönmek için bu seçeneği tıklayın.

Adım 1: Dizin ekleme

Sistem tarafından önerilen dizinlerden ve yetkili veri kaynaklarından tabloları kendi dizininize ekleyebilirsiniz. Bir dizin ekledikten sonra dizindeki tabloları hızla görüntüleyebilir, tablo şemalarını inceleyebilir ve SQL sorguları oluşturabilirsiniz.

1. SQL analizi sayfasında, bir dizin eklemek için dizinin üzerindeki arama kutusunun sağındaki düğmesini tıklayın.

   • DataMap - Metadata: Data Map'te toplanan tablo meta verileri. Her veri kaynağı veya hesaplama kaynağı bir veri kümesi olarak eklenebilir.

   • DataMap - Data Album: Data Map'te belirli konulara ait tabloları bir araya getiren Veri Koleksiyonları. Her Veri Koleksiyonu bir veri kümesi olarak eklenebilir.

   • My Favorites: Data Map'te favorilere eklediğiniz tablolar.

   • My MaxCompute Tables: Mevcut oturum açma hesabının sahibi olduğu tüm MaxCompute tabloları.

   • Public Data: MaxCompute tarafından sağlanan ve test verilerini hızlıca oluşturmak için kullanılabilecek Genel veri kümeleri.
   Not

   En fazla 12 veri kümesi ekleyebilirsiniz. Artık ihtiyaç duyulmayan veri kümelerini kaldırabilirsiniz.

Adım 2: SQL sorgusu oluşturma

Adım 3: Sorgu motorunu yapılandırma ve sorguyu çalıştırma

1. SQL sorgu motorunu yapılandırmak için SQL ayrıntıları sayfasının sağ üst köşesindeki düğmesini tıklayın.

   Parametre	Açıklama
   Workspace	Yürütme motorunun bulunduğu çalışma alanı. Önemli Çalışma alanında erişim izinlerinizin olduğundan emin olun. Aksi takdirde, çalışma alanı yöneticisiyle iletişime geçerek çalışma alanı üyesi olarak eklenmenizi isteyin.
   Datasource Type	Yürütme motorunun türü ve adı. Önemli SQL deyimi belirli bir proje belirtmiyorsa yürütme motoru varsayılan veri kaynağı olarak hizmet verir.
   Data Source Name
   Access Identity Mode	SQL sorguları için erişim modunu seçin: Executor Identity: Yalnızca MaxCompute ve Hologres motorları için desteklenir. MaxCompute projesinin veya Hologres örneğinin üyesiyseniz ve SELECT izinleriniz varsa bu mod önerilir. Data Source Default Access Identity: Mevcut hesabınız veri kaynağı oluşturulurken yapılandırılan varsayılan erişim kimliğinden farklıysa mevcut hesabınıza bu kimliği atayın.

2. SQL deyimini yazdıktan sonra tüm betiği doğrudan çalıştırabilir veya bir kısmını seçerek kısmen çalıştırabilirsiniz. Çalıştırma modunu değiştirmek için çalıştırma düğmesinin yanındaki açılır simgeyi tıklayın. Farklı senaryolar için farklı modlar seçebilirsiniz.

   MaxCompute SQL deyimi çalıştırılmadan önce tahmini maliyet görüntülenir. Ayrıca SQL dosyasının üzerindeki araç çubuğunda More > Estimate Costs seçeneğini tıklayarak maliyeti tahmin edebilirsiniz.

   Çalıştırma modu	Senaryo	Tetikleme koşulu	Uygulanabilir motorlar
   Sorgu modu (LIMIT 10000)	Verileri hızla önizleme ve sorgu mantığını doğrulama. Bu mod, yalnızca ön veri keşfi için sonuçların küçük bir örneğini görüntülemek istediğiniz senaryolar için uygundur.	Sorgu sonucu ≤ 10.000 satır ve ≤ 10 MB gösterir.	Sınır yok
   Sorgu modu (tam veri)	Analiz veya dışa aktarma için tam sonuç kümesini elde etme. Tüm verileri işlemek ve görüntülemeniz gerektiğinde bu moda geçin.	Sorgu sonucu > 10.000 satır veya > 10 MB gösterir.	MaxCompute, Hologres, StarRocks, ClickHouse, MySQL
   Geçici tablo modu	Çok aşamalı karmaşık sorgularda sonuçları yeniden kullanma. Geliştirme ve hata ayıklama verimliliğini artırmak için bir sorgunun çıktısını sonraki sorgunun girişi olarak kullanın.	Sorgu sonucu ≤ 10.000 satır ve ≤ 10 MB gösterir ve otomatik olarak geçici bir tabloya yazılır.	Yalnızca MaxCompute

3. SQL deyimi yürütüldükten sonra sorgu sonucu sayfasında çalışma zamanı günlüğünü, sonuçları ve ilgili SQL deyimi görüntüleyebilirsiniz.

   Sayfa düzenini yan yana ve alt alta arasında değiştirmek için sorgu sonucu alanının sağ üst köşesindeki düğmeleri tıklayabilirsiniz.

Adım 4: Sorgu sonuçlarını görselleştirme

Sorgu sonuçlarının solundaki araç çubuğunda, sonuçlardan otomatik olarak görsel grafikler oluşturmak için düğmeyi tıklayın.

Adım 5: Dışa aktarma ve paylaşma

SQL sorgu sonuçları aşağıdaki biçimlerde dışa aktarılabilir:

• Yerel dosya: Sorgu sonuçlarını CSV, TXT veya XLS biçiminde yerel makinenize indirin. Temel bilgiler aşağıdadır:

  Öğe	Açıklama
  İndirme sınırlamaları	Yalnızca MaxCompute ve EMR motorları desteklenir. Daha fazla bilgi için bkz. Satır sayısı indirme sınırlamaları. MaxCompute projesinde veri indirme kısıtlamaları etkinleştirilmişse (veri indirme yasaklanmışsa) Veri Analizi aracılığıyla veri indirme işlemi başarısız olur. Önemli Bu seçenek görünmüyorsa sorun giderme için bkz. SSS.
  Scope	Only Data Displayed in Table veya All Data seçeneklerinden birini seçerek indirme yapabilirsiniz. Only Data Displayed in Table: Yalnızca geçerli sayfada görüntülenen verileri indirir; varsayılan olarak en fazla 10000 satır. All Data: İndirme sınırı içindeki tüm sorgulanan sonuç verilerini dışa aktarır.
  İndirme yöntemi	İki indirme yöntemi desteklenir: Download After Approval ve Download Without Approval. Onay sonrası indirme: Veri indirme işlemlerindeki riskleri belirlemek için risk tanımlama kuralları yapılandırabilirsiniz. Veri indirirken veri uyumluluğunu ve güvenliğini sağlamak için bir indirme onay isteği göndermeniz gerekir. Not Risk tanımlama kurallarını yapılandırmak ve etkinleştirmek yalnızca DataWorks Enterprise Edition tarafından desteklenir. Onaysız indirme: Varsayılan olarak indirmeler onay gerektirmez. İndirme işlemi sırasında herhangi bir izin isteğine gerek yoktur.

• OSS: Sorgu sonuçlarını belirtilen bir biçimde (CSV veya Parquet gibi) Alibaba Cloud Object Storage Service (OSS) öğesine dışa aktarın. Bu yöntem, büyük hacimli verilerin arşivlenmesi veya diğer cloud hizmetleriyle entegrasyon için uygundur.

  Bu özelliği ilk kez kullanırken DataWorks'ün OSS kaynaklarınıza erişmesine izin vermeniz gerekir. File Path açılır listesinde istemde bulunan Authorize bağlantısını tıklayın ve RAM yetkilendirmesini tamamlamak için talimatları izleyin.

  Parametre	Açıklama
  Dosya yolu	Sonuç dosyasını saklamak istediğiniz OSS paketini ve dizinini seçmek için sağ taraftaki klasör düğmesini tıklayın.
  Dosya adı	Bir dosya adı otomatik olarak oluşturulur. İsterseniz manuel olarak da değiştirebilirsiniz.
  Dosya türü	Dışa aktarma dosyası biçimini seçin. Desteklenen biçimler arasında csv, text, orc ve parquet bulunur.
  Ayırıcı	Sütunlar arasındaki ayırıcıyı belirtin. Varsayılan ayırıcı virgüldür (,).
  Kodlama	Dosya için kodlama biçimini seçin; örneğin UTF-8 veya GBK.
  CU	Bu dışa aktarma görevi için hesaplama birimi (CU) sayısını yapılandırın. Varsayılan değer 1 CU'dur.
  Kaynak grubu	Bu dışa aktarma görevini yürütmek için sunucusuz kaynak grubunu seçin. Kaynak grubu seçilmezse varsayılan olarak Veri Analizi > Sistem Yönetimi bölümünde yapılandırılan Data Integration kaynak grubu kullanılır.

  Yapılandırmayı tamamladıktan sonra dışa aktarma görevini başlatmak için OK seçeneğini tıklayın. Görev yürütme sayfasında dışa aktarma ilerlemesini, çalışma zamanı günlüğünü ve yapılandırma ayrıntılarını görüntüleyebilirsiniz. Görev başarıyla tamamlandıktan sonra dışa aktarılan dosyayı yerel makinenize indirmek için OSS konsoluna gidin.

• MaxCompute tablosu: Sorgu sonuçlarını öncelikle verileri yerel makinenize indirmeden doğrudan bir MaxCompute tablosuna dışa aktarabilirsiniz. Tablonun yaşam döngüsünü gerektiği gibi ayarlayabilirsiniz.

  Bu seçenek yalnızca MaxCompute motor içeriğini sorgularken kullanılabilir.

• Elektronik tablo: Sonuçları daha derinlemesine veri analizi için bir elektronik tabloya kaydedebilirsiniz. Ayrıca en son analiz sonuçlarını başkalarıyla paylaşabilirsiniz.

Diğer işlemler

SSS