Data Integration, kirli veri işleme ve akış kontrolü gibi birden fazla modüle sahip gelişmiş bir dağılım mimarisi üzerine kurulu, veri aktarımı, veri dönüştürme ve senkronizasyon sağlayan bir dağıtım hizmetidir. Data Integration; çoklu veri kaynağı desteği, hızlı aktarım, yüksek güvenilirlik, ölçeklenebilirlik ve kitlesel senkronizasyon dahil birden fazla özellik sunar.
Avantajlar
-
Çoklu Farklı Veri Kaynağı Desteği
Data Integration, 400'den fazla farklı veri kaynağı çiftı arasında veri senkronizasyonunu destekler (RDS veritabanları, yarı yapılandırılmış depolama, yapılandırılmamış depolama (ses, video ve görseller gibi), NoSQL veritabanları ve büyük veri depolama dahil). Ayrıca Oracle, MySQL ve DataHub gibi veri kaynakları arasında gerçek zamanlı veri okuma ve yazma işlemlerini de destekler.
-
Zamanlanmış Görevler
Data Integration, belirli bir tetikleyici zamanı (yıl, ay, gün, saat ve dakika) ayarlayarak çevrimdışı görevleri zamanlamanıza olanak tanır. Periyodik artımlı veri çıkarmayı yapılandırmak için yalnızca birkaç adım yeterlidir. Data Integration, DataWorks veri modelleme ile uyumlu çalışır. Tüm iş akışı, operasyon ve bakımın entegrasyonundan oluşur.
-
Buluta Toplu Yükleme
Data Integration, Hadoop kümelerinin hesaplama gücünü kullanarak HDFS verilerini kümelerden MaxCompute'a senkronize eder. Bu işleme Buluta Toplu Yükleme denir. Data Integration, günde 5 TB'a kadar veri iletebilir. Maksimum iletim hızı 2 GB/s'dir.
-
İzleme ve Alarmlar
Data Integration, 19 yerleşik izleme kuralıyla çoğu izleme senaryosuna uygunluk gösterir. Bu izleme kurallarına göre alarm kuralları ayarlayabilirsiniz. Ayrıca Data Integration için görev hatası bildirim modunu önceden tanımlayabilirsiniz.
Özellikler
-
Veri Kaynağı Yönetimi
Data Integration, verinin kaynağını ve hedefini tanımlayan veri kaynakları ve veri kümeleri üzerinden iki veri yönetimi eklentisi sunar. Okuma eklentisi veriyi okumak, yazma eklentisi ise veriyi yazmak için kullanılır. Bu çerçeveye dayalı olarak, basitleştirilmiş bir ara veri iletim formatı geliştirilmiştir ve bu sayede herhangi bir yapılandırılmış veya yarı yapılandırılmış veri kaynağı arasında veri alışverişi yapılabilir.
-
Yerel Veri Toplama
Data Integration, Alibaba Cloud klasik ağlarında ve VPC'larda veri senkronizasyonunu ve yerel veri merkezlerinde veri toplamayı destekler.
-
Tam Veritabanı Geçişi
Tam Veritabanı Geçişi, Data Integration tarafından sunulan ve birden fazla veri senkronizasyon görevi oluşturarak bir MySQL veritabanındaki tüm veri tablolarını MaxCompute'a aktarmaya olanak tanıyan bir araçtır. Tam Veritabanı Geçişi sayesinde senkronizasyon görevlerini tek tek oluşturmanıza gerek kalmaz.
-
Artımlı Senkronizasyon
Data Integration, WHERE yan tümcesini kullanarak iş verilerinin tarihe göre filtrelenmesini destekler. Farklı tarihlerdeki veriler, ilgili MaxCompute bölüm tablolarına senkronize edilir. Senkronizasyon aralığını 1 saat veya 10 dakika olarak ayarladığınızda, Data Integration neredeyse gerçek zamanlı artımlı senkronizasyon gerçekleştirebilir.
