DataWorks, yapılandırma gerektirmeyen tek tablo çevrimdışı veri senkronizasyonunu hızlıca denemenizi sağlayan yerleşik bir genel veri kümesi veri kaynağı sunar. Bu konu, DataWorks'te veri senkronizasyonu için desteklenen genel veri kümelerini ve bölgeleri açıklar.
Desteklenen veri kümeleri ve bölgeler
Desteklenen genel veri kümelerinin listesini ve ayrıntılarını görüntülemek için DataWorks Gallery içindeki Cloud Marketplace Datasets kategorisine bakın. Bir senkronizasyon görevinde kullanmadan önce veri kümesine abone olmanız gerekir.
-
Genel veri kümesi veri kaynağı aşağıdaki bölgelerde kullanılabilir:
China (Beijing), China (Shanghai), China (Hangzhou), China (Shenzhen), China (Zhangjiakou), China (Chengdu), China (Ulanqab), China (Hong Kong), Japan (Tokyo), Singapore, Malaysia (Kuala Lumpur), Indonesia (Jakarta), Germany (Frankfurt), UK (London), US (Silicon Valley) ve US (Virginia).
Veri senkronizasyon görevi geliştirme
Görev yapılandırma giriş noktaları ve genel yapılandırma yordamı için aşağıdaki kılavuzlara bakın.
Tek tablo çevrimdışı senkronizasyon görevi yapılandırma kılavuzu
Yordam için Sihirbaz modu yapılandırması ve Komut dosyası modu yapılandırması konularına bakın.
Tüm parametreleri ve komut dosyası modu için örnek bir komut dosyasını görüntülemek için Ek: Örnek komut dosyası ve parametre açıklamaları bölümüne bakın.
Ek: Örnek komut dosyası ve parametre açıklamaları
Komut dosyası modunda çevrimdışı görev yapılandırma
Komut dosyası modunda çevrimdışı bir görev yapılandırırken gerekli parametreleri standart komut dosyası biçimine göre görev komut dosyasına yazın. Daha fazla bilgi için Komut dosyası modu yapılandırması konusuna bakın. Aşağıdaki bölümde komut dosyası modundaki veri kaynağı parametrelerini açıklarız.
Örnek okuyucu komut dosyası
{
"type": "job",
"version": "2.0",
"steps": [
{
"stepType": "public_dataset",
"parameter": {
"datasource": "Curated Book Dataset",
"column": [
"bookid",
"title",
"authors",
"average_rating",
"isbn",
"isbn13",
"language_code",
"__num_pages",
"ratings_count",
"text_reviews_count",
"publication_date",
"publisher"
],
"table": "good_reads_books"
},
"name": "Reader",
"category": "reader"
},
{
"stepType": "stream",
"parameter": {
"print": true
},
"name": "Writer",
"category": "writer"
}
],
"setting": {
"errorLimit": {
"record": "0"
},
"locale": "zh_CN",
"speed": {
"concurrent": 2,
"throttle": false
}
}
}Okuyucu komut dosyası parametreleri
|
Parametre |
Açıklama |
Gerekli |
Varsayılan değer |
|
datasource |
Örneğin Curated Book Dataset gibi genel veri kümesinin adı. |
Evet |
Yok |
|
table |
Senkronize edilecek tablonun adı. Tablo adlarını veri kümesi ayrıntılarında bulabilirsiniz. |
Evet |
Yok |
|
column |
Genel veri kümesi tablosundan okunacak alanlar, virgülle ayrılır. Örneğin, "column": ["id", "name", "age"]. |
Evet |
Yok |