DataWorks:Redis

Parameter

Deskripsi

Wajib

Nilai default

expireTime

Waktu kedaluwarsa cache untuk nilai Redis, dalam satuan detik. Jika parameter ini tidak ditentukan, nilai default 0 digunakan, yang menunjukkan bahwa data tidak pernah kedaluwarsa.

Tidak

0 (0 menunjukkan bahwa data tidak pernah kedaluwarsa)

keyFieldDelimiter

Pembatas untuk kunci Redis. Misalnya, key=key1\u0001id. Parameter ini wajib jika beberapa kunci perlu digabungkan. Jika hanya satu kunci yang digunakan, Anda dapat melewati parameter ini.

Tidak

\u0001

dateFormat

Format tanggal yang digunakan saat data ditulis ke Redis: yyyy-MM-dd HH:mm:ss.

Tidak

N/A

datasource

Nama sumber data. Nilainya harus sama dengan nama sumber data yang telah Anda tambahkan.

Ya

N/A

selectDatabase

Database Redis yang akan ditulis ("0" hingga "N-1", di mana N adalah jumlah database yang dikonfigurasi di Redis). Pemilihan database tidak didukung untuk kluster Redis.

Tidak

Database 0 secara default

writeMode

Redis Writer mendukung lima tipe nilai berikut untuk menulis data ke Redis:

• String

• List

• Set

• ZSet (sorted set)

• Hash

Konfigurasi writeMode sedikit berbeda tergantung pada tipe nilai. Untuk informasi lebih lanjut, lihat deskripsi parameter writeMode di bawah.

Tidak

string

keyIndexes

Menentukan indeks kolom dari kolom sumber yang akan digunakan sebagai kunci. Indeks kolom dimulai dari 0 (kolom pertama memiliki indeks 0, kolom kedua memiliki indeks 1, dan seterusnya).

• Jika satu kolom sumber digunakan sebagai kunci Redis, atur parameter ini ke indeks kolom tersebut. Misalnya, jika kolom pertama digunakan sebagai kunci, atur parameter ini ke 0.

• Jika beberapa kolom sumber berurutan digabung sebagai kunci Redis, atur parameter ini ke array indeks kolom yang sesuai. Misalnya, jika kolom kedua hingga keempat digabung sebagai kunci, atur parameter ini ke [1,3].

Ya

N/A

batchSize

Jumlah catatan dalam setiap batch. Parameter ini dapat secara signifikan mengurangi jumlah interaksi jaringan antara sistem sinkronisasi data dan Redis, serta meningkatkan throughput keseluruhan. Jika nilai ini diatur terlalu besar, proses sinkronisasi data mungkin mengalami error kehabisan memori (OOM).

Tidak

1.000

timeout

Timeout untuk menulis data ke Redis, dalam satuan milidetik.

Tidak

30.000

redisMode

Mode berjalan Redis. Nilai yang valid:

• Mode kluster: Atur redisMode ke ClusterMode untuk menunjukkan mode kluster.

  Dalam mode kluster, sumber data lain berkomunikasi langsung dengan kluster Redis saat menulis data ke Redis. Biasanya, alamat kluster Redis self-managed dan alamat koneksi langsung Alibaba Cloud Redis menggunakan mode ini. Mode kluster mendukung penulisan batch.

• Mode non-kluster: Biarkan redisMode kosong (tidak mengonfigurasi nilai apa pun) untuk menunjukkan mode non-kluster.

  Biasanya, alamat proxy kluster Alibaba Cloud Redis, alamat pemisahan baca/tulis, dan alamat Edisi Standar menggunakan mode ini. Mode non-kluster saat ini tidak mendukung penulisan batch.

Tidak

N/A

column

Konfigurasi kolom untuk menulis data ke Redis. Untuk tipe Redis string dengan operasi set:

• Jika kolom ini tidak dikonfigurasi, format nilainya adalah string yang dipisahkan pembatas (format CSV. Misalnya, jika ID=1, name="John", age=18, dan sex=male, contoh nilai Redis adalah: "18::male").

• Jika kolom dikonfigurasi dalam format berikut, seperti "column": [{"index":"0", "name":"id"}, {"index":"1", "name":"name"}], data nilai Redis disimpan dalam format JSON setelah ditulis ke Redis, dalam format {"id":"nilai kolom sumber yang sesuai","name":"nilai kolom sumber yang sesuai"} . Misalnya, jika ID=1 dan name="John", contoh nilai Redis adalah {"id":"1","name":"John"}.

Tidak

N/A

Tipe nilai

Parameter type (wajib)

Parameter mode (wajib)

Parameter valueFieldDelimiter (opsional)

Contoh konfigurasi writeMode

String

Atur type ke string.

mode adalah parameter mode penulisan. Saat nilainya berupa string:

• Atur mode ke set.

• Jika data yang akan disimpan sudah ada, data yang ada akan ditimpa.

valueFieldDelimiter adalah pembatas antar nilai. Nilai default-nya adalah \u0001.

• Parameter ini terutama digunakan ketika terdapat lebih dari dua kolom dalam setiap baris data sumber. Misalnya, jika terdapat tiga kolom, nilai-nilainya dipisahkan oleh pembatas sebagai berikut: value1\u0001value2\u0001value3.

• Jika data sumber hanya memiliki dua kolom (kunci dan nilai), Anda tidak perlu mengonfigurasi parameter ini.

"writeMode":{
        "type": "string",
        "mode": "set",
        "valueFieldDelimiter": "\u0001"
        }

List

Atur type ke list.

mode adalah parameter mode penulisan. Saat nilainya berupa list, opsi berikut tersedia:

• lpush: menyimpan data di posisi paling kiri list.

• rpush: menyimpan data di posisi paling kanan list.

"writeMode":{
    "type": "list",
    "mode": "lpush|rpush",
    "valueFieldDelimiter": "\u0001"
}

Set

Atur type ke set.

mode adalah parameter mode penulisan. Saat nilainya berupa set:

• Atur mode ke sadd untuk menyimpan data dalam set.

• Jika data yang akan disimpan sudah ada, data yang ada akan ditimpa.

"writeMode":{
        "type": "set",
        "mode": "sadd",
        "valueFieldDelimiter": "\u0001"
        }

ZSet (sorted set)

Atur type ke zset.

mode adalah parameter mode penulisan. Saat nilainya berupa ZSet (sorted set):

• Atur mode ke zadd untuk menyimpan data dalam sorted set.

• Jika data yang akan disimpan sudah ada, data yang ada akan ditimpa.

Parameter ini tidak perlu dikonfigurasi.

"writeMode":{
        "type": "zset",
        "mode": "zadd"
        }

Hash

Atur type ke hash.

mode adalah parameter mode penulisan. Saat nilainya berupa hash:

• Atur mode ke hset untuk menyimpan data dalam hash.

• Jika data yang akan disimpan sudah ada, data yang ada akan ditimpa.

Parameter ini tidak perlu dikonfigurasi.

"writeMode":{
        "type": "hash",
        "mode": "hset"
        }