Elasticsearch:Gunakan Logstash untuk menyinkronkan data dari PolarDB-X 1.0 ke Elasticsearch secara real time

Dalam contoh ini, pernyataan berikut digunakan untuk membuat tabel:

CREATE table food(
  id int PRIMARY key AUTO_INCREMENT,
  name VARCHAR (32),
  insert_time DATETIME,
  update_time DATETIME
);

Pernyataan berikut digunakan untuk memasukkan data ke dalam tabel:

INSERT INTO food values(null,'chocolate',now(),now());
INSERT INTO food values(null,'yogurt',now(),now());
INSERT INTO food values(null,'ham sausage',now(),now());

Untuk informasi selengkapnya tentang cara mengonfigurasi parameter di bidang Config Settings, lihat File konfigurasi Logstash.

• Save: Menyimpan konfigurasi pipeline tetapi tidak menerapkannya. Setelah disimpan, Anda akan dikembalikan ke halaman Pipelines. Di bagian Pipelines, Anda dapat mengklik Deploy Now di kolom Actions untuk me-restart instans dan menerapkan konfigurasi.

• Save and Deploy: Menyimpan dan menerapkan konfigurasi, me-restart instans untuk menerapkan perubahan.

Untuk informasi selengkapnya, lihat Login ke konsol Kibana.

Jika perintah berhasil dijalankan, hasil berikut dikembalikan:

{
  "count" : 3,
  "_shards" : {
    "total" : 1,
    "successful" : 1,
    "skipped" : 0,
    "failed" : 0
  }
}

UPDATE food SET name='Chocolates',update_time=now() where id = 1;
INSERT INTO food values(null,'egg',now(),now());

• Kueri catatan data di mana nilai name adalah Chocolates.

  GET drds_test/_search
  {
    "query": {
      "match": {
        "name": "Chocolates"
     }}
  }

  Kueri berhasil dan satu dokumen yang cocok dikembalikan. Responsnya sebagai berikut:

  {
    "took" : 18,
    "timed_out" : false,
    "_shards" : {
      "total" : 1,
      "successful" : 1,
      "skipped" : 0,
      "failed" : 0
    },
    "hits" : {
      "total" : 1,
      "max_score" : 1.7427701,
      "hits" : [
        {
          "_index" : "drds_test",
          "_type" : "doc",
          "_id" : "1",
          "_score" : 1.7427701,
          "_source" : {
            "update_time" : "2020-08-05T09:02:31.000Z",
            "id" : 1,
            "insert_time" : "2020-08-05T04:00:01.000Z",
            "@timestamp" : "2020-08-05T09:03:00.355Z",
            "@version" : "1",
            "name" : "Chocolates"
          }
        }
      ]
    }
  }

• Kueri semua data.

  GET drds_test/_search
  {
    "query": {
      "match_all": {}
    }
  }

  Jika perintah berhasil dijalankan, hasil berikut dikembalikan:

  {
    "hits" : {
      "hits" : [
        {
          "_index" : "drds_test",
          "_type" : "doc",
          "_id" : "3",
          "_score" : 1.0,
          "_source" : {
            "update_time" : "2020-08-05T04:00:02.000Z",
            "id" : 3,
            "insert_time" : "2020-08-05T04:00:02.000Z",
            "@timestamp" : "2020-08-05T09:03:00.356Z",
            "@version" : "1",
            "name" : "火腿肠"
          }
        },
        {
          "_index" : "drds_test",
          "_type" : "doc",
          "_id" : "2",
          "_score" : 1.0,
          "_source" : {
            "update_time" : "2020-08-05T04:00:02.000Z",
            "id" : 2,
            "insert_time" : "2020-08-05T04:00:02.000Z",
            "@timestamp" : "2020-08-05T09:03:00.355Z",
            "@version" : "1",
            "name" : "酸奶"
          }
        },
        {
          "_index" : "drds_test",
          "_type" : "doc",
          "_id" : "5",
          "_score" : 1.0,
          "_source" : {
            "update_time" : "2020-08-05T09:02:32.000Z",
            "id" : 5,
            "insert_time" : "2020-08-05T09:02:32.000Z",
            "@timestamp" : "2020-08-05T09:08:00.310Z",
            "@version" : "1",
            "name" : "鸡蛋"
          }
        }
      ]
    }
  }