Elasticsearch：Gunakan fitur pencarian kNN dari Elasticsearch

Prasyarat

• Sebuah kluster Alibaba Cloud Elasticsearch V8.X telah dibuat. Dalam contoh ini, sebuah kluster Alibaba Cloud Elasticsearch V8.5.1 dibuat. Untuk informasi lebih lanjut, lihat Buat Kluster Alibaba Cloud Elasticsearch.
• Data bisnis dikonversi menjadi data vektor, dan data vektor disimpan di bidang tipe dense_vector. Anda dapat merancang vektor berdasarkan metrik kemiripan. Jika vektor dokumen lebih dekat dengan vektor kueri, tingkat kemiripannya lebih tinggi.

Peringatan

• Anda harus menyimpan data vektor di bidang tipe dense_vector. Bidang tipe dense_vector tidak mendukung operasi agregasi atau pengurutan.
• Bidang tipe nested tidak mendukung pencarian kNN perkiraan.
• Jika Anda menggunakan fitur pencarian kNN dalam skenario pencarian lintas kluster, parameter ccs_minimize_roundtrips tidak didukung.
• Secara default, pencarian kNN menggunakan tipe pencarian dfs_query_then_fetch. Saat menggunakan fitur pencarian kNN, Anda tidak dapat mengonfigurasi parameter search_type secara eksplisit.

Metode pencarian yang didukung oleh pencarian kNN

Pencarian kNN perkiraan

Optimalkan kinerja

Buat indeks

PUT image-index
{
  "mappings": {
    "properties": {
      "image-vector": {
        "type": "dense_vector",
        "dims": 3,
        "index": true,
        "similarity": "l2_norm"
      },
      "title": {
        "type": "text"
      },
      "file-type": {
        "type": "keyword"
      }
    }
  }
}

Tulis data

POST image-index/_bulk?refresh=true
{ "index": { "_id": "1" } }
{ "image-vector": [1, 5, -20], "title": "keluarga moose", "file-type": "jpg" }
{ "index": { "_id": "2" } }
{ "image-vector": [42, 8, -15], "title": "danau alpen", "file-type": "png" }
{ "index": { "_id": "3" } }
{ "image-vector": [15, 11, 23], "title": "bulan purnama", "file-type": "jpg" }

Lakukan pencarian kNN perkiraan

POST image-index/_search
{
  "knn": {
    "field": "image-vector",
    "query_vector": [-5, 9, -12],
    "k": 10,
    "num_candidates": 100
  },
  "fields": [ "title", "file-type" ]
}

Pencarian kNN tepat

Buat indeks

PUT zl-index
{
  "mappings": {
    "properties": {
      "product-vector": {
        "type": "dense_vector",
        "dims": 5,
        "index": false
      },
      "price": {
        "type": "long"
      }
    }
  }
}

Tulis data

POST zl-index/_bulk?refresh=true
{ "index": { "_id": "1" } }
{ "product-vector": [230.0, 300.33, -34.8988, 15.555, -200.0], "price": 1599 }
{ "index": { "_id": "2" } }
{ "product-vector": [-0.5, 100.0, -13.0, 14.8, -156.0], "price": 799 }
{ "index": { "_id": "3" } }
{ "product-vector": [0.5, 111.3, -13.0, 14.8, -156.0], "price": 1099 }

Lakukan pencarian kNN tepat

POST zl-index/_search
{
  "query": {
    "script_score": {
      "query" : {
        "bool" : {
          "filter" : {
            "range" : {
              "price" : {
                "gte": 1000
              }
            }
          }
        }
      },
      "script": {
        "source": "cosineSimilarity(params.queryVector, 'product-vector') + 1.0",
        "params": {
          "queryVector": [-0.5, 90.0, -10, 14.8, -156.0]
        }
      }
    }
  }
}