Tablestore：多元索引

查詢方式

原理

情境

資料表主鍵

資料表類似於一個巨大的Map，它的查詢能力也類似於Map，只能通過主鍵查詢。

適用於可以確定完整主鍵（Key）或主鍵首碼（Key prefix）的情境。

二級索引

通過建立一張或多張索引表，使用索引表的主鍵列查詢，相當於把資料表的主鍵查詢能力擴充到了不同的列。

適用於能提前確定待查詢的列，待查詢列數量較少，且可以確定完整主鍵或主鍵首碼的情境。

多元索引

使用了倒排索引、BKD樹、列存等結構，具備豐富的查詢能力。

適用於除資料表主鍵和二級索引之外的其他所有查詢和分析情境，例如非主鍵列的條件查詢、任意列的自由組合查詢、關係查詢、全文檢索索引、地理位置查詢、模糊查詢、嵌套結構查詢、Null值查詢、統計彙總等。

功能

說明

文檔

任意列的查詢（包括主鍵列和非主鍵列）

使用任意列進行資料查詢，適用於大多數情境下的查詢需求。

當使用主鍵列或主鍵列首碼查詢無法滿足需求時，您可以建立一個多元索引並在索引中添加要查詢的欄位，即可通過該列的值查詢資料。

多元索引任意查詢，例如基礎查詢等

多欄位自由組合查詢

靈活組合多個欄位進行高效查詢，適用於訂單系統、日誌分析、使用者畫像等需要多條件式篩選的情境。

以訂單情境為例，表中可能包含多達幾十個欄位。在關係型資料庫中，為滿足多種欄位組合的查詢需求，可能需要建立上百個索引。同時如果某種組合方式未提前預想到且未建立相應索引，則無法高效查詢。

使用Table Store，只需建立一個多元索引並在索引中添加可能要查詢的欄位。查詢時可自由組合這些欄位。此外，多元索引還支援多種邏輯關係查詢，例如And、Or、Not。

組合查詢

地理位置查詢

隨著行動裝置的普及，地理位置資訊的價值越來越大，朋友圈、微博、外賣、運動、車連網等應用中均增加了地理位置功能，這些應用中的資料包含地理位置資訊，因此需要相匹配的查詢能力。

多元索引提供以下地理位置查詢功能：

• Near：以一個點為原點，查詢指定距離範圍內的點，例如朋友圈中“附近的人”。

• Within：指定一個矩形框或多邊形地區，查詢該範圍內的點。

基於上述功能，如果應用中需要地理位置相關查詢，使用Table Store多元索引即可一站式解決，無需依賴其他資料庫或搜尋系統。

• 地理距離查詢

• 地理長方形範圍查詢

• 地理多邊形範圍查詢

全文檢索索引

尋找包含指定短語的資料，適用於巨量資料分析、內容搜尋、知識管理、社交媒體分析、日誌分析、智能問答系統、合規審查、個人化推薦等情境。

多元索引的分詞能力可用於實現全文檢索索引，但是多元索引只提供最基礎的BM25相關性，不提供自訂相關效能力。因此，如果有複雜相關性的搜尋需求，建議使用搜尋系統實現，否則可以使用多元索引滿足需求。

目前多元索引提供了單字分詞、分隔字元分詞、最小數量語義分詞、最大數量語義分詞和模糊分詞5種分詞類型，請根據實際情境配置。此外，如需在返回結果中對關鍵詞進行高亮顯示，可使用摘要與高亮功能實現。

• 匹配查詢

• 短語匹配查詢

• 分詞

• 摘要與高亮

向量檢索

多元索引支援向量檢索能力，您能夠利用數值向量進行高效的近似最近鄰查詢，從而在大規模資料集中找到最相似的資料項目。該功能適用於檢索增強產生（RAG）、推薦系統、相似性檢測（映像、視頻和語音等）、自然語言處理等應用情境。

向量檢索

模糊查詢

多元索引提供了萬用字元查詢、首碼查詢和尾碼查詢功能，以滿足使用者不同情境的模糊查詢需求。

• 萬用字元查詢：類似於傳統關係型資料庫中的like文法，支援星號（*）和問號（?）兩種萬用字元。

  對於查詢模式為*word*的情境，您可以使用基於分詞的萬用字元查詢方式（即模糊分詞和短語匹配查詢組合使用）來實現效能更好的模糊查詢。

• 首碼查詢：按照首碼匹配所需內容，例如使用apple首碼查詢資料會匹配到apple6s、applexr等內容。首碼查詢除了支援中英文外，還支援其他語言。

• 尾碼查詢：按照尾碼匹配所需內容，例如查詢所有手機號碼中以1234結束的手機號。

• 萬用字元查詢

• 基於分詞的萬用字元查詢

• 首碼查詢

• 尾碼查詢

列存在性查詢（NULL查詢）

查詢某一列是否為空白值，類似於NULL查詢，適用於資料完整性檢查、資料清洗等情境。

列存在性查詢

巢狀查詢

線上應用的資料中，除了常見的扁平化結構外，還存在一些更複雜的多層嵌套結構情境，例如圖片標籤。假設某個系統中儲存了大量圖片，每張圖片包含多個實體（例如房子、轎車、人等），這些實體在圖片中的位置和空間大小各不相同，因此每個實體的權重（score）也不同。這種情況下，每張圖片均對應多個標籤，每個標籤由一個名稱和一個權重分組成。

如果要根據標籤中的條件式篩選圖片，可以使用巢狀型別查詢功能。其中圖片標籤採用JSON格式儲存，資料範例如下：

{
 "tags": [
   {
      "name": "car",
      "score": 0.78
   },
   {
      "name": "tree",
      "score": 0.24
   }
 ]
}

巢狀型別查詢能夠有效處理具有多層邏輯關係的資料存放區與查詢需求，為複雜資料建模提供了極大的靈活性和便利性。

對於包含巢狀型別的複雜資料結構（例如JSON）支援使用摘要與高亮功能來精準定位所需資訊。

• 數組和巢狀型別

• 巢狀型別查詢

去重

多元索引提供了查詢結果的去重功能，能夠有效提升結果的多樣性。去重功能通過限制某個屬性在單次查詢結果中的最大出現次數，避免結果過度集中於某一特定值。例如，在電商搜尋情境中，當搜尋膝上型電腦時，可能會出現第一頁全是同一品牌的商品，導致使用者體驗不佳，使用多元索引的去重功能可以避免此類情況。

摺疊（去重）

排序

Table Store預設按照主鍵的字母序排序，如果需要按照其他欄位進行排序，您可以使用多元索引的排序功能。

多元索引提供了豐富的排序能力，包括正序或逆序、單條件排序以及多條件排序等，所有排序均為全域排序。多元索引的預設返回結果按照表中主鍵的字母序排列。

• 排序和翻頁

• 多元索引任意查詢，例如基礎查詢等

資料總行數

使用多元索引查詢資料時支援指定返回本次請求命中的資料行數。此功能可用於資料校正、營運等情境。

• 如果指定一個空查詢條件，則所有已建立索引的資料均符合匹配條件，此時返回的資料總行數即為資料表中已建立索引的資料總行數。

• 如果資料寫入已停止且資料均已建立索引，則返回的資料總行數即為資料表中的總行數。

• 全匹配查詢

• 多元索引任意查詢，例如基礎查詢等

統計彙總

多元索引提供常見的統計彙總功能，包括最大值（Max）、最小值（Min）、平均值（Avg）、求和（Sum）、統計行數（Count）、去重統計行數（DistinctCount）、分組（GroupBy）、百分位（Percentile）、長條圖（Histogram）等功能，可以滿足使用者在輕量級分析情境對基本統計彙總的需求。

統計彙總

維度

按時間分表

原理

按照固定時間，例如“日”、“周”、“月”或者“年”分表，並為每個表建立一個多元索引，根據需要保留所需時間的資料表。

例如當資料需要保留6個月時，可以將每個月的資料儲存在一張資料表中，例如table_1、table_2、table_3、table_4、table_5、table_6，並為每個資料表建立一個多元索引，每個資料表和多元索引中只會儲存一個月的資料，只需要每個月刪除6個月前的資料表即可。

當使用多元索引查詢資料時，如果時間範圍在某個表中，只需要查詢對應表；如果時間範圍在多個表中，需要對涉及的資料表均查詢一次，再將查詢結果合并。

原則

單表（單索引）大小不超過500億行，當單表（單索引）大小不超過200億行時，多元索引的查詢效能最好。

優點

• 通過保留資料表的個數調節資料存放區時間長度。

• 查詢效能和資料量成正比，分表後每個表的資料大小有上限，查詢效能更好，避免查詢延遲太大或者逾時。

分類

介面

描述

索引管理

CreateSearchIndex

建立一個多元索引。

UpdateSearchIndex

更新多元索引的配置，包括資料生命週期（TTL）和多元索引schema。

DescribeSearchIndex

擷取多元索引的詳細描述資訊。

ListSearchIndex

列出多元索引的列表。

DeleteSearchIndex

刪除某個多元索引。

資料查詢

Search

全功能查詢介面，支援多元索引的所有功能點，包括所有的查詢功能以及排序、統計彙總等分析能力，其結果會按照指定的順序返回。

• 查詢功能：非主鍵列查詢、列存在性查詢、模糊查詢、多條件組合查詢、巢狀型別查詢、地理位置查詢、全文檢索索引、向量檢索

• 摺疊（去重）

• 排序

• 統計彙總

• 資料總行數

ParallelScan

多並發資料匯出介面，只包括所有的查詢功能，捨棄了排序、統計彙總等分析能力，能將命中的資料以更快的速度全部返回。

相對於Search介面，ParallelScan可以提供更好的效能，單並發時效能（吞吐能力）是Search介面的5倍。

• 查詢功能：非主鍵列查詢、列存在性查詢、模糊查詢、多條件組合查詢、巢狀型別查詢、地理位置查詢、全文檢索索引

• 單請求支援多並發查詢

多並發匯出資料時，您還需要通過ComputeSplits介面擷取當前ParallelScan單個請求的最大並發數。