多元索引如何摺疊去重 - Tablestore

當資料查詢的結果中含有某種類型的資料較多時，可以使用摺疊（Collapse）功能按照某一列對結果集做摺疊，使對應類型的資料在結果展示中只出現一次，保證結果展示中類型的多樣性。

摺疊功能可以在大部分情境下實現去重（Distinct）功能，相當於按照摺疊列做去重，但是只支援應用於整型、浮點數和Keyword類型的列，不支援數群組類型的列，且只能返回排序後的前100000個結果。

注意事項

摺疊功能只能使用offset+limit方式翻頁，不能使用token方式。
對結果集同時使用統計彙總與摺疊功能時，統計彙總功能只作用於使用摺疊功能前的結果集。
使用摺疊功能後，返回的總分組數取決於offset+limit的最大值，目前支援返回的總分組數最大為100000。
執行結果中返回的總行數是使用摺疊功能前的匹配行數，使用摺疊功能後的總分組數無法擷取。

介面

摺疊（去重）功能的介面為Search，通過collapse參數實現。

參數

參數	說明
query	可以是任意Query類型。
collapse	摺疊參數設定，包含fieldName設定。 fieldName：列名，按該列對結果集做摺疊，只支援應用於整型、浮點數和Keyword類型的列，不支援數群組類型的列。
offset	本次查詢的開始位置。
limit	本次查詢需要返回的最大數量。如果只為了擷取行數，無需具體資料，可以設定limit=0，即不返回任意一行資料。
getTotalCount	是否返回匹配的總行數，預設為false，表示不返回。返回匹配的總行數會影響查詢效能。
tableName	資料表名稱。
indexName	多元索引名稱。
columnsToGet	是否返回所有列，包含returnAll和columns設定。 returnAll預設為false，表示不返回所有列，此時可以通過columns指定返回的列；如果未通過columns指定返回的列，則只返回主鍵列。當設定returnAll為true時，表示返回所有列。

使用方式

您可以使用命令列工具或者SDK在查詢資料時進行摺疊（去重）。進行摺疊（去重）之前，您需要完成如下準備工作。

使用阿里雲帳號或者具有Table Store操作許可權的 RAM 使用者進行操作。如果需要為 RAM 使用者授權Table Store操作許可權，請參見通過RAM Policy為RAM使用者授權進行配置。
使用 SDK 方式和命令列工具方式進行操作時，如果當前無可用 AccessKey，則需要為阿里雲帳號或者 RAM 使用者建立 AccessKey。
已建立資料表。
已為資料表建立多元索引。
使用 SDK 方式進行操作時，還需要完成初始化Tablestore Client。
使用命令列工具方式進行操作前，還需要完成下載並啟動命令列工具，然後配置接入執行個體資訊並選擇要操作的表。具體操作，請參見下載命令列工具、啟動並配置接入資訊和資料表操作。

使用命令列工具

通過命令列工具執行search命令使用多元索引查詢資料，並在查詢條件中配置Collapse參數實現摺疊（去重）功能。更多資訊，請參見多元索引。

執行search命令使用search_index多元索引查詢表中資料，並返回所有建立索引的列。
```
search -n search_index --return_all_indexed
```

根據系統提示輸入查詢條件，樣本如下：

{
    "Offset": -1,
    "Limit": 10,
    "Collapse": {
        "FieldName": "product_name"
    },
    "Sort": null,
    "GetTotalCount": true,
    "Token": null,
    "Query": {
        "Name": "MatchQuery",
        "Query": {
            "FieldName": "user_id",
            "Text": "00002",
            "MinimumShouldMatch": 1
        }
    }
}

使用SDK

您可以通過Java SDK、Go SDK、Python SDK、Node.js SDK、.NET SDK和PHP SDK在查詢資料時進行摺疊（去重）。此處以Java SDK為例介紹摺疊（去重）的使用。

以下樣本查詢全部資料，按照 category 欄位摺疊結果，並按照 price 欄位降序排序，因此每個類別返回價格最高的一行資料。

SearchQuery searchQuery = new SearchQuery();
searchQuery.setQuery(new MatchAllQuery());
searchQuery.setLimit(10);
searchQuery.setCollapse(new Collapse("category"));
searchQuery.setSort(new Sort(
        Arrays.asList(new FieldSort("price", SortOrder.DESC))));

SearchRequest.ColumnsToGet columnsToGet =
        new SearchRequest.ColumnsToGet();
columnsToGet.setColumns(Arrays.asList("category", "price"));

SearchRequest request =
        new SearchRequest("example_table", "example_index", searchQuery);
request.setColumnsToGet(columnsToGet);

SearchResponse response = client.search(request);
System.out.println(response.getRows());

計費說明

使用多元索引查詢資料時會消耗讀輸送量。更多資訊，請參見多元索引計量計費。

在查詢資料時使用摺疊（去重）功能不會影響現有計費規則。

Tablestore：摺疊（去重）

注意事項

介面

參數

使用方式

計費說明

常見問題

相關文檔