インスタンスをアップグレードする前に、各 Hologres バージョンにおけるデフォルト動作の変更点をご確認ください。
パラメーター名の変更は下位互換性があります。元の名前も引き続き機能しますが、新しい名前の使用を推奨します。
V4.2
2026年8月
シャードとそのレプリカを同じワーカーにロード可能に
変更点: Hologres V4.2.20 以降、シャードレベルのレプリケーションを使用する場合、シャードとそのレプリカを同じワーカーにロードできるようになりました。デフォルト値が 4 の新しい GUC パラメーター hg_experimental_replica_count_limit_ratio が追加されました。これにより、ワーカーは同じシャードのレプリカを同時に最大 4 つまでロードできます。シャードレベルのレプリケーションの詳細については、「単一インスタンスのシャードレベルのレプリケーション」をご参照ください。
影響:シャードレベルのレプリケーションを使用するワークロード。この変更後、シャードとそのレプリカが同じワーカーにロードされる可能性があります。
推奨: この動作が不要な場合は、ワーカーが特定のシャードのレプリカを最大 1 つロードするように、hg_experimental_replica_count_limit_ratio を 1 に設定します。
単一の MaxCompute 外部テーブルから読み取るファイル数の新しい制限
変更点: Hologres V4.2.14 以降、デフォルト値が 100,000 の新しい GUC パラメーター hg_experimental_maxcompute_sdk_split_total_file_count_limit が追加されました。1 回のクエリで、単一の MaxCompute 外部テーブルがこの上限を超えるファイルを読み取った場合、クエリはエラーで失敗します。この変更以前は、このパラメーターは存在せず、単一テーブルから読み取られるファイル数に制限はありませんでした。
影響:MaxCompute 外部テーブルをクエリするワークロード、特に多数の小さいファイルを含むテーブルに影響します。制限を超えたクエリはブロックされ、過剰なメモリ使用による OOM (メモリ不足) の発生や、インスタンス上の他のワークロードへの影響を防ぎます。
推奨事項: まず MaxCompute 側で小さなファイルをマージして、各クエリが読み取るファイル数を減らします。 現時点で小さなファイルのマージが実現不可能な場合は、インスタンスの残りのリソースを評価した後に hg_experimental_maxcompute_sdk_split_total_file_count_limit を増やすことができます。 この値を大きくすると、インスタンスのメモリのウォーターマークが引き上げられます。 実際のワークロードに基づいて控えめに設定し、調整後はメモリ使用量のモニタリングを継続してください。
2026年6月
Hologres V4.2.3 以降、データ転送のセキュリティを強化するため、OSS および DLF Catalog ベースのレイクハウスソリューションにアクセスするためのデフォルトのネットワークプロトコルが HTTP から HTTPS に変更されました。
Hologres V4.2 以降、以下のデフォルト動作が変更されました。
-
テーブル統計における row_count フィールドのロジックの変更
変更点:Hologres は、統計 v2 を使用して row_count を計算するようになりました。新しい方法は DML カウンターの代わりにファイルメタデータに基づいており、TTL (生存時間) の有効期限が切れたり、テーブルが頻繁に更新されたりする場合でも、より安定したカウントを提供します。削除マークが付いた行や、すでに有効期限が切れているが物理的にはまだ削除されていない行も含まれるため、カウントがわずかに増加する可能性があります。このずれはコンパクションによって抑制されます。
-
Common Table パス経由での MaxCompute からの直接読み取りで自動分割がデフォルトで有効に
変更内容: 共通テーブルパスに対して、自動分割がデフォルトで有効になりました。以前はデフォルトで無効でした。この動作は GUC パラメーター
hg_experimental_enable_maxcompute_sdk_auto_split_sizeで制御されます。影響:Common Table パスを介して MaxCompute にアクセスするすべてのクエリ。
必要なアクション:ほとんどの場合、アクションは不要です。問題が発生した場合は、GUC パラメーターを使用してこの機能を無効にしてください。
SET hg_experimental_enable_maxcompute_sdk_auto_split_size = off; -
ゴミ箱の操作で実行中のクエリをキャンセル
変更点:ゴミ箱内のオブジェクトを削除すると、そのオブジェクトに対して実行中の DML および DQL 操作がキャンセルされるようになりました。Hologres V4.2 より前のバージョンではキャンセルされませんでした。これにより、SE スキーマバージョンがゴミ箱の削除によってブロックされるのを防ぎます。
影響:テーブルをゴミ箱にドロップすると、そのテーブルへの書き込みまたは読み取りを行っているクエリはキャンセルされ、失敗します。
検出方法:SQL ワークロードを再生し、テーブルがドロップされた後にそのテーブルからの読み取りまたは書き込みに依存しているかどうかを確認します。
必要なアクション:
-
アプリケーションコードをレビューし、テーブルをドロップした後にクエリや書き込みを続けるロジックがないか確認します。
-
キャンセルされたクエリのエラーハンドリングを追加します。
-
テーブルをドロップする前に、アクティブなクエリがそのテーブルにアクセスしていないことを確認します。
-
-
システムテーブルの権限の変更
変更点: スーパーユーザーは、
pg_catalogスキーマ配下のテーブルに対する DML 権限を持たなくなりました。影響:
pg_catalogテーブルに対して DML ステートメントを実行するスクリプトとツールは失敗します。検出方法: リグレッションテストを実行して、
pg_catalogテーブルを対象とする INSERT、UPDATE、または DELETE 文を検出します。必要な対応:
pg_catalogテーブルに対するすべての DML 操作を、代替の実装に置き換えてください。 -
最小 TTL 制約の動作の変更
変更内容: 新しい GUC パラメーター
hg_time_to_live_in_days_min_valueは、time_to_live_in_secondsの最小値を制御します。デフォルト値は 36,500 日です。影響:テーブルを作成する際、その TTL は 36,500 日 (100 年) 未満にすることはできません。
-
数値関数の精度推論の変更
変更点:PQE の数値関数が精度推論をサポートするようになりました。以前は、結果は小数点以下 10 桁で切り捨てられていました。現在は、推論された精度まで計算され、残りの桁は切り捨てられずに四捨五入されます。
-
Fast Rows がデフォルトで有効になり、外部テーブルのパーティション数が調整されるように
変更点:統計情報がない外部テーブル (以前のバージョンではプランで rows=1000 と推定) に対するクエリでは、Hologres はデフォルトでクエリ実行前に Fast Rows 取得ステップを追加します。
影響:統計情報のない MaxCompute 外部テーブル、および API を通じて統計情報を公開する Paimon テーブルに対するクエリと書き込み。
検出方法:アップグレード準備中に、クエリの総持続時間が悪化することが観測される場合があります。スロークエリ履歴で、プランが rows=1000 と推定している外部テーブルを確認してください。
-
全文検索のデフォルトトークナイザーの変更
変更点:フルテキストインデックスを作成する際、デフォルトのトークナイザーが jieba から ik に変更され、パフォーマンスと再現率の両方が向上しました。
新しいインデックスの場合、デフォルトのインデックストークナイザー (
analyzer_params) は ik_max_word モードの ik になり、デフォルトの検索トークナイザー (search_analyzer_params) は ik_smart モードの ik になります。 -
同じ位置にあるトークンのフレーズクエリマッチングの変更
変更点: トークナイザーが同じ位置で複数のトークンを出力する場合、フレーズクエリは AND ロジックの代わりに OR ロジックでこれらのトークンを処理するようになりました。候補となるいずれかのトークンが一致するとすぐに、その位置が一致したとみなされます。たとえば、
jieba(mode=search)は、实验室 (意味: 研究室) を 实验 (意味: 実験) と 实验室 (意味: 研究室) に分割し、両方のトークンが位置 0 を共有します。この変更により、pinyin などの類義語トークナイザーが期待どおりの結果を返せるようになります。影響:以下の両方の条件が満たされる必要があります。
-
クエリはフレーズモード (
mode=phrase) または自然言語モード (mode=natural_language) を使用します。 -
トークナイザーが同じ位置にトークンを生成する。典型的なケースは以下の通りです。
-
きめ細かい中国語のセグメンテーション (
jieba(mode=search)): ポジティブクエリでは、实验室 (meaning: laboratory) を検索すると、实验 (meaning: experiment) を含むドキュメントにも一致するため、より多くの結果が返されます。ネガティブクエリでは、-实验室は、数值实验 (meaning: numerical experiment) を含むドキュメントも除外するため、より多くの結果が除外されます。事実上、实验室 (meaning: laboratory) は、实验 (meaning: experiment) OR 实验室 (meaning: laboratory) に展開されます。 -
ピンイン類義語拡張(
pinyin): 完全なピンインliudehuaを検索すると、中国語名の刘德华 (Liu Dehua) が返されるようになるため、有益な効果があります。
-
推奨事項:
-
新しいインデックスには ik トークナイザーを使用してください。これは Hologres V4.2 からのデフォルトです。ik はより正確にセグメント化し、生成される余分な単一文字 (例:「室」(意味:「部屋」)) がアンカーとして機能し、誤った一致を防ぎます。
-
あるいは、クエリ時に
jieba(mode=exact)やik(mode=ik_smart)のような、通常は同じ位置に重複するトークンを生成しない粒度の粗いトークナイザーを使用します。一般的な組み合わせとして、再現率を最大化するためにインデックス作成にはjieba(mode=search)を、フレーズを正確に保つためにクエリにはjieba(mode=exact)を使用します。
-
V4.1
2026年8月
単一の MaxCompute 外部テーブルから読み取るファイル数の新しい制限
変更点: Hologres V4.1.34 以降、デフォルト値が 100,000 の新しい GUC パラメーター hg_experimental_maxcompute_sdk_split_total_file_count_limit が追加されました。1 つのクエリ内で単一の MaxCompute 外部テーブルがこの制限を超える数のファイルを読み取ると、クエリはエラーで失敗します。この変更以前は、このパラメーターは存在せず、単一テーブルから読み取られるファイル数に制限はありませんでした。
影響:MaxCompute 外部テーブルをクエリするワークロード、特に多数の小さいファイルを含むテーブルに影響します。制限を超えたクエリはブロックされ、過剰なメモリ使用による OOM (メモリ不足) の発生や、インスタンス上の他のワークロードへの影響を防ぎます。
推奨事項: まず MaxCompute 側で小さなファイルをマージして、各クエリが読み取るファイル数を減らします。現時点で小さなファイルのマージが困難な場合は、インスタンスの残りのリソースを評価した後に hg_experimental_maxcompute_sdk_split_total_file_count_limit を増やすことができます。値を大きくすると、インスタンスのメモリのウォーターマークが上昇します。実際のワークロードに基づいて控えめに設定し、調整後はメモリ使用量を継続してモニタリングしてください。
2026年3月
Hologres V4.1 では、カスタムアカウントのデフォルトのパスワード暗号化が MD5 から SCRAM-SHA-256 にアップグレードされます。既存のパスワードは自動的に更新されません。V4.1 以降で作成またはパスワードが変更されたアカウントのみが SCRAM-SHA-256 を使用します。
|
クライアント |
最小バージョン |
|
HoloWeb |
未サポートのため、 |
|
PostgreSQL JDBC Driver |
42.2.0 |
|
psql / libpq |
PostgreSQL 10 |
|
psycopg2 (Python) |
2.8 |
|
Npgsql (.NET) |
3.3 |
|
node-postgres (Node.js) |
8.0 |
|
PgBouncer |
1.14 |
最小バージョン未満のクライアントは、SCRAM-SHA-256 パスワードで認証できません。クライアントをアップグレードするか、MD5 に戻してください。
SET password_encryption = 'md5';
ALTER USER "BASIC$user" WITH PASSWORD 'password';
2026年2月
-
Hologres V4.1.1 以降、テーブルを読み取り専用に設定した後に REBUILD タスクが異常終了した場合、
ALTER TABLE <table_name> RESET (ddl_options,write_options)を使用して書き込みアクセスを復元します。これは、以前のALTER TABLE <table_name> SET (readonly = false)コマンドを置き換えます。詳細については、「REBUILD」をご参照ください。 -
Hologres V4.1.9 以降、全文転置インデックスのストレージフォーマットがアップグレードされました。このアップグレードは、これらのインデックスの通常の使用やバージョンアップグレードには影響しません。ただし、Hologres V4.1.9 以降から Hologres V4.0 にスペックダウンするには、新しいバージョンで作成された全文転置インデックスを事前に削除し、スペックダウン後に手動で再構築する必要があります。
-
Hologres V4.1.11 以降、KB レベルの超ワイド列の読み書きなど、大規模でメモリ集約的なタスクにサーバーレスコンピューティングを使用する場合、Hologres は自動的により多くのリソースを要求します。サーバーレスコンピューティングのリソース使用率が一貫して高い場合、タスクのキューイング時間が長くなる可能性があります。詳細については、「サーバーレスコンピューティングリソースの管理」をご参照ください。
2026年1月
-
セキュリティとコンプライアンス
-
拡張データマスキング (V2 スキーム):
INSERT操作中に、Hologres は基盤となるデータマスキングスキームをデフォルトで使用するようになります。これにより、ソーステーブルのマスクされたデータが確実にターゲットテーブルに書き込まれるようになり、ターゲットテーブルのマスキングルールが変更された場合に発生しうるデータ漏えいのリスクを軽減します。
-
-
データアクセス経路とモデリングの制約
-
MaxCompute 直接読み取り:Hologres は、MaxCompute の直接読み取りに、より安定した Common Table メカニズムをデフォルトで使用するようになりました。
-
セグメントキーの緩和:Nullable な列をセグメントキーとして使用できるようになり、データモデリングの柔軟性が向上しました。
-
-
DML とトランザクションの厳格な制約
-
トランザクション操作の混在の禁止: 明示的なトランザクションブロック内では、
INSERT OVERWRITE文またはTRUNCATE文と、標準の DML 操作を混在させることは厳禁です。このルールに違反すると、エラーが発生します。エラー例:ERROR: Mixing INSERT OVERWRITE or TRUNCATE with DML statements in a transaction is not supported. -
明示的なトランザクションにおける
DELETEのパフォーマンス: トランザクションの整合性を保証し、デッドロックのリスクを低減するために、明示的なトランザクション (SET hg_experimental_enable_transaction = ON) を有効にすると、テーブル全体に対する `DELETE` 操作の動作が変更されます。これらの操作は、ファイルレベルの物理削除の最適化をバイパスし、行ごとの論理削除として実行されるようになります。ユーザーは、潜在的なパフォーマンスへの影響を評価することをお勧めします。
-
-
メタデータ識別
-
統計情報の最適化:
table_info内の動的テーブルの型識別子が、DYNAMIC TABLEに標準化されました。
-
-
以下の機能はベータ版を終了し、本番環境で一般提供 (GA) されるようになりました。
V4.0 (2025年9月)
2025年11月
-
全文転置インデックスとリアルタイムデータ書き込み:
-
V4.0.8 以前:インデックス作成はデータ書き込みと同時に行われます。
-
V4.0.8 以降:インメモリインデックスは 1 秒ごとにリフレッシュされ、効率的な書き込みとインデックス経由での即時データアクセシビリティを保証します。
-
-
Hologres V4.0.7+ の動的テーブルの動作:
-
動的テーブルのリフレッシュは仮想ウェアハウスリソースをサポートします。
-
動的テーブルリフレッシュのデフォルトリソースは、V3.1、V3.2、および V4.0.1-4.0.6 と比較して変更されました。詳細については、「動的テーブルのリフレッシュリソースの設定」をご参照ください。
-
-
Hologres V4.0.15+ のゲートウェイ接続制限:インスタンスの安定性を向上させるため、仮想ウェアハウスインスタンスのゲートウェイ接続は 8,000 以内に制限されました。
-
Hologres V4.0 以降、ネイティブの INSERT OVERWRITE は、バイナリロギングが有効になっているテーブルに対してバイナリログを生成します。バイナリログの生成は、大幅な追加ストレージオーバーヘッドを発生させる可能性があることに注意してください。詳細については、「INSERT OVERWRITE」をご参照ください。
2025年9月
-
高性能クエリチャネル:Hologres V4.0+ インスタンスは、MaxCompute 外部テーブルのクエリにデフォルトで Common Table を使用するようになりました。この新しい方法は、大幅なパフォーマンス向上を提供し、MaxCompute Delta Table と Append 2.0 Table をサポートします。「Common Table」をご参照ください。
-
データ鮮度の向上:Hologres V4.0 以降、MaxCompute から Hologres に直接アクセスする場合、デフォルトのデータ鮮度は 1 分です。データ鮮度を手動で変更するには、次のコマンドを使用します。
-- DB レベルで鮮度を変更 ALTER DATABASE <database_name> set hg_create_table_snapshot_default_freshness_in_sec=xxx; -
サーバーレスコンパクション:
hg_serverless_computing_run_compaction_before_commit_bulk_loadパラメーターはデフォルトで有効になっており、サーバーレスの一括ロード中にコンパクションを同期的に実行することで、インスタンスリソースへの影響を軽減します。「コンパクションをサーバーレスリソースにオフロードする」をご参照ください。 -
柔軟な DLF テーブルフォーマット:
CREATE EXTERNAL TABLEを使用して Data Lake Formation (DLF) でテーブルを作成すると、デフォルトのテーブルフォーマット (以前は ORC) は Paimon SDK によって動的に決定されるようになりました。詳細については、「CREATE EXTERNAL TABLE」をご参照ください。 -
PQE メモリ保護:PQE を使用して SQL ステートメントを実行するためのシングルノードメモリ保護を実装します。このメカニズムは、クエリがインスタンスの安定性に影響を与える可能性がある場合に OOM エラーをスローします。
-
動的テーブルの適応型実行:Hologres V4.0+ では、フルリフレッシュモードの動的テーブルは、デフォルトで適応型実行を使用します。これにより、大規模なワークロードのピークリソース消費が削減され、ワークロードの安定性が向上します。リソース消費をより正確に推定してコストを節約します。適応型実行は、実行中に最適でないクエリプランを最適化し、不正確な統計による失敗を防ぎます。
V3.2 (2026年8月)
-
MaxCompute 外部テーブルクエリの RPC サービススレッドのデフォルト数の変更
変更内容: Hologres V3.2.42 以降、RPC サービスのスレッドパラメーター
holo_seahawks_rpc_service_thread_numberのデフォルト値が 300 から 150 に変更されました。影響:SQE エンジンで高い QPS で実行される MaxCompute 外部テーブルクエリでは、レイテンシーが中程度に増加します。その代わり、インスタンスはより安定して動作します。外部テーブルクエリが内部テーブルクエリのリソースを競合したり、そのパフォーマンスを低下させたりすることがなくなり、インスタンス全体の健全性が向上します。
推奨事項:インスタンスを Hologres V4.1 以降にアップグレードしてください。そのバージョン以降、外部テーブルクエリは新しいエンジンで実行され、安定性を維持しながらより良いクエリパフォーマンスを提供します。
-
単一の MaxCompute 外部テーブルから読み取るファイル数の新しい制限
変更点: Hologres V3.2.43 以降、デフォルト値が 100,000 の新しい GUC パラメーター
hg_experimental_maxcompute_sdk_split_total_file_count_limitが追加されました。1 つのクエリ内で、単一の MaxCompute 外部テーブルがこの上限を超える数のファイルを読み取ると、クエリはエラーで失敗します。この変更以前は、このパラメーターは存在せず、単一テーブルから読み取られるファイルの数に制限はありませんでした。影響:MaxCompute 外部テーブルをクエリするワークロード、特に多数の小さいファイルを含むテーブルに影響します。制限を超えたクエリはブロックされ、過剰なメモリ使用による OOM (メモリ不足) の発生や、インスタンス上の他のワークロードへの影響を防ぎます。
推奨事項: まず MaxCompute 側で小さなファイルをマージして、各クエリが読み取るファイル数を減らします。現時点で小さなファイルのマージが実現不可能な場合は、インスタンスの残りのリソースを評価した後に
hg_experimental_maxcompute_sdk_split_total_file_count_limitを増やすことができます。値を大きくすると、インスタンスのメモリのウォーターマークが引き上げられます。実際のワークロードに基づいて控えめに設定し、調整後はメモリ使用量のモニタリングを継続してください。
V3.2 (2025年7月)
-
非予約キーワードの
Branch、Overwrite、Parameter、Tagと、予約キーワードのLambda、Qualifyを追加しました。キーワードの詳細については、「PostgreSQL キーワード」をご参照ください。 -
Hologres V3.2 以降、CTE の適応型最適化がサポートされています。CTE のマテリアライズ戦略は、2 つの GUC パラメーター
optimizer_cte_inliningとhg_cte_strategyによって決定されます。これらのパラメーターは互いに独立しており、設定順序に関係なく個別に設定できます。動作は次のとおりです。-
optimizer_cte_inlining = offの場合、CTE は、hg_cte_strategyの設定にかかわらず再利用されます。 -
optimizer_cte_inlining = onの場合、CTE は強制的にインライン化されなくなります。CTE ポリシーはhg_cte_strategyによって決定されます。-
hg_cte_strategy = auto(デフォルト) の場合、クエリ オプテマイザー (QO) は、その複雑さなどの要因に基づいて、CTE をインライン化するか再利用するかを自動的に選択します。 -
hg_cte_strategy = inliningの場合、CTE は強制的にインライン化されます。 -
hg_cte_strategy = reuseの場合、 CTE は強制的に再利用されます。
-
-
-
Hologres V3.2 以降、Fast Rows がデフォルトで有効になります。テーブルに統計情報がない場合、オプティマイザーは自動的に実際の行数を取得して、より良い実行計画を生成します。
この動作はアップグレード時に自動的に行われ、設定は不要です。詳細については、「ANALYZE と AUTO ANALYZE」をご参照ください。
V3.1 (2026年8月)
-
MaxCompute 外部テーブルクエリの RPC サービススレッドのデフォルト数の変更
変更内容: Hologres V3.1.53 以降、RPC サービスのスレッドパラメーター
holo_seahawks_rpc_service_thread_numberのデフォルト値が 300 から 150 に変更されました。影響:SQE エンジンで高い QPS で実行される MaxCompute 外部テーブルクエリでは、レイテンシーが中程度に増加します。その代わり、インスタンスはより安定して動作します。外部テーブルクエリが内部テーブルクエリのリソースを競合したり、そのパフォーマンスを低下させたりすることがなくなり、インスタンス全体の健全性が向上します。
推奨事項:インスタンスを Hologres V4.1 以降にアップグレードしてください。そのバージョン以降、外部テーブルクエリは新しいエンジンで実行され、安定性を維持しながらより良いクエリパフォーマンスを提供します。
-
単一の MaxCompute 外部テーブルから読み取るファイル数の新しい制限
変更点: Hologres V3.1.53 以降、デフォルト値が 100,000 の新しい GUC パラメーター
hg_experimental_maxcompute_sdk_split_total_file_count_limitが追加されました。1 つのクエリ内で、単一の MaxCompute 外部テーブルがこの制限を超えるファイルを読み取った場合、クエリはエラーで失敗します。この変更以前は、このパラメーターは存在せず、単一テーブルから読み取られるファイル数に制限はありませんでした。影響:MaxCompute 外部テーブルをクエリするワークロード、特に多数の小さいファイルを含むテーブルに影響します。制限を超えたクエリはブロックされ、過剰なメモリ使用による OOM (メモリ不足) の発生や、インスタンス上の他のワークロードへの影響を防ぎます。
推奨事項: まず MaxCompute 側で小さなファイルをマージして、各クエリが読み取るファイル数を減らします。現時点で小さなファイルのマージが実行不可能な場合は、インスタンスの残りのリソースを評価した後に
hg_experimental_maxcompute_sdk_split_total_file_count_limitを増やすことができます。値を大きくすると、インスタンスのメモリのウォーターマークが上昇します。実際のワークロードに基づいて控えめに設定し、調整後はメモリ使用量のモニタリングを継続してください。
V3.1 (2025年5月)
-
動的テーブル:
-
構文
Hologres V3.1 以降、動的テーブルはより簡潔な新しい構文を使用します。V3.0 で作成された動的テーブルを V3.1 にアップグレードした後、完全データリフレッシュを使用するテーブルでは ALTER 操作のみが実行可能です。新しいテーブルを作成するには、V3.1 の新しい構文を使用する必要があります。増分データリフレッシュを使用するテーブルの場合、新しい構文を使用してテーブルを再作成する必要があります。詳細については、「動的テーブルの作成」をご参照ください。
-
リソース使用量
-
リフレッシュリソース
Hologres V3.1 で作成された動的テーブルは、デフォルトでサーバーレスコンピューティングリソースを使用してタスクを実行します。現在のインスタンスでサーバーレスコンピューティングが有効になっていない場合、自動的にインスタンスリソースにフォールバックします。Hologres V3.0 で作成されたテーブルは、テーブル作成時に指定されたリソースを引き続き使用します。詳細については、「動的テーブルの作成」をご参照ください。
-
インスタンスリソースを使用したテーブルの作成
-
新しい構文 (Hologres V3.1 および V3.2):ベーステーブルと動的テーブルのテーブルグループのプライマリ仮想ウェアハウスが使用されます。
-
古い構文 (Hologres V3.0) および新しい構文 (Hologres V4.1):動的テーブルのテーブルグループのプライマリ仮想ウェアハウスが使用されます。
-
-
-
接続数
新しい構文では、動的テーブルごとに 1 つの追加接続が維持されます。インスタンスの接続使用率が高く、数百の動的テーブルがある場合は、問題を避けるためにアイドル接続を削除してください。
-
ベーステーブルから増分データを読み取る方法
Hologres V3.1 以降、ストリーム方式を使用してベーステーブルのデータ変更を識別します。バイナリロギングと比較して、ストリーム方式はパフォーマンスが高く、コスト効率も優れています。インスタンスを V3.1 にアップグレードすると、デフォルトでストリーム方式が使用されます。V3.0 でテーブルのバイナリロギングが有効になっている場合は、余分なストレージコストが発生しないように、速やかにバイナリロギングを無効にしてください。詳細については、「動的テーブル」をご参照ください。
-
-
クエリキュー機能はベータ版を完了し、本番環境で利用可能です。詳細については、「クエリキュー」をご参照ください。
-
TRUNCATE は DDL 文から DML 文に変更され、FE ノードの負荷を軽減します。DDL の動作に戻すには、
hg_enable_truncate_as_dmlGUC パラメーターを無効にします。ただし、バイナリロギングが有効になっているテーブルで TRUNCATE 操作を実行する場合は、セッションレベルでバイナリロギングを無効にする必要があります。詳細については、「TRUNCATE」をご参照ください。 -
`COPY` を使用してプライマリキーを持つテーブルにデータをインポートする場合、GUC パラメーター
hg_experimental_copy_enable_on_conflictはデフォルトで有効になっています。これにより、プライマリキーを持つテーブルにデータをインポートする際に、データ更新ポリシーを設定できます。詳細については、「COPY」をご参照ください。 -
hg_insert_overwrite機能を使用する場合、SQL ステートメント (標準の SELECT ステートメント) で指定する列数とデータの型は、対象テーブル (Hologres 内部テーブル) のものと厳密に一致する必要があります。一致しない場合、error: table "hg_alias" has x columns available but x columns specifiedまたはerror: column xx is of type xxx but expression is of type xxxというエラーメッセージが報告されます。詳細については、「INSERT OVERWRITE」をご参照ください。 -
システムテーブル hg_table_storage_status が更新されました。Hologres V3.1 以降、このシステムテーブルにはメモリに保存されているテーブルデータ (メモリテーブル) が含まれなくなり、テーブルの実際の物理ストレージのみを反映します。メモリテーブルのメカニズムの詳細については、「INSERT」をご参照ください。
-
非予約キーワードである
async、logical、purge、recover、rebuild、resume、およびsuspendが追加されました。詳細については、「PostgreSQL キーワード」をご参照ください。
V3.0
2026年8月
MaxCompute 外部テーブルクエリの RPC サービススレッドのデフォルト数の変更
変更点: Hologres V3.0.56 以降、RPC サービススレッドパラメーター holo_seahawks_rpc_service_thread_number のデフォルト値が 300 から 150 に変更されました。
影響:SQE エンジンで高い QPS で実行される MaxCompute 外部テーブルクエリでは、レイテンシーが中程度に増加します。その代わり、インスタンスはより安定して動作します。外部テーブルクエリが内部テーブルクエリのリソースを競合したり、そのパフォーマンスを低下させたりすることがなくなり、インスタンス全体の健全性が向上します。
推奨事項:インスタンスを Hologres V4.1 以降にアップグレードしてください。そのバージョン以降、外部テーブルクエリは新しいエンジンで実行され、安定性を維持しながらより良いクエリパフォーマンスを提供します。
2025年4月
Hologres V3.0.33 以降、インスタンスで利用可能なサーバーレスコンピューティングリソースの上限が、インスタンスの排他的コンピューティングリソースの 3 倍から 5 倍に増加しました。上限は 2,048 CU を超えることはできません。詳細については、「サーバーレスコンピューティングの利用」をご参照ください。
2025年2月
-
Hologres V3.0.23 以降、必要な権限のないユーザーは、データベース、スキーマ、またはテーブルのメタデータをクエリできなくなりました。BI やその他のツールからの不正なアクセスは、権限エラーを返します。
-
Hologres V3.0 以降、
LIMIT -1を含む SQL ステートメントはサポートされていません。LIMIT -1を含む SQL ステートメントを実行すると、ERROR: LIMIT must not be negativeが報告されます。 -
Hologres V3.0.19 以降、データセキュリティを強化するため、データマスキングが有効化されているデータベースでは、デフォルトでバイナリログを消費できません。バイナリログが消費されると、
Replication does not support hologres anon now, could choose to turn off hg_anon_enable for current userエラーメッセージが報告されます。ユーザーがバイナリログを消費できるようにするには、次のいずれかの文を実行して、対象ユーザーのデータマスキングを無効化する必要があります。重要システムは、hg_anon_enable の設定のみに基づいて、バイナリログの消費が許可されているかどうかをチェックします。
unmaskedなどのデータマスキングルールを設定して、バイナリログの消費を有効にすることはできません。-- ユーザーのデータマスキングを無効にする ALTER ROLE "<user>" SET hg_anon_enable = OFF; -- 特定のデータベースでユーザーのデータマスキングを無効にする ALTER ROLE "<user>" IN DATABASE <database> SET hg_anon_enable = OFF;
2024年11月
固定プランにおけるフィルター条件の組み合わせの上限は 500,000 です。この制限を超えると、実行は Hologres Query Engine (HQE) にデグレードします。フィルター条件の値の説明:
WHERE (pk1 = 1 AND pk2 = 1) OR (pk1 = 2 AND pk2 = 2) OR (pk1 = 3 AND pk2 = 3)-- この例の組み合わせ数は 3 です。
WHERE pk1 IN (1, 2, 3) AND pk2 IN (1,2,3)-- この例の組み合わせ数は 9 です。数式:3 × 3 = 9。
2024年9月
-
SQL ヒント機能のパブリックプレビューが完了し、この機能は本番環境で使用できます。デフォルトでは、この機能は有効になっています。
-
メタデータウェアハウスでは、COPY 操作に対して 1 つのレコードではなく 2 つのレコードが生成されます。詳細については、「COPY」をご参照ください。
-
Hologres V3.0.10 以降、仮想ウェアハウスインスタンス内の各仮想ウェアハウスの最大計算ユニット (CU) 数が 512 から 1024 に増加します。
V2.2
2025年2月
-
Hologres V2.2.38 以降、データセキュリティを強化するため、データマスキングが有効になっているデータベースでは、デフォルトでバイナリログを消費できなくなりました。バイナリログを消費しようとすると、
Replication does not support hologres anon now, could choose to turn off hg_anon_enable for current userというエラーメッセージが報告されます。ユーザーがバイナリログを消費できるようにするには、次のいずれかの文を実行して、ユーザーのデータマスキングを無効にする必要があります。重要システムは、hg_anon_enable の設定にのみ基づいて、バイナリログの消費が許可されているかどうかをチェックします。
unmaskedなどのデータマスキングルールを設定しても、バイナリログの消費を有効にすることはできません。-- ユーザーのデータマスキングを無効にする ALTER ROLE "<user>" SET hg_anon_enable = OFF; -- 特定のデータベースでユーザーのデータマスキングを無効にする ALTER ROLE "<user>" IN DATABASE <database> SET hg_anon_enable = OFF;
2024年11月
-
Hologres V2.2.17 以降では、OOM のリスクを低減するため、実行計画のメモリ使用量の上限は 4 GB (デフォルト) に設定されています。
"ORCA failed to produce a plan : Used memory size xxx MB exceeds maximum size 4096 MB"エラーが発生した場合は、SQL ステートメントを簡素化するか、制限を調整します:-- 制限を調整またはキャンセルします。パラメーターを 0 に設定すると、制限はキャンセルされます。 ALTER DATABASE <database_name> SET hg_experimental_mp_allocated_size_limit_in_mb = 0; -
Hologres V2.2.25 以降では、仮想ウェアハウスをスケールインする際、各ワーカーに割り当てられる読み取り専用シャード数は 128 を超えることはできません。 これにより、OOM などの問題が頻繁に発生するのを防ぎます。 スケールイン後にワーカーに割り当てられたシャード数が 128 を超えると、
"The follower shard count per worker:xx should be less than or equal to the max follower shard"エラーが報告されます。 この場合、仮想ウェアハウスの元の仕様が維持されます。 現在のデータベースで指定した仮想ウェアハウス内のワーカーに割り当てられている読み取り専用シャード数は、次の SQL ステートメントを実行してクエリできます。 インスタンスに複数のデータベースがある場合は、各データベースの読み取り専用シャード数を合算します。-- 現在のデータベースの init_warehouse のワーカーに割り当てられている読み取り専用シャードの数をクエリします。 SELECT w.worker_id, count(*) AS cnt FROM hologres.hg_warehouse_table_groups t, hologres.hg_worker_info w WHERE t.warehouse_id = w.warehouse_id AND w.table_group_name = t.tablegroup_name AND t.leader = FALSE AND w.warehouse_name = 'init_warehouse' GROUP BY w.worker_id;
V2.2 (2024年7月)
Java Database Connectivity (JDBC) を使用して Hologres のバイナリログを消費する場合、ワーカーで利用可能な walsender の最大数が 1,000 から 600 に減少しました。walsender の数はスロット数で計算されます。詳細については、「JDBC 経由でバイナリログを消費する」をご参照ください。Hologres のバイナリログを消費するには、jdbc_fixed モードを使用することを推奨します。JDBC モードでのログ消費と比較して、jdbc_fixed モードでのログ消費は接続を占有せず、walsender の数の制限を受けません。jdbc_fixed モードの詳細については、「Hologres SQL コネクタ」をご参照ください。
V2.2 (2024年6月)
Hologres V2.2 以降、スロークエリログを収集する基盤機能が自動的にアップグレードされ、Hologres がスロークエリに関するより多くの情報をログに記録できるようになりました。これにより、ビジネス担当者は Hologres インスタンスで実行されるクエリのステータスに基づいて、詳細な管理を行うことができます。スロークエリログの詳細については、「スロークエリログの取得と分析」をご参照ください。スロークエリログの収集は、以下の点でアップグレードされています。
-
無効な構文、プラン解析の失敗、権限不足などの原因で失敗したクエリがログに記録されるようになりました。これらのクエリは Hologres V2.2 より前のバージョンではログに記録されませんでした。失敗したクエリを管理するには、SQL 診断機能を使用することを推奨します。
-
トランザクションに
BEGIN; DROP TABLE xxx; COMMIT;などの複数のデータ定義言語 (DDL) 文が含まれている場合、トランザクション全体が 1 つのクエリレコードとしてスロークエリログに記録されます。ただし、Query QPS メトリックは、トランザクションを複数の DDL 文としてカウントします。例:-- トランザクション内で複数の DDL ステートメントを含むクエリを開始します。 BEGIN; DROP TABLE xxx;-- 実行は成功します。 CREATE TABLE xxx -- 実行は失敗します。 ROLLBACK;-
次のサンプルコードは、スロークエリログの結果を示しています。
query_id | status | Query ---------|---------|------------ xxxx | FAILED |begin;drop table ;create table;rollback; -
次のサンプルコードは、モニタリングシステムの結果を示しています。
Query QPS: 4 records Failed Query QPS: 1 record
-
V2.2 (2024年5月)
-
Hologres V2.2 以降では、
hg_dump_scriptによって返されるテーブルプロパティは、CALL 構文の代わりに WITH 構文で表示されます。これにより、CREATE TABLE 文の利便性と可読性が向上します。詳細については、概要の「テーブルスキーマのクエリ」セクションをご参照ください。 -
Hologres V2.2.7 以降、デフォルト値が 1 秒から 100 ミリ秒に変更されました。変更後、スロークエリログは 1 秒ではなく 100 ミリ秒以上かかる SQL ステートメントを記録します。SQL ステートメントには、INSERT、SELECT、UPDATE、DELETE ステートメントが含まれます。詳細については、「スロークエリログの取得と分析」をご参照ください。
-
Hologres V2.2.9 以降、固定プランを使用したキーと値のペアのポイントクエリによって返される結果は、WHERE 句のプライマリキーに基づいて順序付けされません。
V2.2 (2024年4月)
-
Hologres V2.2 以降、Hologres は、デフォルトでサービスリンクロールを使用して MaxCompute 外部テーブルにアクセスします。V2.2 以降を購入またはアップグレードする際には、サービスリンクロールを作成し、必要な権限を付与してください。サービスリンクロールは、承認されたクロスサービスアクセスを可能にし、誤操作によるリスクを防ぎます。詳細については、「Hologres のサービスリンクロール」をご参照ください。
-
Hologres V2.2 以降では、デフォルトのオプティマイザーポリシーが
exhaustiveからexhaustive2に変更され、ほとんどの場合でパフォーマンスが 20%~40% 向上します。left outer joinクエリの場合、プランが最適ではなくなり、メモリ使用量が増加する可能性があります。 元に戻すには、set optimizer_join_order = 'exhaustive';を実行して exhaustive に戻します。 -
Hologres V2.2 以降、固定プランを使用するプロセスの Engine Type の値が、スロークエリログで SDK から FixedQE に変更されました。これにより、スロークエリログとメトリックの名前の一貫性が確保されます。
-
Hologres V2.2 以降、FE ノードへの接続数が 128 から 256 に増加しました。総接続数は 2 倍になります。詳細については、「インスタンス管理」をご参照ください。
-
INSERT OVERWRITE および BSI 関数が一般提供されるようになりました。
-
Hologres V2.2 以降では、
SELECT hg_dump_script()文は、CALL 構文の代わりに WITH 構文でテーブル作成プロパティを返します。この変更により、テーブル作成の利便性と可読性が向上します。詳細については、「テーブルスキーマを表示する」をご参照ください。
V2.1 (2024年6月)
Hologres V2.1.27 以降、VVR 8.0.7 以降を使用する Realtime Compute for Apache Flink を使用して Hologres のバイナリログを消費する場合、JDBC モードは自動的に jdbc_fixed モードにアップグレードされます。JDBC モードのクエリと比較して、jdbc_fixed モードのクエリは接続を消費せず、クエリパフォーマンスは walsender の最大数によって制限されません。jdbc_fixed モードの詳細については、「Hologres SQL コネクタ」をご参照ください。JDBC モードの詳細については、「JDBC 経由でバイナリログを消費する」をご参照ください。
V2.1 (2024年3月)
Realtime Compute for Apache Flink を使用して Hologres バイナリログを消費する場合、HoloHub モードはサポートされなくなり、'sdkMode'='holohub' 構成は無効になります。Java Database Connectivity (JDBC) モードのみがサポートされます。JDBC モードは HoloHub モードよりも安定しており、より多くのデータの型をサポートしています。Hologres インスタンスを V2.1 にアップグレードする前に、次のいずれかのソリューションを使用して Realtime Compute for Apache Flink デプロイメントとご使用の Hologres インスタンスを確認し、Realtime Compute for Apache Flink デプロイメントが期待どおりに実行できることを確認してください。詳細については、「JDBC 経由で Binlog を消費する」をご参照ください。
-
ソリューション 1:推奨。Realtime Compute for Apache Flink の VVR バージョンを 8.0.7 以降にアップグレードしてから、Hologres インスタンスをアップグレードします。この場合、Realtime Compute for Apache Flink は HoloHub モードを自動的に JDBC モードに変更します。
-
解決策 2: Realtime Compute for Apache Flink の VVR バージョンを 6.0.7~8.0.5 のバージョンにアップグレードし、Realtime Compute for Apache Flink のソーステーブルに
'sdkMode'='jdbc'構成を追加してから、デプロイメントを再起動します。 Hologres インスタンスにログインするユーザーアカウントに、次のいずれかの権限セットを付与します。 デプロイメントが正常に実行されていることを確認した後、Hologres インスタンスをアップグレードします。-
Hologres インスタンスのスーパーユーザー権限
-
テーブル所有者の権限、CREATE DATABASE 権限、および Hologres インスタンスのレプリケーションロールの権限
-
-
ソリューション 3:非推奨。Realtime Compute for Apache Flink の VVR バージョンを 8.0.6 にアップグレードしてから、Hologres インスタンスをアップグレードします。この場合、Realtime Compute for Apache Flink は HoloHub モードを自動的に JDBC モードに変更します。VVR 8.0.6 を使用する Realtime Compute for Apache Flink には既知の欠陥があります。ディメンションテーブルに過剰な数のフィールドが含まれている場合、VVR ベースの Realtime Compute for Apache Flink ドラフトはタイムアウトによりデプロイに失敗します。詳細については、「概要」の「Hologres コネクタリリースノート」セクションをご参照ください。
-
オプション。多数の VVR ベースの Realtime Compute for Apache Flink デプロイメントがある場合は、「Realtime Compute for Apache Flink または Blink を使用して Hologres のバイナリログをリアルタイムで消費する」の指示に従って、デプロイメントとテーブルに関する情報を取得できます。
V2.1 (2024年2月)
Hologres V2.1.19 では、DECIMAL 型データの乗算と除算が修正されました。V2.1.19 より前のバージョンでは、DECIMAL 型データの基本操作で最大 18 の小数点以下桁数がサポートされていました。乗算または除算後の計算結果が 18 桁を超える場合、計算前にデータが切り捨てられ、その結果、計算結果が無効になっていました。
たとえば、2 つの 10 進数値を乗算する場合、その乗算結果における小数点の前後の桁数の合計 (precision_ans) と小数点以下の桁数 (scale_ans) は、次の数式を使用して計算されます。
precision_ans = precision_l + precision_r
scale_ans = scale_l + scale_r
scale_ans の値が 18 より大きい場合、小数点以下 18 桁のみが保持されます。乗算に使用される小数値は、以下のルールに基づいて指定された小数点以下の桁数に切り捨てられます:
-
scale_l ≤ 9の場合、対応する小数値は切り捨てられず、乗算操作における小数値の小数点以下の桁数はscale_lになります。 -
scale_l > 9の場合、関連する 10 進値はmax(9,18-scale_r)が返す小数点以下の桁数に切り捨てられます。 -
scale_r ≤ 9の場合、関連する小数値は切り捨てられず、乗算における小数値の小数点以下の桁数はscale_rになります。 -
scale_r > 9の場合、関連する小数値はmax(9,18-scale_l)によって返される小数点以下の桁数に切り捨てられます。
次のサンプルコードは例を示しています。
CREATE TABLE t (a DECIMAL(30,10), b DECIMAL(30,10));
INSERT INTO t VALUES (1.1111111111, 1.0000000000),(1.1111111112, 1.0000000000);
SELECT a, b , a*b FROM t;
-
V2.1.19 より前のバージョンでは、乗数が 9 桁を超える有効な小数点以下の桁数を持つ場合、乗数は指定された小数点以下の桁数に切り捨てられ、精度に悪影響を及ぼし、その結果、計算結果が無効になっていました。
-- Hologres での計算結果は無効です。 1.1111111111, 1.0000000000,1.111111111000000000 1.1111111112, 1.0000000000,1.111111111000000000 -- PostgreSQL での計算結果は有効です。 1.1111111111, 1.0000000000,1.111111111100000000 1.1111111112, 1.0000000000,1.111111111200000000 -
Hologres V2.1.19 以降では、この問題は修正されています。元の 10 進数値に対して乗算操作が実行され、その後、乗算結果が指定された小数点以下の桁数に切り捨てられます。これにより、結果の高い精度が保証されます。
-- 計算結果は有効です。 1.1111111111, 1.0000000000,1.111111111100000000 1.1111111112, 1.0000000000,1.111111111200000000
V2.1 (2023年10月)
特定の機能が最適化されました。
-
Hologres V2.1.12 以降、固定プラン機能を使用して DECIMAL 型の列にデータを書き込む場合、精度が指定されておらず、ソースデータの精度が宛先列の精度よりも高い場合、Hologres は宛先列の精度に基づいてソースデータを四捨五入します。Hologres V2.1.11 以前では、Hologres は宛先列の精度に基づいてソースデータを切り捨てます。次のステートメントは例を示しています。
説明Hologres V2.1.12 以降では、固定プラン機能が使用されているかどうかに関係なく、プロセスは同じです。
CREATE TABLE fixed_plan_decimal (col DECIMAL(3,2)); -- Hologres V2.1.12 以降では、データ 2.56 が書き込まれます。V2.1.12 より前のバージョンでは、データ 2.55 が書き込まれます。 INSERT INTO fixed_plan_decimal VALUES (2.555); -- すべての Hologres バージョンで、データ 2.55 が書き込まれます。 INSERT INTO fixed_plan_decimal VALUES (2.554); -
Hologres バイナリログを消費するための権限要件が更新され、ターゲットテーブルに対する読み取り権限のみが必要になりました。詳細については、「JDBC 経由でバイナリログを消費する」をご参照ください。
-
Bulkload を使用して分散キーのない Hologres 内部テーブルにデータをインポートすると、インポートパフォーマンスが低下する可能性があります。
-
Hologres V2.1 以降では、
CREATE TABLE WITH PROPERTY構文がサポートされ、テーブルプロパティの構成を簡素化できます。 詳細については、「CREATE TABLE」をご参照ください。 -
Hologres V2.1 以降、DELETE および UPDATE 操作のコンパクションポリシーが変更され、タグ付けされたファイルが速やかに回収されるようになりました。これにより、頻繁に DELETE/UPDATE 操作が行われる列指向テーブルのストレージが削減され、クエリパフォーマンスが向上する可能性があります。V2.1 にアップグレードした後、履歴の小さいファイルのバックグラウンドコンパクションは大量の CPU を消費し、ファイル量によっては 10 分以上、場合によっては数時間かかることがあります。
-
Hologres V2.1 以降では、
INSERT INTO <table_name> ON CONFLICT(<col_name>,...) DO構文内のCONFLICTで指定されたすべての列がプライマリキー列であるかどうかをチェックするメカニズムが追加されました。いずれかの列がプライマリキー列でない場合、SQL ステートメントの実行は失敗します。詳細については、「INSERT ON CONFLICT (UPSERT)」をご参照ください。 -
Hologres V2.1 以降では、外部テーブルを使用してデータレイクにアクセスするための
dlf_fdw拡張がデフォルトで作成されます。お客様がdlf_fdw拡張を手動で作成する必要はありません。外部サーバーを作成するときにdlf_regionパラメーターを指定する必要はありません。dlf_endpoint、oss_endpoint、およびdlf_catalogパラメーターのみを指定する必要があります。エラーを防ぐために、dlf_endpointおよびoss_endpointパラメーターにフォーマット検証が追加されています。フォーマット要件:-
dlf_endpoint:
dlf-share.<nation>-<region>.aliyuncs.com -
oss_endpoint:
-
OSS バケット:
oss-<nation>-<region>-internal.aliyuncs.com -
OSS-HDFS バケット:
oss-<nation>-<region>.oss-dls.aliyuncs.com
-
-
-
次のキーワード (
system_time、proctime、およびdynamic) は非予約キーワードです。これらのキーワードは SQL ステートメントでカラム名として使用することはできず、ASの後にエイリアスとしてのみ使用できます。サンプルステートメント:-- Hologres V2.0 以前では、3 つのキーワードは SQL ステートメントの列名またはエイリアスとして使用できます。 SELECT xxxx SYSTEM_TIME FROM t; SELECT xxxx AS SYSTEM_TIME FROM t; -- Hologres V2.1 以降では、3 つのキーワードは SQL ステートメントのエイリアスとしてのみ使用できます。 SELECT xxxx AS SYSTEM_TIME FROM t;
V2.0 (2023年6月)
特定の機能が最適化されました。
-
Realtime Compute for Apache Flink を使用して Hologres のバイナリログを消費する場合、JDBC モードがサポートされます。「'sdkMode'='holohub'」設定で指定された HoloHub モードは段階的に廃止されます。JDBC モードは HoloHub モードよりも安定しており、より多くのデータ型をサポートします。Hologres インスタンスを V2.0 にアップグレードする前に、次のいずれかのソリューションを使用して Realtime Compute for Apache Flink デプロイメントと Hologres インスタンスを確認し、Realtime Compute for Apache Flink デプロイメントが期待どおりに実行できることを確認してください。詳細については、「JDBC 経由でバイナリログを消費する」をご参照ください。
-
ソリューション 1:推奨。Realtime Compute for Apache Flink の VVR バージョンを 8.0.6 以降にアップグレードしてから、Hologres インスタンスをアップグレードします。この場合、Realtime Compute for Apache Flink は HoloHub モードを自動的に JDBC モードに変更します。VVR 8.0.6 を使用する Realtime Compute for Apache Flink には既知の欠陥があります。ディメンションテーブルに過剰な数のフィールドが含まれている場合、VVR ベースの Realtime Compute for Apache Flink ドラフトはタイムアウトによりデプロイに失敗します。詳細については、「概要」の「Hologres コネクタリリースノート」セクションをご参照ください。Realtime Compute for Apache Flink の VVR バージョンを 8.0.7 にアップグレードすることを推奨します。
-
ソリューション 2:Realtime Compute for Apache Flink の VVR バージョンを 8.0.4 または 8.0.5 にアップグレードし、デプロイメントを再起動します。Hologres インスタンスへのログインに使用するユーザーアカウントに、次の権限セットのいずれかを付与します。デプロイメントが正常に実行されることを確認した後、Hologres インスタンスをアップグレードします。
-
Hologres インスタンスのスーパーユーザー権限
-
テーブル所有者の権限、CREATE DATABASE 権限、および Hologres インスタンスのレプリケーションロールの権限
-
-
ソリューション 3:Realtime Compute for Apache Flink の VVR バージョンを 6.0.7 から 8.0.3 の範囲のバージョンにアップグレードしてから、Hologres インスタンスをアップグレードします。この場合、Realtime Compute for Apache Flink は引き続き HoloHub モードを使用して Hologres のバイナリログを消費します。
-
-
'sdkMode'='rpc'または'rpcMode'='true'の構成で指定されるリモートプロシージャコール (RPC) モードは、Realtime Compute for Apache Flink のディメンションテーブルと結果テーブルではサポートされなくなりました。 代わりに JDBC モードが使用されます。 Hologres インスタンスを V2.0 にアップグレードする前に、Realtime Compute for Apache Flink デプロイメントが期待どおりに実行できるように、次の操作を実行して Realtime Compute for Apache Flink デプロイメントとご使用の Hologres インスタンスを確認してください。 詳細については、「Hologres SQL コネクタ」をご参照ください。-
Realtime Compute for Apache Flink の VVR バージョンが 6.0.7 以降の場合、システムは RPC モードを自動的に JDBC モードに変更します。操作は不要です。
-
Realtime Compute for Apache Flink の VVR バージョンが 6.0.3 から 6.0.6 の場合、Realtime Compute for Apache Flink デプロイメントでは、
'sdkMode'='rpc'構成を'sdkMode'='jdbc'に変更するか、または'rpcMode'='true'構成を'rpcMode'='false'に変更します。 -
Realtime Compute for Apache Flink の VVR バージョンが 6.0.2 以前の場合は、Realtime Compute for Apache Flink のデプロイメントで、
'rpcMode'='true'構成を'rpcMode'='false'に変更する必要があります。 -
Hologres インスタンスへの接続が不足している場合は、接続プールで接続を共有するために
connectionPoolNameパラメーターを設定することをお勧めします。また、Realtime Compute for Apache Flink の VVR バージョンを 6.0.7 以降にアップグレードし、'sdkMode'='jdbc_fixed'構成を使用することもできます。この場合、接続は占有されません。 -
RPC モードは、同じバッチ内で同じプライマリキーを持つデータを重複排除しません。 JDBC モードはデータを自動的に重複排除します。 ビジネスシナリオで完全なデータを保持する必要がある場合は、
'jdbcWriteBatchSize'='1'構成を使用して重複排除を防ぎます。
-
-
Hologres V2.0 以降では、Blink を使用して Hologres 内のデータに対してリアルタイムのポイントクエリを実行したり、Hologres にデータを書き込んだりすることはできません。Hologres インスタンスをアップグレードする前に、Blink デプロイメントを Realtime Compute for Apache Flink に移行することを推奨します。
V2.0 (2023年4月)
特定の機能が最適化されました。
-
Hologres V2.0 以降、セグメント形式のデータは列指向ストレージモードで保存できなくなりました。セグメント形式のデータを含む Hologres インスタンスは、V2.0 以降にアップグレードできません。hg_convert_segment_orc 関数を使用して、セグメント形式の複数のテーブルを同時に Optimized Row Columnar (ORC) 形式のテーブルに変換できます。詳細については、「列指向テーブルのストレージ形式のアップグレード」をご参照ください。
-
テーブルグループまたはインスタンスのシャード数に上限が課せられます。これにより、テーブルグループの誤用によるリソースの無駄を防ぎます。詳細については、「テーブルグループとシャードの管理」をご参照ください。
-
データは SDK モードではなく JDBC モードで DataHub に書き込まれます。JDBC モードは SDK モードよりも安定しており、より多くのデータ型をサポートします。
-
デフォルトでは、バイナリログ拡張機能が設定されています。JDBC モードでバイナリログデータを消費する場合、バイナリログ拡張機能を作成する必要はありません。JDBC モードでバイナリログデータを消費する場合、使用できる walsender の最大数は 10 倍に増加します。32 CPU コアで構成されたインスタンスの場合、walsender の最大数は 200 から 2,000 に増加します。walsender はスロットとしてカウントされます。詳細については、「JDBC 経由でバイナリログを消費する」をご参照ください。
-
Hologres インスタンスをアップグレードした後、統計情報が収集されていないテーブルに対して自動 ANALYZE 機能が実行されます。このプロセスは CPU リソースを消費し、統計情報が収集されていないテーブルの数によっては、数分から数時間かかる場合があります。
-
バックアップと復元機能および階層化ストレージ機能のパブリックプレビューが完了し、これらの機能は本番環境で使用できます。
-
シャードレベルのレプリケーション機能のパブリックプレビューが完了し、この機能は本番環境で使用できます。詳細については、「高スループットのためのシャードレベルのレプリケーション」をご参照ください。
-
テーブルプロパティを指定するパラメーターが標準化されました。列名に大文字が含まれる場合にテーブルプロパティを設定するために使用される構文が変更されました。詳細については、「CREATE TABLE」をご参照ください。bitmap_columns プロパティでは値 auto はサポートされていません。この変更は既存のテーブルの使用には影響しません。
-
HG_CREATE_TABLE_LIKE 関数は、作成されたインデックス、SERIAL データ型の列、および Proxima ベクトルインデックスが作成された列を継承できます。
V1.3 (2023年6月)
-
Hologres V1.3.53 以降、レプリカ数はワーカー数以下である必要があります。詳細については、「高スループットのためのシャードレベルのレプリケーション (ベータ版)」をご参照ください。
-
Avg 関数の計算結果が最適化されました。V1.3 より前の Hologres バージョンでは、Avg 関数は最大 6 桁の小数点以下の計算結果を返していました。計算結果が 6 桁を超える場合、計算結果は切り捨てられていました。Hologres V1.3 以降では、Avg 関数は完全な小数点以下の計算結果を返します。
-
DECIMAL 型の値から変換された TEXT 型の値が最適化されました。V1.3.46 より前の Hologres バージョンでは、DECIMAL 型の値から変換された TEXT 型の値は指数表記形式で表示されていました。Hologres V1.3.46 以降では、DECIMAL 型の値から変換された TEXT 型の値は直接表示されます。サンプル SQL ステートメント:
CREATE TABLE t (a INT, b DECIMAL(38,10)); INSERT INTO t VALUES (1,1); INSERT INTO t VALUES (1,0); SELECT a,b,b::text FROM t; -- Hologres V1.3.46 以降では、次の結果が返されます。 a | b |b --+-------------+------ 1 |0.0000000000 |0.0000000000 1 |1.0000000000 |1.0000000000 -- V1.3.46 より前の Hologres バージョンでは、次の結果が返されます。 a | b |b --+-------------+------ 1 |0.0000000000 |0.E-10 1 |1.0000000000 |1.0000000000
2023年2月リリースの Hologres V1.3 のデフォルト動作の変更
特定の機能が最適化されました。
Hologres V1.3.36 以降では、スキーマレベルの簡易権限モデル (SLPM) を使用して、スキーマをまたいでビューを作成できます。詳細については、「SLPM の使用」をご参照ください。
V1.3 (2023年1月)
特定の機能が最適化されました。
-
Hologres V2.0 以降では、セグメント形式のテーブルはサポートされなくなりました。Hologres V1.3.35 以降では、セグメント形式の複数のテーブルを同時に ORC 形式のテーブルに変換するステートメントが提供されます。この変換により、既存のテーブルのデータ移行が容易になります。詳細については、「列指向テーブルのストレージ形式のアップグレード」をご参照ください。セグメント形式のデータを含む Hologres インスタンスは、以降のバージョンにアップグレードできません。
-
Hologres V1.3.35 以降では、固定プラン機能のより多くの Grand Unified Configuration (GUC) パラメーターがデフォルトで
onに設定されています。これにより、システムの使いやすさとパフォーマンスが向上します。詳細については、「固定プランによる SQL 実行の高速化」をご参照ください。
V1.3 (2022年12月)
特定の機能が最適化されました。
-
2022年12月26日以降、Alibaba Cloud は、バックアップまたは復元機能を使用して作成されたインスタンスを含む、新規インスタンスに対して VPC (Virtual Private Cloud) エンドポイントの提供を停止します。より安全な VPC エンドポイントを指定できます。指定した VPC エンドポイントは、Hologres インスタンスを購入する際に選択した VPC にのみ接続されます。これにより、セキュリティと隔離が向上します。既存のインスタンスは影響を受けません。元の VPC エンドポイントを無効にし、代わりに VPC エンドポイントを指定することを推奨します。
-
Hologres V1.3.31 以降では、デフォルトで Hologres のデータを暗号化し、MaxCompute から暗号化されたデータをクエリできます。追加の設定やチケットの送信は不要です。詳細については、「保存データの暗号化」および「暗号化された MaxCompute データのクエリ」をご参照ください。
V1.3 (2022年11月)
特定の機能が最適化されました。
-
Hologres V1.3.28 以降では、クラスタリングキーまたはセグメントキーとして設定された列のデータに
null 値を含めることはできません。詳細については、「クラスタリングキー」および「イベント時間列 (セグメントキー)」をご参照ください。 -
Hologres V1.3.28 以降では、
hg_experimental_load_all_foreign_table_interval_timeパラメーターのデフォルト値が5minから30minに変更されました。このパラメーターは、すべての MaxCompute テーブルに対して外部テーブルを自動的に作成するための定期的な検査間隔を指定します。詳細については、「MaxCompute テーブルの外部テーブルを自動的に作成する」をご参照ください。 -
Hologres V1.3.28 以降では、分散キーとして設定された列に空の文字列を含めることはできません。詳細については、「分散キー」をご参照ください。
-
Hologres V1.3.27 以降では、プライマリインスタンスからセカンダリインスタンスへのデータ同期のレイテンシーしきい値が
20分から60分に変更されました。同期遅延が 60 分を超えると、セカンダリインスタンスは自動的に再起動されます。詳細については、「マルチインスタンス高可用性デプロイメントの設定」をご参照ください。
V1.3 (2022年10月)
特定の機能が最適化されました。
-
Hologres V1.3.24 以降では、hg_worker_info システムビューを使用して、シャードとワーカーノード間の割り当て関係をクエリできます。これにより、コンピューティングリソースの不均等な割り当ての問題を解決できます。詳細については、「ワークロードスキューの検出と処理」をご参照ください。
-
Hologres V1.3.24 以降では、テーブルデータの最小生存時間 (TTL) は 1 日 (86,400 秒) です。詳細については、「その他の PostgreSQL ステートメント」をご参照ください。
-
Hologres V1.3.24 以降では、Hologres のバイナリロギングを有効にすると、
pg_relation_size関数はバイナリログのサイズを返します。詳細については、「テーブルとデータベースのストレージサイズのクエリ」をご参照ください。 -
Hologres V1.3.24 以降では、ビジネス要件に基づいて子テーブルのバイナリログの TTL を設定できます。詳細については、「Hologres バイナリログのサブスクライブ」をご参照ください。
V1.3 (2022年9月)
特定の機能が最適化されました。
-
TTL の有効期限が切れ、同じプライマリキーが共有されている場合、データの書き込みに失敗します。Hologres V1.3.23 以降では、SQL ステートメントを使用してこの問題を修正できます。詳細については、「INSERT ON CONFLICT (UPSERT)」をご参照ください。
-
Hologres V1.3.22 以降では、PostgreSQL システムテーブルを、作成した Hologres 内部テーブルと結合できます。また、PostgreSQL システムテーブルから Hologres 内部テーブルにデータをエクスポートすることもできます。詳細については、「システムテーブル」をご参照ください。
-
Hologres V1.3.22 以降では、DATE 型の列をプライマリキー列またはパーティションキー列として設定できます。詳細については、「CREATE TABLE」をご参照ください。
-
Hologres V1.3.21 以降では、
Create Table Asステートメントを使用して、既存のテーブルと同じテーブル構造とデータを持つテーブルを作成できます。詳細については、「CREATE TABLE AS」をご参照ください。
V1.3 (2022年7月)
特定の機能が最適化されました。
-
JSON 関連機能のパブリックプレビューが完了しました。これらの機能は正式にリリースされました。
-
PostGIS 関連機能のパブリックプレビューが完了しました。これらの機能は正式にリリースされました。
-
Data Integration や Realtime Compute for Apache Flink などの方法でデータを挿入する場合、SDK の代わりに SQL ステートメントを使用してデータを書き込むことを推奨します。SQL ステートメントは INSERT ステートメントです。
V1.1 (2022年7月)
Hologres の自己診断および自己 O&M 機能を向上させるために、多数のメトリックが Hologres に追加されました。これらのメトリックは、問題をより正確に特定し、リソース使用量の詳細をクエリするのに役立ちます。これにより、Hologres の全体的な可用性が向上します。メトリックを使用する際には、次の点に注意してください。
-
2022年7月に追加されたメトリックは、Hologres V1.1 以降にのみ適用されます。Hologres インスタンスのバージョンが V1.1 より古い場合は、Hologres コンソールで Hologres インスタンスを手動でアップグレードするか、テクニカルサポートのために DingTalk グループに参加してください。Hologres コンソールで Hologres インスタンスを手動でアップグレードする方法の詳細については、「手動アップグレード (ベータ版)」をご参照ください。テクニカルサポートの取得方法の詳細については、「Hologres のオンラインサポートの利用」をご参照ください。
-
CPU とメモリのメトリックがより正確に計算されるようになりました。2022年7月の更新後、CloudMonitor を含め、V1.1 インスタンスの CPU 使用率とメモリ使用量が 5%~10% 変動する可能性があります。それに応じてモニタリングのしきい値を再設定してください。
メトリックの詳細については、「モニタリングメトリック」をご参照ください。
V1.1 (2022年4月)
メモリ使用量が最適化されました。
Hologres V1.1.53 以降では、メモリ使用量が最適化され、バックエンドの O&M メトリックがより効率的に報告されるようになり、コンピューティングのためにより多くのメモリが解放されます。ビジネス要件に基づいて V1.1.53 にアップグレードしてください。
V1.1 (2022年3月)
固定プランを使用して開始されるポイントクエリのパフォーマンスが最適化されました。
Hologres V1.1.49 以降では、固定プランを使用して開始されるポイントクエリのパフォーマンスが最適化されました。大量のデータが関与するポイントクエリでは、スループットが 30% 以上向上します。ビジネス要件に基づいて、Hologres インスタンスのバージョンを V1.1.49 以降に更新できます。固定プランの詳細については、「固定プランによる SQL 実行の高速化」をご参照ください。
V1.1 (2022年3月)
子テーブルを親テーブルにアタッチする際にプロパティが検証されます。
Hologres V1.1.42 以降では、子テーブルを親テーブルにアタッチするリクエストを開始した後、子テーブルと親テーブルのプロパティが厳密に検証されます。子テーブルのプロパティが親テーブルのプロパティと一致しない場合、エラーが報告され、アタッチ操作は失敗します。システムが検証するプロパティには、プライマリキー、インデックス、および非 NULL 制約が含まれます。子テーブルを作成する前に、子テーブルのプロパティが親テーブルのプロパティと一致していることを確認してください。詳細については、「CREATE PARTITION TABLE」をご参照ください。
次のサンプルコードは、子テーブルのクラスタリングキーが親テーブルのクラスタリングキーと一致しないシナリオの例を示しています。この場合、子テーブルは親テーブルにアタッチできません。
-- この例では、次のデータ定義言語 (DDL) ステートメントを実行して、親テーブルと子テーブルを作成します。
BEGIN;
CREATE TABLE public.hologres_parent(
a INT,
b text NOT NULL,
c timestamptz NOT NULL,
ds text,
PRIMARY KEY(a,ds)
)
PARTITION BY LIST(ds);
CALL set_table_property('public.hologres_parent', 'orientation', 'column');
CALL set_table_property('public.hologres_parent', 'distribution_key', 'a');
CALL set_table_property('public.hologres_parent', 'clustering_key', 'b');
CALL set_table_property('public.hologres_parent', 'event_time_column', 'c');
CREATE TABLE public.hologres_child PARTITION OF public.hologres_parent
FOR VALUES IN('20201103');
COMMIT;
-- 一時的な子パーティションテーブルを作成します。
BEGIN;
CREATE TABLE IF NOT EXISTS public.tmp_hologres_child(
a INT,
b text NOT NULL,
c timestamptz NOT NULL,
ds text,
PRIMARY KEY (a,ds)
);
CALL set_table_property('public.tmp_hologres_child', 'orientation', 'column');
CALL set_table_property('public.tmp_hologres_child', 'distribution_key', 'a');
CALL set_table_property('public.tmp_hologres_child', 'clustering_key', 'a,b');
CALL set_table_property('public.tmp_hologres_child', 'event_time_column', 'c');
COMMIT;
-- 外部テーブルから一時的な子パーティションテーブルにデータをインポートします。
INSERT INTO public.tmp_hologres_child SELECT * FROM foreign_table WHERE ds='20201103';
-- 元の子パーティションテーブルをドロップし、一時的な子パーティションテーブルを親テーブルに関連付けます。
BEGIN;
DROP TABLE IF EXISTS public.hologres_child;
ALTER TABLE public.tmp_hologres_child RENAME TO hologres_child;
ALTER TABLE public.hologres_parent ATTACH PARTITION public.hologres_child
FOR VALUES IN ('20201103');
COMMIT ;
-- エラーの原因
ERROR:
partition index hologres_child's immutable properties(e.g. clustering_key, event_time_column) is consistent with parent.
Hint: create partition with [create table ... partition of ...] to be consistent with parent.
V1.1 (2021年12月)
新しい Hologres インスタンスのパブリックエンドポイントはデフォルトで無効になっています。
データアクセス制御のセキュリティ要件を満たすため、2021年12月7日 00:00:00 から、新しい Hologres インスタンスのパブリックエンドポイントは自動的に無効になり、デフォルトではインターネットアクセス機能は提供されません。パブリックエンドポイントを使用して Hologres インスタンスに接続する場合は、Hologres コンソールでパブリックエンドポイントを有効にできます。
V1.1 (2021年11月)
コンピューティングに使用される最大メモリは、ノードあたり 20 GB に制限されなくなりました。
Hologres V1.1.24 以降では、ワーカーノードのノードあたり 20 GB の制限が撤廃されました。コンピューティング用のメモリは、ノードの使用状況に基づいて動的に割り当てられ、クエリの成功を保証します。有効な実行計画にもかかわらず V1.1.24 以降でメモリ不足エラーが発生した場合は、SQL ステートメントを最適化するか、インスタンスをスケールアップしてください。
Hologres インスタンスのバックエンドは複数のノードで構成されています。Hologres インスタンスに含まれるノードの数は、インスタンスの仕様によって異なります。単一ノードの最大メモリは 64 GB です。ノードのメモリは、コンピューティング、キャッシュ、メタデータ、および常駐プロセスに均等に割り当てられます。
V1.1 (2021年10月)
-
デフォルトで自動 ANALYZE 機能が有効に。
V0.10 で導入され、本番環境で実績のある自動 ANALYZE は、V1.1 の新規インスタンスではデフォルトで有効になります。アップグレードされたインスタンスは既存の設定を保持します。V1.1 ではパラメーター名も変更されています。
元のパラメーター名
新しいパラメーター名
デフォルト値
hg_experimental_enable_start_auto_analyze_worker
hg_enable_start_auto_analyze_worker
on
自動 ANALYZE 機能の使用方法の詳細については、「ANALYZE と AUTO ANALYZE」をご参照ください。
-
テーブルグループに関連する関数の名前が変更されました。
V0.10 で導入され、本番環境で実績のあるリシャーディング機能は、V1.1 でテーブルグループ関数名が変更されました。
元の関数名
新しい関数名
hg_update_table_shard_count('table_name','table_group_name')
hg_move_table_to_table_group('table_name','table_group_name')
-
リシャーディング機能の使用方法の詳細については、「テーブルグループとシャードの管理」をご参照ください。
-
テーブルグループの使用方法の詳細については、「テーブルグループ設定のベストプラクティス」をご参照ください。
-
-
Hologres での MaxCompute 外部テーブルへの高速アクセスのためのエンジンが変更されました。
V0.10 で導入された新しい MaxCompute 外部テーブルエンジンは、パフォーマンスを 30% 以上向上させます。V1.1 では、このエンジンが新規インスタンスのデフォルトになります。アップグレードされたインスタンスは既存のエンジンを保持します。パラメーター名も変更されています。
元のパラメーター名
新しいパラメーター名
備考
hg_experimental_enable_access_odps_orc_via_holo
hg_enable_access_odps_orc_via_holo
デフォルト値:on。
hg_experimental_foreign_table_executor_max_dop
hg_foreign_table_executor_max_dop
デフォルト値はインスタンスの CPU コア数に変更されました。最大値は 128 です。
なし
hg_foreign_table_executor_dml_max_dop
このパラメーターは Hologres V1.1 で追加されました。デフォルト値は 32 です。このパラメーターは、外部テーブルに関連する DML ステートメントに適用されます。
hg_experimental_foreign_table_split_size
hg_foreign_table_split_size
デフォルト値:64。単位:MB。
hg_experimental_foreign_table_max_partition_limit
hg_foreign_table_max_partition_limit
デフォルト値は 512 です。この値は、クエリで最大 512 のパーティションをスキャンできることを示します。
hg_experimental_enable_write_maxcompute
なし
Hologres V1.1 では、デフォルト値は on です。値 on は、データを MaxCompute に書き戻すことができることを示します。詳細については、「MaxCompute へのデータのエクスポート」をご参照ください。
パラメーターの詳細については、「MaxCompute クエリの高速化」をご参照ください。
-
pg_stat_activity テーブルは、すべてのフロントエンドノードのアクティブな接続のステータスを記録します。
V1.1 より前のバージョンでは、pg_stat_activity は単一の FE ノードのアクティブな接続のみを記録していました。V1.1 では、すべての FE ノードをカバーします。pg_stat_activity テーブルを使用してアクティブなクエリを管理する方法の詳細については、「クエリの管理」をご参照ください。
-
接続管理メカニズムが調整されました。
Hologres V1.1 以降では、スーパーユーザー用に接続が予約され、HoloWeb 接続プールロジックが最適化されています。スーパーユーザーは、接続制限を超えた場合に HoloWeb を使用して接続を管理または解放できます。詳細については、「接続の管理」をご参照ください。
-
idle_in_transaction_session_timeout パラメーターのデフォルト値が変更されました。
idle_in_transaction_session_timeoutパラメーターは、アイドル状態のトランザクションのタイムアウトを指定します。この設定がないと、タイムアウトしたトランザクションはロールバックされず、デッドロックのリスクがあります。V1.1 では、idle_in_transaction_session_timeoutのデフォルトは 10 分です。詳細については、「クエリの管理」をご参照ください。