E-MapReduce:コンソール リリースノート

カテゴリ

説明

インスタンス管理

• 新機能：

  • アベイラビリティーゾーンをまたいでコンピュートグループを作成できるようになりました。

  • AI センターが、Qwen 3.5-plus および Qwen 3.6-plus モデルをサポートするようになりました。

  • AI センターにトークン使用量統計が表示されるようになりました。

StarRocks Manager

• 機能強化：

  • きめ細かなアクセス制御により、ユーザーのクエリ結果ダウンロード権限を管理できるようになりました。

カテゴリ

説明

インスタンス管理

• 新機能：

  • コンパクションサービスでクロスゾーンデプロイが可能になりました。

  • mem-limit パラメーターの上限を設定できるようになりました。

  • モニタリングとアラート：

    • カスタムモニタリングシナリオ向けに、生のモニタリングメトリクスデータを SLS に配信できるようになりました。

    • マテリアライズドビューが無効または非アクティブになった場合のアラートを設定できるようになりました。

• 機能強化：

  • アラートルールの設定にインスタンス名が含まれるようになり、アラートの発生源を特定しやすくなりました。

  • 自動スケーリングのロジックを改善し、頻繁なスケーリング操作によってスケーリングが停滞する問題を防ぐようになりました。

カテゴリ

説明

インスタンス管理

• 新機能：

  • コンパクション用の柔軟で分離されたサービスであるコンパクションサービス (StarRocks 3.5 のみ) を導入しました。この機能はベータテスト中です。

  • モニタリングとアラート：

    • カスタムモニタリングのシナリオ用に、RAW モニタリングメトリクスデータを SLS に配信できるようになりました。

    • マテリアライズドビューが無効または非アクティブになった場合に、アラートを設定できるようになりました。

• 機能強化：

  • ビジネスインサイト (クエリインサイト、インポートインサイト、キャッシュインサイトを含む) のコンテンツ構成を見直し、最適化しました。詳細については、該当ドキュメントをご参照ください。

  • インスタンスの [All Operations] メニューを最適化しました。

StarRocks Manager

• 機能強化：

  • SQL エディターを開くと、現在のユーザーが指定したコンピュートグループがデフォルトで設定されるようになりました。

  • SQL タスクでスキャンされた行数を確認できるようになりました。

  • プロファイル生成のロジックを最適化し、一部のシナリオでプロファイル生成ができない問題を修正しました。

  • 外部テーブルのサイズおよび行数メトリクスの表示はサポートされなくなりました。この変更により、HMS などの外部メタデータサービスの安定性を保護するため、過度なスキャンを防止します。

カテゴリ

説明

インスタンス管理

• 新機能：

  • サブスクリプションから従量課金への切り替えができるようになりました。

  • 請求書でのコスト追跡のため、コンピューティンググループにタグを追加できるようになりました。

  • [All Operations] を使用して、すべてのインスタンスに対して一度に操作を実行できるようになりました。

  • インスタンス作成時に、インスタンスを DLF に関連付けできるようになりました。

  • AI 関数のベータ版が利用可能になりました。

  • Ranger でコンピューティンググループの権限を管理できるようになりました。

• 機能強化：

  • ソフトウェアスタックの重大な欠陥に対するアップグレードを、強調表示されたアラートとイベント通知で推奨します。

  • ヘルス診断の [Diagnosis Daily Report] に、プライマリキーテーブルのインデックスの永続化が有効か、インデックスタイプが cloud_native か、バケットサイズが 5 GB 未満かを検証する新しいチェックが追加されました。

  • スケールアウトおよびスケールアップ操作のインベントリの事前チェックを追加しました。

  • リアルタイム診断が、コンピューティンググループによるフィルタリングに対応しました。

  • スケーリングイベントの進行中に、スケーリングポリシーを変更できるようになりました。

• 不具合の修正：

  • システムディスクが満杯になる可能性がある問題を修正しました。

  • 存算分離インスタンスのモニタリングにおけるコンパクショングループビューから、無効なチャートを削除しました。

StarRocks Manager

• 新機能：

  • ユーザーを RAM ロールに関連付けて、DLF の RAM ロールベースの権限を使用できるようになりました。

• 機能強化：

  • [SQL タスク] > [Running Tasks] で、複数のタスクを一度に終了し、フィールドでタスクをソートできるようになりました。

  • [インポートタスク] ページがフィルタリングに対応し、タスク期間フィールドが追加されました。

Feature category

Description

Instance management

• New features:

  • The Event Center now integrates with Cloud Monitor (CMS), letting you view all StarRocks cluster events from a single location.

  • You can now use alert templates to apply basic alert configurations with a single click.

  • New Cloud Monitor metrics are now available for alert configurations, including query, transaction, database lock, node status, FE memory, and MV.

  • The new health diagnosis daily report automatically assesses your instances' health. It provides evaluations, repair suggestions, and optimization best practices for resource configuration, query tasks, import tasks, compaction, table analysis, and cache analysis.

  • You can now collect and export cost statistics by the instance and compute group dimensions.

  • The Terraform Provider now supports elastic scaling for StarRocks clusters.

  • Partial graceful shutdown is now supported when scaling in cloud-native clusters. By default, the system waits 30 seconds after adding a node to the denylist before scaling in.

  • When scaling in an all-in-one cluster, you can now select and decommission multiple BE/CN nodes in parallel. This operation carries a high risk.

  • BE nodes now expose port 9060 to enable public network access from Spark to StarRocks instances.

• Feature optimizations:

  • You can now modify the emr_internal_redirect parameter online in the console. This allows Stream Load to use V2 and avoid SLB streaming.

• Bug fixes:

  • Fixed an issue where the system disk would become full.

  • Removed invalid charts from the compaction group in the monitoring section for cloud-native instances.

StarRocks Manager

• Feature optimization:

  • Improved task status reporting to correctly reflect successful completion and prevent false timeout errors.

• Bug fix:

  • Fixed an issue where successfully executed queries were sometimes reported as failed. For example, adding LIMIT 100 to the query SQL would return results and show a normal task status.

Documentation

• Published the Critical bug notifications document.

• Published the Version lifecycle policy document.

• Added three parameters to the Usage limits document to restrict modifications during the table design stage.

機能カテゴリ

説明

インスタンス管理

• 新機能：

  • イベントセンター機能が一般提供となりました。ECS や OSS などのサービスからの基盤イベントを通知します。

  • コンピューティング・ストレージ分離インスタンスでエラスティックエフェメラルディスクが利用できるようになりました。この機能はベータ版であり、特定のリージョンとゾーンでのみ利用可能です。

  • コンピューティング・ストレージ分離インスタンスのコンピューティンググループで、クラウドディスクをスケールインできるようになりました。

  • コンピューティング・ストレージ分離インスタンスで、マルチゾーン災害復旧機能が一般提供となりました。

  • 新しいヘルス診断機能が利用可能になりました。既存のリアルタイム診断モジュールに加えて、現在ベータ版の新しい診断デイリー機能が追加されました。診断デイリーは、直感的なヘルススコア、さまざまなディメンションでの評価結果、推奨アクション、ベストプラクティスを提供します。

  • インスタンスの作成時に SLB とスタンドアロンエージェントを有効にできるようになりました。

  • EMR StarRocks API でインスタンスリストをクエリできるようになりました。

• 機能強化：

  • Auto Scaling で複数のスケーリングポリシーを利用できるようになりました。

  • ヘルスレポート機能が「ビジネスインサイト」に名称変更されました。この機能は、データガバナンスとビジネス管理に役立つ多次元レポートを提供します。

  • ビジネスインサイトに新しいレポート「過去 90 日間アクセスされていないテーブル」が追加されました。

  • ログクエリで特定のログファイルを選択して配信できるようになり、SLS コストを削減できます。

  • デフォルトの JAVA_OPTS パラメーターを最適化しました。

  • 再起動プロセスを最適化しました。

  • リアルタイム診断での CPU とメモリ消費のデータソースを最適化しました。

  • リアルタイム診断ページのユーザーエクスペリエンスを改善しました。

  • 複数のモニタリングダッシュボードを最適化し、新しいモニタリングメトリクスを追加しました。

  • インスタンスの作成時に vSwitch とゾーンを選択する際のユーザーエクスペリエンスを改善しました。

  • アラート監視でクイック時間範囲選択を利用できるようになりました。

• バグ修正：

  • FE ディスクが満杯になる可能性がある問題を修正しました。

  • インスタンス削除プロセスがブロックされる可能性がある問題を修正しました。

StarRocks マネージャー

• 新機能：

  • SQL エディターに 1 TB TPC-H および TPC-DS テストテンプレートを追加しました。

• 機能強化：

  • ユーザーの作成時にユーザープロパティを設定できるようになりました。

  • 既存の StarRocks ユーザーを RAM ユーザーに関連付けて、DLF との権限統合を有効にできるようになりました。

  • 監査ログで SQL フィンガープリント機能を利用できるようになりました。

• バグ修正：

  • SQL タスクリストページでブラウザが時折スタッターする問題を修正しました。

機能カテゴリ

説明

インスタンス管理

• [コンピューティング拡張型] CU タイプを追加しました。vCPU とメモリの比率が 1:2 で、CPU 負荷の高いワークロードに最適です。この機能は、ホワイトリストユーザーのみご利用いただけます。

• Terraform を使用してインスタンスを作成できるようになりました。

機能カテゴリ

説明

インスタンス管理

• 新機能：

  • ストレージとコンピューティングの統合インスタンスで、セキュリティを強化するためにクラウドディスクの暗号化と Secure Sockets Layer (SSL) 暗号化を使用できるようになりました。

  • FE ノードでメモリ強化型インスタンスファミリーがサポートされるようになりました。これは FE のメモリ使用量が多いシナリオに最適です。

  • ストレージとコンピューティングの統合インスタンスで高速再起動がサポートされるようになりました。

  • StarRocks インスタンスのカスタムエンドポイントにアクセスするためのカスタムドメイン名が設定可能になりました。

  • サブスクリプションインスタンスでは、従量課金のコンピューティンググループをサブスクリプションモデルに変換できるようになりました。

  • インスタンス購入時にクーポンを適用できるようになりました。

• 機能の最適化：

  • インスタンス購入ページのユーザーエクスペリエンスを改善しました。

  • パラメータ設定における各ソフトウェアスタックバージョンの設定項目の表示を改善しました。

  • コンソールの Monitoring and Alerting > アラートの設定 タブで、CloudMonitor で設定された新しいアラートルールを表示できるようになりました。

  • Apache Ranger で StarRocks を管理できるようになりました。

  • コンピューティンググループに説明を追加できるようになりました。

  • Instance Details ページにカーネルリリースバージョンへのリンクが追加されました。

  • 監視メトリクスの追加：

    • FE ノードのメモリ使用量を表示できるようになりました。

    • BE ノードの平均 CPU、メモリ、ディスク使用率の履歴トレンドを表示できるようになりました。

StarRocks Manager

• 新機能：

  SQL エディターのクエリ結果に、対応するデータ型が含まれるようになり、NULL 値もサポートされるようになりました。

• 機能の最適化：

  • SQL エディターでの SQL ステートメントの実行に関するドキュメントを提供しました。セミコロン (;) を含むステートメントの場合、区切り文字として $$ を追加する必要があります。

  • ストレージとコンピューティングの統合インスタンスにおける非同期マテリアライズドビュータスクのランタイム終了時刻の表示を改善しました。

  • Manager の Overview ページのコンテンツを、より分かりやすく改善しました。

• バグ修正：

  メタデータ管理の最適化：Paimon Catalog がデータの読み込みまたは表示に失敗することがある問題を修正しました。

機能カテゴリ

説明

インスタンス管理

• 新機能：

  • タスク例外のトラブルシューティングのために、詳細なインスタンスログを照会できるようになりました。

  • ゲートウェイ管理を使用して FE ノードをグループ化して分離し、リーダーノードを書き込み操作に制限できるようになりました。また、 SLB 負荷分散を有効にして、インスタンスの安定性を向上できます。

  • インスタンスに 3 つを超えるノードがある場合、FE ノードをスケールインできるようになりました。

  • Instance Details ページから移行トークンを取得できます。

  • 日本 (東京) リージョンが利用可能になりました。

• 機能強化：

  • インスタンスアップグレード時の再起動通知を強化しました。

  • リアルタイム診断ページのユーザーエクスペリエンスを改善しました。

  • インスタンス作成時に最新のマイナーバージョンが表示されるようになりました。

  • Kerberos と Ranger の設定を追加しました。

  • モニタリングチャートのユーザーエクスペリエンスを向上させました。

  • コンソールの概要ページを改善しました。

  • 即座に再起動せずに設定変更を適用し、後で他の操作と組み合わせて再起動することで、サービス停止時間を削減できるようになりました。

StarRocks Manager

• Catalogs ページの メタデータ管理 エリア内で検索できます。

• 現在のインスタンスに影響を及ぼすことなく、SQL クエリ履歴のパフォーマンスを向上させました。

• ユーザーページに検索ボックスが追加され、ユーザーをすばやく見つけられます。

• インポートタスクフィルターのユーザーエクスペリエンスを向上させました。

• クエリ詳細ページのコンテンツ表示を改善しました。

• SQL エディターのユーザーエクスペリエンスを向上させました。

機能カテゴリ

説明

インスタンス操作

• 新機能：

  • 多様なパフォーマンス要件に対応するため、メモリ強化 (RCU) やネットワーク強化 (NCU) を含む新しい CU タイプをサポートするようになりました。

  • 設定変更の適用やインスタンスのスケーリングなど、再起動が必要な操作で高速再起動を使用するようになりました。

  • 管理者ユーザーのパスワードをリセットできるようになりました。

  • 共有データインスタンスが 1 つの CN ノードをサポートするようになりました。

• 機能強化：

  • リアルタイム診断とヘルスレポートを改善しました。

  • バージョンアップグレードプロセスを最適化しました。

  • 監視およびアラートメトリクスを最適化しました：

    • FE ディスクメトリクスやコンピュートノード IOUtil など、新しい監視メトリクスに対応しました。

    • ストレージ関連のメトリクスを専用のストレージタブに移動しました。

StarRocks Manager

• 新機能：

  • メタデータ管理：テーブル、データベース、マテリアライズドビューを視覚的に作成し、マテリアライズドビューの情報を表示できるようになりました。

  • セキュリティセンター：ロールベースのアクセス制御 (RBAC) を使用して、ユーザー、ロール、権限を視覚的に管理できるようになりました。

  • SQL エディター：LIMIT 句を設定できるようになりました。

• 機能強化：

  • SQL エディターのユーザーエクスペリエンスを改善しました。

  • SQL プロファイルの表示を最適化しました。

  • メタデータ管理におけるテーブルのソートと検索を改善しました。

機能カテゴリ

説明

コントロールプラットフォームの機能

• Shared-nothing インスタンスがバックアップと復元 (パブリックプレビュー) に対応するようになりました。

• タイムゾーンを変更できるようになりました。

• ヘルスレポート機能の強化：

  • キャッシュ解析レポートが利用可能になりました。

  • SQL クエリ解析に クエリレイテンシー P99 および DB ロック メトリクスが追加されました。

• SQL プロファイルに「Top 10 by Time」および「Top 10 by Memory」セクションが追加されました。

• スロークエリログに CPU とメモリの使用量フィールドが追加されました。

機能カテゴリ

更新の説明

コントロールプラットフォームの機能

• Alibaba Cloud のリソースグループとタグを使用してインスタンスを管理できるようになりました。

• StarRocks Manager でマテリアライズドビューとそのタスク情報を表示できるようになりました。

• StarRocks Manager の SQL エディターで、すぐに使える TPC-DS および TPC-H テストスクリプトを直接実行できるようになりました。

• StarRocks Manager の Import Tasks または SQL タスク で、INSERT INTO タスクのレコードと詳細を直接表示できるようになりました。

• 機能強化：

  • プロファイルのメトリクスが強化されました。

  • ディスク領域不足の通知が改善されました。

機能カテゴリ

説明

コントロールプラットフォームの機能

• インスタンスが、スケジュールに基づく自動スケーリングをサポートするようになりました。この機能は現在、従量課金インスタンスに限定されます。

• 新しい監視メトリクスを追加し、監視レポートを最適化しました。

StarRocks Manager の機能強化

• SQL プロファイルが、SQL クエリを分析および最適化するための診断提案カードをサポートするようになりました。

• 構文エラーにより失敗したクエリが、すべてのクエリビューに表示されるようになりました。

操作性の改善

• 購入ワークフローのユーザープロンプトを改善しました。

• ヘルスレポートページのクエリ ID リンクとそのテキストを改善しました。

• SQL プロファイルインターフェースのテキストを改善しました。

• SQL エディターのパフォーマンスを改善しました。

機能カテゴリ

説明

コントロールプラットフォームの機能

• シェアードナッシング、Data Lake Analytics Edition、シェアードデータという 3 つの新しいインスタンスタイプのサポートを追加しました。

• SQL クエリ分析、テーブル分析、インポートタスク分析のサポートを追加して診断分析を強化し、問題のあるタスクやデータを迅速に特定できるようになりました。

• インスタンス設定ページのユーザーエクスペリエンスを改善しました。

機能カテゴリ

説明

コンピューティングとストレージの分離

• メタデータ管理で、データベース、テーブル、パーティション、キャッシュが表示されるようになりました。

• クエリプロファイルに、キャッシュヒット分析メトリクスが含まれるようになりました。

データレイク分析

• メタデータ管理で、外部カタログの外部テーブルに関する情報が表示されるようになりました。

• OSS のパスワードレスアクセスを設定できるようになりました。

コントロールプラットフォームの機能強化

• パフォーマンスレベルのアップグレードを含め、クラウドディスクの設定を変更できるようになりました。

• ブロック数を増やすことで、クラウドディスクの設定をアップグレードできるようになりました。

• インスタンスの作成時に、クラウドディスクのブロック数を調整できるようになりました。

• デフォルトの設定項目を最適化しました。

• 監視機能で、ホットスポット監視メトリクスをクエリできるようになりました。

• 操作タスクに操作詳細が表示されるようになりました。

• 監査ログを有効にする際に、確認プロンプトが表示されるようになりました。

StarRocks Manager の機能強化

• StarRocks Manager の接続とサインインのエクスペリエンスを改善しました。

• StarRocks Manager がライトテーマとダークテーマをサポートするようになりました。

• ユーザー管理機能に、Description フィールドが含まれるようになりました。

リージョン

中国 (張家口) リージョンが利用可能になりました。