E-MapReduce:Console release notes

Catégorie

Description

StarRocks AI

• Ajout de fonctionnalités de surveillance des modèles. Vous pouvez consulter la consommation de jetons par modèle ou par instance, et définir des limites d'utilisation mensuelles ou par minute au niveau du modèle.

• Prise en charge ajoutée pour les modèles qwen3,8-flash et qwen3,7-flash dans les ressources de modèles gérés.

• Ajout de la possibilité de consulter les informations d'endpoint pour les services externes AI.

Gestion

• L'API CreateInstance prend désormais en charge le paramètre auto-payment.

StarRocks Manager

• Ajout d'une liste de tâches AI dans les détails des tâches SQL, affichant les détails des jetons, la latence et le taux de succès du cache.

• Ajout de la possibilité d'associer les utilisateurs StarRocks à l'utilisateur RAM ou au rôle Alibaba Cloud de la session de connexion actuelle.

Catégorie

Description

StarRocks AI

• Les ressources de modèles gérés incluent désormais les modèles qwen3,7, glm et deepseek, ainsi que les modèles fun-asr, happyhorse et wan.

• Une nouvelle page AI-Native regroupe les fonctionnalités AI de StarRocks en un seul endroit, offrant des guides de démarrage rapide et des exemples basés sur des scénarios pour AI Function et la récupération multimodale.

• La page de création d'instance inclut désormais une section Fonctionnalités AI, vous permettant d'activer AI Function et l'assistant EMR AI lors de la création d'une instance.

StarRocks Manager

• SQL Editor propose désormais des modèles SQL d'exemple basés sur des scénarios pour AI Function.

Catégorie

Description

Gestion des instances

• L'API CreateInstanceV1 prend désormais en charge la clé de condition RAM, vous permettant d'imposer le chiffrement des disques de données (Encrypted=true) pour la conformité de sécurité.

• La répartition des coûts basée sur les tags est désormais prise en charge.

• Le module Query Insight inclut désormais les métriques de consommation totale de CPU et de mémoire.

• La surveillance IO multi-disques par nœud est désormais disponible, avec prise en charge de l'exportation des métriques vers Cloud Monitor Prometheus.

StarRocks Manager

• Vous pouvez désormais créer un catalogue Fluss via l'interface visuelle.

Catégorie

Description

Gestion des instances

• Nouvelles fonctionnalités :

  • Vous pouvez désormais créer des groupes de calcul sur plusieurs zones de disponibilité.

  • AI Center prend désormais en charge les modèles Qwen 3.5-plus et Qwen 3.6-plus.

  • AI Center affiche désormais les statistiques d'utilisation des jetons.

StarRocks Manager

• Améliorations :

  • Le contrôle d'accès granulaire vous permet désormais de gérer les autorisations des utilisateurs pour le téléchargement des résultats de requête.

Catégorie

Description

Gestion des instances

• Nouvelles fonctionnalités :

  • Compaction Service prend désormais en charge le déploiement inter-zones.

  • Vous pouvez désormais définir une limite supérieure pour le paramètre mem-limit.

  • Surveillance et alertes :

    • Vous pouvez désormais transmettre les données brutes des métriques de surveillance à SLS pour des scénarios de surveillance personnalisés.

    • Vous pouvez désormais configurer des alertes lorsqu'une vue matérialisée devient invalide ou inactive.

• Améliorations :

  • Les configurations de règles d'alerte incluent désormais le nom de l'instance pour aider à identifier les sources d'alerte.

  • Amélioration de la logique de mise à l'échelle automatique pour éviter que des opérations de mise à l'échelle fréquentes ne bloquent le processus.

Catégorie

Description

Gestion des instances

• Nouvelles fonctionnalités :

  • Introduction de Compaction Service (pour StarRocks 3.5 uniquement), un service flexible et isolé pour la compaction. Cette fonctionnalité est en test bêta.

  • Surveillance et alertes :

    • Vous pouvez désormais transmettre les données brutes des métriques de surveillance à SLS pour des scénarios de surveillance personnalisés.

    • Vous pouvez désormais configurer des alertes lorsqu'une vue matérialisée devient invalide ou inactive.

• Améliorations :

  • Le contenu des insights métier (y compris les insights de requête, d'importation et de cache) a été restructuré et optimisé. Pour plus de détails, consultez la documentation correspondante.

  • Le menu Toutes les opérations pour les instances est désormais optimisé.

StarRocks Manager

• Améliorations :

  • SQL Editor utilise désormais par défaut le groupe de calcul spécifié par l'utilisateur actuel lors de son ouverture.

  • Vous pouvez désormais afficher le nombre de lignes analysées dans une tâche SQL.

  • La logique de génération de Profile a été optimisée pour corriger les problèmes empêchant la génération de Profile dans certains scénarios.

  • La consultation des métriques de taille et de nombre de lignes pour les tables externes n'est plus prise en charge. Ce changement empêche une analyse agressive afin de protéger la stabilité des services de métadonnées externes, tels que HMS.

Catégorie

Description

Gestion des instances

• Nouvelles fonctionnalités :

  • Vous pouvez désormais passer de l'abonnement au paiement à l'utilisation.

  • Vous pouvez désormais ajouter des tags aux groupes de calcul pour suivre leurs coûts dans vos factures.

  • Vous pouvez désormais utiliser Toutes les opérations pour agir sur toutes les instances simultanément.

  • Vous pouvez désormais associer une instance à DLF lors de la création de l'instance.

  • AI Function est désormais disponible en version bêta.

  • Vous pouvez désormais gérer les autorisations pour les groupes de calcul dans Ranger.

• Améliorations :

  • Le système recommande désormais les mises à niveau pour les défauts critiques de la pile logicielle, via des alertes mises en évidence et des notifications d'événements.

  • Le rapport quotidien de diagnostic sous diagnostic de santé inclut désormais de nouvelles vérifications qui confirment si la persistance de l'index pour les tables à clé primaire est activée, si le type d'index est cloud_native et si la taille du bucket est inférieure à 5 Go.

  • Ajout d'une pré-vérification de l'inventaire pour les opérations de mise à l'échelle horizontale et verticale.

  • Diagnostic en temps réel prend désormais en charge le filtrage par groupe de calcul.

  • Vous pouvez désormais modifier une politique de mise à l'échelle pendant qu'un événement de mise à l'échelle est en cours.

• Problèmes résolus :

  • Correction d'un problème pouvant entraîner le remplissage du disque système.

  • Suppression d'un graphique invalide de la vue du groupe de compaction dans la surveillance pour les instances à séparation stockage-calcul.

StarRocks Manager

• Nouvelles fonctionnalités :

  • Vous pouvez désormais associer des utilisateurs à un rôle RAM pour utiliser les autorisations basées sur les rôles RAM de DLF.

• Améliorations :

  • Dans Tâches SQL > Tâches en cours d'exécution, vous pouvez désormais terminer plusieurs tâches à la fois et trier les tâches par champ.

  • La page Tâches d'importation prend désormais en charge le filtrage et inclut un champ de durée de tâche.

Catégorie de fonctionnalité

Description

Gestion des instances

• Nouvelles fonctionnalités :

  • Le centre d'événements s'intègre désormais à Cloud Monitor (CMS), vous permettant de consulter tous les événements du cluster StarRocks depuis un emplacement unique.

  • Vous pouvez désormais utiliser des modèles d'alerte pour appliquer des configurations d'alerte de base en un seul clic.

  • De nouvelles métriques Cloud Monitor sont désormais disponibles pour les configurations d'alerte, y compris les requêtes, les transactions, les verrous de base de données, l'état des nœuds, la mémoire FE et MV.

  • Le nouveau rapport quotidien de diagnostic de santé évalue automatiquement l'état de vos instances. Il fournit des évaluations, des suggestions de réparation et des meilleures pratiques d'optimisation pour la configuration des ressources, les tâches de requête, les tâches d'importation, la compaction, l'analyse des tables et l'analyse du cache.

  • Vous pouvez désormais collecter et exporter des statistiques de coûts selon les dimensions de l'instance et du groupe de calcul.

  • Terraform Provider prend désormais en charge la mise à l'échelle élastique pour les clusters StarRocks.

  • L'arrêt partiel gracieux est désormais pris en charge lors de la réduction de la capacité des clusters cloud-native. Par défaut, le système attend 30 secondes après l'ajout d'un nœud à la liste de refus avant de réduire la capacité.

  • Lors de la réduction de la capacité d'un cluster tout-en-un, vous pouvez désormais sélectionner et mettre hors service plusieurs nœuds BE/CN en parallèle. Cette opération présente un risque élevé.

  • Les nœuds BE exposent désormais le port 9060 pour permettre l'accès au réseau public depuis Spark vers les instances StarRocks.

• Optimisations des fonctionnalités :

  • Vous pouvez désormais modifier le paramètre emr_internal_redirect en ligne dans la console. Cela permet à Stream Load d'utiliser V2 et d'éviter le streaming SLB.

• Corrections de bugs :

  • Correction d'un problème où le disque système se remplissait.

  • Suppression des graphiques invalides du groupe de compaction dans la section de surveillance pour les instances cloud-native.

StarRocks Manager

• Optimisation des fonctionnalités :

  • Amélioration du reporting de l'état des tâches pour refléter correctement l'achèvement réussi et prévenir les erreurs de délai d'attente fausses.

• Correction de bug :

  • Correction d'un problème où les requêtes exécutées avec succès étaient parfois signalées comme ayant échoué. Par exemple, l'ajout de LIMIT 100 au SQL de la requête renvoyait des résultats et affichait un état de tâche normal.

Documentation

• Publication du document Notifications de bugs critiques.

• Publication du document Politique de cycle de vie des versions.

• Ajout de trois paramètres au document Limites d'utilisation pour restreindre les modifications lors de la phase de conception de table.

Catégorie de fonctionnalité

Description

Gestion des instances

• Nouvelles fonctionnalités :

  • La fonctionnalité Centre d'événements est désormais généralement disponible. Elle fournit des notifications pour les événements sous-jacents provenant de services tels que ECS et OSS.

  • Les disques éphémères élastiques sont désormais pris en charge pour les instances à séparation calcul-stockage. Cette fonctionnalité est en version bêta et disponible uniquement dans certaines régions et zones.

  • Vous pouvez désormais réduire la capacité des disques cloud pour les groupes de calcul dans les instances à séparation calcul-stockage.

  • La fonctionnalité de reprise après sinistre multi-zone est désormais généralement disponible pour les instances à séparation calcul-stockage.

  • La nouvelle fonctionnalité Diagnostic de santé est désormais disponible. Elle inclut le module existant Diagnostic en temps réel et ajoute la nouvelle fonctionnalité Diagnostic quotidien, actuellement en version bêta. Diagnostic quotidien fournit un score de santé intuitif, ainsi que des résultats d'évaluation, des actions recommandées et des meilleures pratiques pour diverses dimensions.

  • Vous pouvez désormais activer SLB et un agent autonome lors de la création d'une instance.

  • L'API EMR StarRocks prend désormais en charge la requête d'une liste d'instances.

• Améliorations :

  • Auto Scaling prend désormais en charge plusieurs politiques de mise à l'échelle.

  • La fonctionnalité Rapport de santé a été renommée Business Insight. Cette fonctionnalité fournit des rapports multidimensionnels pour soutenir la gouvernance des données et l'administration métier.

  • Un nouveau rapport, « Tables non consultées au cours des 90 derniers jours », a été ajouté à Business Insight.

  • La requête de journal vous permet désormais de sélectionner des fichiers journaux spécifiques pour la livraison afin de réduire les coûts SLS.

  • Optimisation des paramètres JAVA_OPTS par défaut.

  • Optimisation du processus de redémarrage.

  • Optimisation des sources de données pour la consommation de CPU et de mémoire dans Diagnostic en temps réel.

  • Amélioration de l'expérience utilisateur sur la page Diagnostic en temps réel.

  • Optimisation de plusieurs tableaux de bord de surveillance et ajout de nouvelles métriques de surveillance.

  • Amélioration de l'expérience utilisateur pour la sélection des vSwitches et des zones lors de la création d'une instance.

  • Surveillance des alertes prend désormais en charge la sélection rapide de la plage de temps.

• Corrections de bugs :

  • Correction d'un problème où les disques FE pouvaient se remplir.

  • Correction d'un problème pouvant bloquer le processus de suppression d'instance.

StarRocks Manager

• Nouvelles fonctionnalités :

  • Ajout de modèles de test TPC-H et TPC-DS de 1 To à SQL Editor.

• Améliorations :

  • Vous pouvez désormais définir les propriétés de l'utilisateur lors de la création d'un utilisateur.

  • Vous pouvez désormais associer des utilisateurs StarRocks existants à des utilisateurs RAM pour activer l'intégration des autorisations avec DLF.

  • Les journaux d'audit prennent désormais en charge la fonctionnalité d'empreinte SQL.

• Corrections de bugs :

  • Correction d'un problème où le navigateur pouvait parfois ralentir sur la page de liste des tâches SQL.

Catégorie de fonctionnalité

Description

Gestion des instances

• Ajout du type d'UC Compute enhanced. Avec un ratio vCPU/mémoire de 1:2, il est idéal pour les charges de travail à forte utilisation de CPU. Cette fonctionnalité est disponible uniquement pour les utilisateurs sur liste d'autorisation.

• Vous pouvez désormais créer des instances à l'aide de Terraform.

Catégorie de fonctionnalité

Description

Gestion des instances

• Nouvelles fonctionnalités :

  • Vous pouvez désormais utiliser le chiffrement des disques cloud et le chiffrement SSL (Secure Sockets Layer) sur les instances de stockage et de calcul intégrés pour renforcer la sécurité.

  • Les nœuds FE prennent désormais en charge la famille d'instances optimisées pour la mémoire, idéale pour les scénarios nécessitant une utilisation élevée de la mémoire FE.

  • Les instances de stockage et de calcul intégrés prennent désormais en charge le redémarrage rapide.

  • Configurez un nom de domaine personnalisé pour une instance StarRocks afin d'accéder à son endpoint personnalisé.

  • Pour les instances par abonnement, convertissez désormais les groupes de calcul en paiement à l'utilisation vers le modèle d'abonnement.

  • Appliquez des coupons de réduction lors de l'achat d'instances.

• Optimisations des fonctionnalités :

  • Amélioration de l'expérience utilisateur sur la page d'achat d'instance.

  • Affichage amélioré des éléments de configuration pour chaque version de pile logicielle dans les paramètres.

  • Consultez les nouvelles règles d'alerte configurées dans CloudMonitor sous l'onglet Monitoring and Alerting > Alert Settings de la console.

  • Gérez StarRocks avec Apache Ranger.

  • Ajoutez des descriptions aux groupes de calcul.

  • La page Instance Details inclut désormais un lien vers la version de publication du noyau.

  • Métriques de surveillance supplémentaires :

    • Consultez l'utilisation de la mémoire des nœuds FE.

    • Visualisez les tendances historiques de l'utilisation moyenne du CPU, de la mémoire et du disque des nœuds BE.

StarRocks Manager

• Nouvelle fonctionnalité :

  Les résultats des requêtes de l'éditeur SQL incluent désormais les types de données correspondants et prennent en charge les valeurs nulles.

• Optimisations des fonctionnalités :

  • Documentation fournie pour l'exécution d'instructions SQL dans l'éditeur SQL. Pour les instructions contenant un point-virgule (;), vous devez ajouter $$ comme délimiteur.

  • Affichage amélioré de l'heure de fin d'exécution pour les tâches de vue matérialisée asynchrone sur les instances de stockage et de calcul intégrés.

  • Contenu affiné sur la page Overview du Manager pour plus de clarté.

• Corrections de bugs :

  Optimisation de la gestion des métadonnées : correction d'un problème où le catalogue Paimon échouait parfois à charger ou à afficher correctement les données.

Catégorie de fonctionnalité

Description

Gestion des instances

• Nouvelles fonctionnalités :

  • Interrogez les journaux détaillés des instances pour résoudre les exceptions de tâche.

  • Utilisez la gestion de passerelle pour regrouper et isoler les nœuds FE et restreindre le nœud leader aux opérations d'écriture. Activez également l'équilibrage de charge SLB pour améliorer la stabilité de l'instance.

  • Réduisez le nombre de nœuds FE lorsque votre instance compte plus de trois nœuds.

  • Obtenez le jeton de migration depuis la page Instance Details.

  • La région Japon (Tokyo) est désormais disponible.

• Améliorations :

  • Notification de redémarrage améliorée pour les mises à niveau d'instance.

  • Expérience utilisateur affinée sur la page de diagnostic en temps réel.

  • La dernière version mineure s'affiche désormais lors de la création d'une instance.

  • Ajout de configurations pour Kerberos et Ranger.

  • Expérience utilisateur améliorée pour les graphiques de surveillance.

  • Page d'aperçu de la console améliorée.

  • Appliquez les modifications de configuration sans redémarrage immédiat et combinez le redémarrage avec d'autres opérations ultérieurement pour réduire les temps d'arrêt du service.

StarRocks Manager

• Effectuez des recherches dans la zone Catalogs de la page Metadata Management.

• Performances améliorées de l'historique des requêtes SQL sans affecter l'instance actuelle.

• La page utilisateur inclut désormais une zone de recherche pour trouver rapidement les utilisateurs.

• Expérience utilisateur améliorée du filtre de tâche d'importation.

• Affichage du contenu affiné sur la page des détails de la requête.

• Expérience utilisateur améliorée de l'éditeur SQL.

Catégorie de fonctionnalité

Description

Opérations sur les instances

• Nouvelles fonctionnalités :

  • Prise en charge de nouveaux types d'UC, notamment optimisés pour la mémoire (RCU) et optimisés pour le réseau (NCU), pour répondre à diverses exigences de performance.

  • Les opérations nécessitant un redémarrage, telles que l'application de modifications de configuration et la mise à l'échelle des instances, utilisent désormais le redémarrage rapide.

  • Réinitialisation du mot de passe pour l'utilisateur admin prise en charge.

  • Les instances à données partagées prennent désormais en charge un seul nœud CN.

• Améliorations :

  • Diagnostics en temps réel et rapports de santé améliorés.

  • Processus de mise à niveau de version optimisé.

  • Métriques de surveillance et d'alerte optimisées :

    • Ajout de la prise en charge de nouvelles métriques de surveillance, y compris les métriques de disque FE et l'IOUtil des nœuds de calcul.

    • Les métriques liées au stockage se trouvent désormais dans un onglet de stockage dédié.

StarRocks Manager

• Nouvelles fonctionnalités :

  • Gestion des métadonnées : prise en charge de la création visuelle de tables, de bases de données et de vues matérialisées, ainsi que de la consultation des informations sur les vues matérialisées.

  • Centre de sécurité : prise en charge de la gestion visuelle des utilisateurs, des rôles et des autorisations à l'aide du contrôle d'accès basé sur les rôles (RBAC).

  • Éditeur SQL : prise en charge de la configuration de la clause LIMIT.

• Améliorations :

  • Expérience utilisateur améliorée de l'éditeur SQL.

  • Affichage du profil SQL optimisé.

  • Tri et recherche améliorés pour les tables dans la gestion des métadonnées.

Catégorie de fonctionnalité

Description

Fonctionnalités de la plateforme de contrôle

• Les instances sans partage prennent désormais en charge la sauvegarde et la récupération (en aperçu public).

• Modifiez le fuseau horaire.

• Améliorations de la fonctionnalité de rapport de santé :

  • Un rapport d'analyse du cache est désormais disponible.

  • L'analyse des requêtes SQL inclut désormais les métriques Query Latency P99 et DB Lock.

• Le profil SQL inclut désormais les sections « Top 10 by Time » et « Top 10 by Memory ».

• Les journaux de requêtes lentes incluent désormais des champs pour l'utilisation du CPU et de la mémoire.

Catégorie de fonctionnalité

Description de la mise à jour

Fonctionnalités de la plateforme de contrôle

• Gérez vos instances à l'aide des groupes de ressources et des tags Alibaba Cloud.

• Consultez les vues matérialisées et leurs informations de tâche dans StarRocks Manager.

• Exécutez des scripts de test TPC-DS et TPC-H prêts à l'emploi directement dans l'éditeur SQL de StarRocks Manager.

• Consultez les enregistrements et les détails des tâches INSERT INTO directement sous Import Tasks ou SQL Tasks dans StarRocks Manager.

• Améliorations :

  • Métriques du profil améliorées.

  • Notification d'espace disque faible améliorée.

Catégorie de fonctionnalité

Description

Fonctionnalités de la plateforme de contrôle

• Les instances prennent désormais en charge la mise à l'échelle automatique basée sur un planning. Cette fonctionnalité est actuellement limitée aux instances en paiement à l'utilisation.

• Ajout de nouvelles métriques de surveillance et optimisation des rapports de surveillance.

Améliorations de StarRocks Manager

• Le profil SQL prend désormais en charge les cartes de suggestions de diagnostic pour analyser et optimiser les requêtes SQL.

• Les requêtes qui échouent en raison d'erreurs de syntaxe sont désormais affichées dans la vue Toutes les requêtes.

Améliorations de l'expérience

• Invites utilisateur améliorées dans le workflow d'achat.

• Lien QueryId et son texte améliorés sur la page du rapport de santé.

• Texte amélioré sur l'interface du profil SQL.

• Performances de l'éditeur SQL améliorées.

Catégorie de fonctionnalité

Description

Fonctionnalités de la plateforme de contrôle

• Prise en charge de trois nouveaux types d'instance : sans partage, édition Data Lake Analytics et à données partagées.

• Analyse diagnostique améliorée grâce à la prise en charge de l'analyse des requêtes SQL, de l'analyse des tables et de l'analyse des tâches d'importation pour vous aider à identifier rapidement les tâches ou les données problématiques.

• Expérience utilisateur améliorée pour la page de configuration de l'instance.

Catégorie de fonctionnalité

Description

Séparation du calcul et du stockage

• La gestion des métadonnées affiche désormais les bases de données, les tables, les partitions et le cache.

• Le profil de requête inclut désormais des métriques d'analyse des hits de cache.

Analytique de lac de données

• La gestion des métadonnées affiche désormais les informations sur les tables externes d'un catalogue externe.

• Configurez l'accès sans mot de passe pour OSS.

Améliorations de la plateforme de contrôle

• Modifiez les configurations des disques cloud, y compris la mise à niveau du niveau de performance.

• Mettez à niveau une configuration de disque cloud en augmentant le nombre de blocs.

• Ajustez le nombre de blocs de disque cloud lors de la création d'une instance.

• Éléments de configuration par défaut optimisés.

• La fonction de surveillance vous permet désormais d'interroger les métriques de surveillance des points chauds.

• Les tâches d'opération affichent désormais les détails de l'opération.

• Une invite de confirmation s'affiche désormais lors de l'activation d'un journal d'audit.

Améliorations de StarRocks Manager

• Expérience de connexion et d'authentification améliorée pour StarRocks Manager.

• StarRocks Manager prend désormais en charge les thèmes clair et sombre.

• La fonction de gestion des utilisateurs inclut désormais un champ Description.

Régions

La région Chine (Zhangjiakou) est désormais disponible.