E-MapReduce:Kyuubi

Fonctionnalités

• Multi-locataire : Kyuubi prend entièrement en charge le multi-locataire pour l'allocation des ressources, l'accès aux données et l'accès aux métadonnées, grâce à une couche unifiée d'authentification et d'autorisation.

• Haute disponibilité : Kyuubi s'appuie sur ZooKeeper pour l'équilibrage de charge, offrant une haute disponibilité de niveau entreprise et une concurrence client illimitée.

• Charges de travail multiples : Kyuubi gère plusieurs charges de travail sur une seule plateforme avec une seule copie des données et une interface SQL unifiée.

Scénarios

• Analyse interactive : Kyuubi permet de déployer des plateformes d'analyse de niveau entreprise pour l'analyse visuelle interactive des big data. Il prend en charge les frameworks de calcul courants ainsi que les interfaces Java Database Connectivity (JDBC) et Open Database Connectivity (ODBC), ce qui permet d'exécuter efficacement des requêtes via SQL ou des outils de business intelligence (BI). Kyuubi met en cache les instances du moteur backend au niveau utilisateur pour améliorer le partage des ressources et accélérer les temps de réponse. Il traite les requêtes sur de grands ensembles de données en parallèle et renvoie les résultats rapidement.

• Traitement par lots : Kyuubi fournit une interface SQL pour le traitement par lots courant, notamment les processus ETL (extraction, transformation et chargement) à grande échelle. Kyuubi et ses moteurs sont indépendants du stockage et prennent en charge de nombreuses sources de données. Kyuubi peut également isoler les instances du moteur backend au niveau de la connexion pour une meilleure isolation des ressources et une stabilité accrue.

Comparaison entre Kyuubi, Livy et Spark ThriftServer

Références

• Le niveau de partage des moteurs Kyuubi

• La durée de vie (TTL) des moteurs Kyuubi