Alluxio est une technologie open source d'orchestration des données orientée cloud, dédiée à l'analytique des données et à l'IA. Elle comble le fossé entre les applications pilotées par les données et les systèmes de stockage en rapprochant les données de la couche de stockage des applications qui les exploitent. Cette approche facilite l'accès aux données et permet aux applications de se connecter à de nombreux systèmes de stockage via une interface commune.
Contexte
Dans l'écosystème du big data, Alluxio s'intercale entre les applications ou frameworks pilotés par les données, tels qu'Apache Spark, Presto, TensorFlow, Apache Hive ou Apache Flink, et divers systèmes de stockage persistant, comme Hadoop Distributed File System (HDFS) ou Alibaba Cloud Object Storage Service (OSS). Alluxio fournit une API client unifiée et un namespace global permettant aux applications ou frameworks de calcul situés en amont d'accéder aux données stockées dans les systèmes de stockage persistant.
Avantages
Offre un débit d'E/S à la vitesse de la mémoire et réduit les coûts des applications pilotées par les données compatibles avec Auto Scaling.
Simplifie l'accès aux données des systèmes de stockage cloud et de stockage d'objets.
Facilite la gestion des données. Alluxio offre un point d'accès unique à plusieurs sources de données.
Facilite le déploiement des applications.
Pour plus d'informations sur Alluxio, consultez la documentation Alluxio.