Apache Paimon est un format de stockage de lac de données unifié pour les flux et les lots, qui prend en charge les écritures à haut débit et les requêtes à faible latence. Les moteurs de calcul E-MapReduce tels que Flink, Spark, Hive et Trino s'intègrent parfaitement avec Paimon, ce qui vous permet de construire un stockage de lac de données sur HDFS ou OSS pour l'analytique des lacs de données.
Apache Paimon offre les fonctionnalités principales suivantes :
Des services de stockage de lac de données légers et économiques sur HDFS ou OSS.
Lecture et écriture d'ensembles de données à grande échelle en mode flux et par lot.
Requêtes par lot et OLAP avec une actualité des données allant de quelques minutes à quelques secondes.
Consommation et production incrémentielles des données, servant de couche de stockage pour les entrepôts de données traditionnels et en flux continu.
Pré-agrégation des données pour réduire les coûts de stockage et la charge de calcul des systèmes en aval.
Voyage dans le temps (time travel) pour interroger les versions historiques des données.
Filtrage efficace des données.
Évolution du schéma pour les tables.
Pour plus d'informations, consultez la documentation Apache Paimon.