Data Lake Storage

Object Storage Service (OSS) de Alibaba Cloud brinda escalabilidad, durabilidad y rendimiento líderes en la industria. Puede almacenar y proteger cualquier cantidad de datos con una durabilidad del 99,9999999999 % (doce nueves) como la base de almacenamiento escalable, segura y rentable para el lago de datos. Puede ingerir de manera sencilla datos de dispositivos IoT y entornos locales y en la nube en el lago de datos y configurar las reglas de los ciclos de vida para almacenar datos en frío y en caliente en distintas clases de almacenamiento según los requisitos y los costos de acceso. También puede utilizar JindoFS para almacenar en caché datos en caliente y acelerar el acceso con la interfaz HDSF para esquemas de análisis de datos (como Apache Spark, Apache Hive, Presto y TensorFlow).

Más información >

Data Lake Formation

Data Lake Formation (DLF) es un componente clave en el marco de lago de datos nativo de la nube y ofrece una manera sencilla de crear un lago de datos nativo de la nube. DLF se integra fluidamente con varios motores de computación. Permite administrar los metadatos de los lagos centralizadamente y controlar los permisos de clase empresarial. Cuenta con una arquitectura que separa la computación del almacenamiento para que se puedan planificar los recursos bajo demanda de manera rentable y mejorar la eficiencia del procesamiento de datos. Se puede conectar con distintos tipos de computación de datos y plataformas de análisis para obtener información sobre el valor empresarial y utilizar JindoFS para acelerar el análisis de lagos de datos con un alto rendimiento.

Más información >

Data Lake Computing

Alibaba Cloud ofrece varios motores de computación de datos para satisfacer distintas necesidades de procesamiento. Elastic MapReduce (EMR) permite utilizar los componentes del ecosistema de Hadoop y Spark (como Apache Hive, Apache Kafka, Flink, Druid, y TensorFlow) para analizar y procesar los datos almacenados en distintos servicios de almacenamiento de Alibaba Cloud, incluidos Object Storage Service (OSS), Log Service (SLS) y Relational Database Service (RDS). MaxCompute es compatible con distintos formatos de lagos de datos, como Delta Lake y Hudi. Puede conectarlo a distintas fuentes de datos para dar lugar a consultas efectivas en conjuntos de datos masivos. Hologres se conecta de manera fluida con Data Lake Formation para la lectura de datos y metadatos en tiempo real y el análisis de datos a escala de PB con una alta concurrencia y una baja latencia. Puede conectar Platform for AI con estos motores para realizar minerías y análisis de datos y respaldar los servicios empresariales inteligentes.

• E-MapReduce
• Hologres
• Realtime Compute for Apache Flink
• MaxCompute

Desarrollo y administración de los datos

DataWorks es una plataforma lista para utilizar que brinda servicios de desarrollo y administración de datos masivos profesionales, eficientes, seguros y fiables y que están basados en los motores de computación de datos masivos, como MaxCompute, E-MapReduce (EMR) y Hologres. DataWorks integra las prácticas recomendadas de Data Mid-End y de la administración de datos de Alibaba para ayudar a programar, ejecutar y monitorear una gran cantidad de tareas de distintos tipos (como la integración de datos, el machine learning y el SQL de MaxCompute) y a procesar cientos de petabytes de datos por día con una alta estabilidad. Puede arrastrar y soltar para personalizar el flujo de trabajo de los datos y obtener información visualizada sobre su desarrollo.

• DataWorks