AnalyticDB:Tiered storage of hot and cold data

Durante la creación de la tabla

Especifique la política mediante el parámetro storage_policy en su instrucción CREATE TABLE:

CREATE TABLE your_table (
    ...
)
PARTITION BY ...
PROPERTIES (
    "storage_policy" = "MIXED",   -- HOT, COLD, or MIXED
    "hot_partition_count" = "5"   -- Required when storage_policy = MIXED
);

Para una tabla existente

Utilice ALTER TABLE para cambiar la política de almacenamiento. Después de ejecutar esta instrucción, puede seguir el progreso de la migración; consulte Consultar el progreso del cambio de política de almacenamiento.

-- Switch to mixed storage with 5 hot partitions
ALTER TABLE your_table
SET PROPERTIES (
    "storage_policy" = "MIXED",
    "hot_partition_count" = "5"
);

Para consultar la referencia completa de sintaxis, véase CREATE TABLE y ALTER TABLE.

Cuando se inserta una nueva partición

Todas las particiones se reordenan para mantener exactamente N particiones calientes. La partición con el valor de clave más pequeño pasa de caliente a fría.

Ejemplo: hot_partition_count es 5. Se inserta una nueva partición 20241226 (el mayor valor de clave). Tras un trabajo BUILD, el sistema promueve 20241226 a caliente y mueve 20241221 (la anterior partición caliente con menor valor) a fría.

Cuando cambia el recuento de particiones calientes

• Aumento de N a M (M > N): M - N particiones frías (aquellas con los mayores valores de clave) se promueven a calientes.

• Disminución de N a M (M < N): N - M particiones calientes (aquellas con los menores valores de clave) pasan a ser frías.

Ejemplo — aumento de 5 a 6: La partición 20241220 (mayor clave de partición fría) pasa de fría a caliente.

Ejemplo — disminución de 5 a 4: La partición 20241221 (menor clave de partición caliente) pasa de caliente a fría.

Consulta para todas las tablas

SELECT * FROM information_schema.table_usage;

Consulta para una tabla específica

SELECT * FROM information_schema.table_usage
WHERE table_schema = '<schema_name>' AND table_name = '<table_name>';

Parámetros de respuesta

Notas de uso:

• Todos los valores de tamaño (rt_*, hot_*, cold_*) cambian conforme se ejecutan operaciones INSERT, UPDATE, DELETE y BUILD.

• Si hot_total_size y cold_total_size son ambos 0 después de escribir datos, significa que los datos se sincronizan en tiempo real. rt_total_size refleja el tamaño actual. Ejecute una instrucción BUILD para convertir los datos en tiempo real en datos históricos; posteriormente se completarán hot_total_size y cold_total_size.

• El valor configurado de hot_partition_count especifica el número de particiones calientes por fragmento. El valor consultado de hot_partition_count corresponde a la unión de todos los fragmentos y puede ser mayor si la distribución de particiones difiere entre ellos.

Ejemplo — hot_partition_count consultado frente al valor configurado:

La tabla A tiene dos fragmentos y hot_partition_count está configurado como 2.

• Fragmento 1: P4 y P5 son calientes; P1, P2 y P3 son frías.

• Fragmento 2: P3 y P4 son calientes; P1 y P2 son frías.

El valor consultado es la unión: {P4, P5} ∪ {P3, P4} = {P3, P4, P5}, por lo que hot_partition_count devuelve 3.

Consulta para todas las tablas

SELECT * FROM information_schema.storage_policy_modify_progress;

Consulta para una tabla específica

SELECT * FROM information_schema.storage_policy_modify_progress
WHERE table_schema = '<schema_name>' AND table_name = '<table_name>';

Parámetros de respuesta