O SmartData é um service de armazenamento para o mecanismo Jindo do E-MapReduce (EMR). Ele oferece armazenamento centralizado, cache e otimização de computação para os mecanismos do EMR, além de estender os recursos de armazenamento. O SmartData é composto pelo JindoFS, JindoTable e ferramentas relacionadas. A seção a seguir descreve as atualizações do SmartData 3.5.X.
Escalabilidade de armazenamento do OSS no JindoFS
Melhoria no desempenho da exclusão de diretórios do Object Storage Service (OSS).
JindoSDK
Ao utilizar o JindoSDK para Java, os logs do JindoSDK são gerados como logs Java para facilitar o diagnóstico.
As estatísticas de uso de memória do JindoSDK agora são registradas em log. Visualize esses logs para obter informações sobre a memória consumida pelo JindoSDK.
Otimização de computação baseada no JindoTable
A aceleração nativa de consultas foi adicionada para agilizar operações quando você utiliza Spark, Hive ou Presto para ler dados de arquivos ORC ou Parquet armazenados no OSS ou no JindoFS. Para mais informações, consulte Ative native query acceleration.
É possível coletar estatísticas de acesso infrequente em tabelas Hive por meio do JindoTable. Para mais detalhes, consulte Cold Access Collection for JindoTable Tables or Partitions.
Outras ferramentas do JindoFS
Aprimoramentos no Jindo DistCp: o service CloudMonitor pode ser utilizado para monitorar e gerar alertas sobre tarefas com falha, a dependência do Advanced Vector Extensions (AVX) foi removida e há suporte ao Cold Archive durante a gravação de dados no OSS. Para mais informações, consulte Use Jindo DistCp.