Cloud Storage Gateway:Why are write operations to gateways slow?

Causa

Descrição

Solução

Disco de cache com limitação de throughput

A limitação ocorre quando o volume de dados gravados simultaneamente no disco de cache ultrapassa 80% da capacidade total de cache. Nesse ponto, o throughput de gravação é reduzido para proteger o cache.

1. Verifique se há problemas de upload que possam impedir a liberação de espaço no cache. Os uploads podem falhar nas seguintes situações:

   • O bucket do OSS não existe.

   • Uma política do bucket do OSS restringe o acesso a partir do gateway.

   • A classe de armazenamento do bucket do OSS é Archive ou Cold Archive.

   • O tamanho total dos arquivos gravados simultaneamente excede a capacidade disponível do disco de cache, impedindo que os arquivos sejam fechados e enviados em tempo hábil.

2. Se aplicável, ajuste a carga de trabalho para reduzir o volume de dados gravados simultaneamente no disco de cache.

3. Expanda o disco de cache do compartilhamento para aumentar o espaço disponível para dados. Para mais informações, consulte Expand a cache.

Gravações single-threaded ou concorrência insuficiente

Gravações single-threaded, ou um número reduzido de streams de gravação simultâneos, resultam em subutilização da largura de banda e baixa eficiência de gravação. O File Explorer do Windows, por exemplo, copia arquivos de forma single-threaded por padrão.

Se sua aplicação suportar paralelismo, aumente o número de streams de gravação simultâneos. Para cargas de trabalho de cópia de arquivos no Windows, use robocopy, que oferece suporte a transferências multi-threaded e melhora significativamente o throughput de gravação.

Operações de I/O pequenas e frequentes

Gravar muitos blocos pequenos em sucessão rápida — como gravações de 4 KB — gera alta sobrecarga de I/O em relação ao volume de dados transferidos.

Consolide as operações de I/O pequenas em gravações sequenciais maiores. O agrupamento em lotes reduz a sobrecarga por operação e melhora o throughput geral.

Excesso de arquivos em um único diretório

Gravar centenas de milhares de arquivos no mesmo diretório provoca contenção de bloqueio de diretório. Múltiplas operações de gravação disputando o mesmo bloqueio serializam o I/O e degradam o desempenho.

Distribua os arquivos entre múltiplos diretórios. Dividir a carga de gravação reduz a contenção e permite que as gravações ocorram em paralelo.

Desempenho de I/O do disco de cache insuficiente

Quando o disco de cache subjacente apresenta baixas velocidades de leitura/gravação, ele se torna o gargalo independentemente das configurações de rede ou da aplicação.

Substitua o disco de cache por uma opção de maior desempenho, como SSDs enterprise, para aumentar o throughput bruto de I/O.