Resolver problemas de latência

Como qualquer sistema de banco de dados, o Bigtable pode ter problemas de latência. Neste documento, discutimos as causas comuns de problemas de latência no Bigtable e explicamos como resolver problemas.

Diagnostique e resolva problemas de latência do Bigtable usando as etapas de solução de problemas nas seções a seguir:

Entender as causas da alta latência

Os seguintes fatores contribuem para problemas de latência no Bigtable:

  • Latência do servidor. A medição da latência do servidor começa quando o Bigtable recebe a solicitação e termina quando o Bigtable envia o último byte de dados ao cliente. Nas solicitações de grandes volumes de dados, a capacidade do cliente de consumir a resposta pode afetar a latência do servidor.
  • As latências de operação medem o tempo total de ponta a ponta de uma operação do Bigtable, incluindo todas as novas tentativas. Essa métrica rastreia o tempo de ida e volta do cliente para o Bigtable e de volta para o cliente. A latência do aplicativo, a conexão de rede, a latência da biblioteca de cliente do Bigtable e as latências do servidor afetam a latência da operação.
  • Os padrões de carga de trabalho e solicitação podem aumentar a latência não apenas devido a um problema de infraestrutura, mas também devido a uma mudança no padrão de trabalho solicitado pelo aplicativo. Por exemplo, uma consulta de verificação gerada dinamicamente que antes verificava cem linhas agora verifica um milhão de linhas devido a uma importação de dados recente ou a uma mudança na lógica do aplicativo. Embora o sistema possa estar operando com eficiência, o aumento significativo na quantidade de trabalho para uma única operação resulta em um tempo de execução mais longo, que o Bigtable percebe como uma latência maior.

Antes de começar

Para resolver problemas de alta latência, faça o seguinte:

  • Ative as métricas do lado do cliente na sua biblioteca de cliente para otimizar o desempenho e resolver problemas.
  • Para minimizar a latência de rede, verifique se o aplicativo está na mesma zona que o cluster do Bigtable. Isso reduz a distância de rede entre o aplicativo e o cluster, o que melhora os tempos de resposta das solicitações.
  • Reúna as seguintes informações sobre o ambiente do Bigtable:
  • Reúna as seguintes informações sobre o ambiente do lado do cliente:
  • Reúna as seguintes informações sobre o problema:

Resolver problemas de latência

Se você tiver problemas de latência no Bigtable, siga estas etapas para resolver o problema:

  1. Verifique a latência do servidor: use a página "Monitoramento" no console doGoogle Cloud para conferir a latência do servidor. Para mais informações, consulte Monitorar com o Cloud Monitoring. Verifique a latência da instância. Se a instância tiver vários clusters, divida a métrica por cluster. Se você observar aumentos na latência de leitura ou de gravação ou nas métricas do lado do cliente, siga as etapas de solução de problemas de latência do servidor na seção Resolver problemas de latência do servidor deste documento.
  2. Verificar a latência do cliente: depois de ativar as métricas do lado do cliente, pesquise bigtable.googleapis.com/client no Metrics Explorer do Cloud Monitoring. Analise as métricas do lado do cliente disponíveis. Se você notar um aumento na latência nas métricas do lado do cliente, mas não no servidor, examine o aplicativo e a conexão de rede. Para mais informações, consulte a seção Resolver problemas de latência do cliente deste documento.

O diagrama a seguir mostra o processo de solução de problemas de latência aumentada no Bigtable:

Fluxograma para solucionar problemas de latência do Bigtable.
Figura 1. O processo de solução de problemas de latência do Bigtable (clique para ampliar).

Resolver problemas de latência do cliente

Siga estas etapas para resolver problemas de latência do lado do cliente.

Antes de começar

Antes de começar a resolver problemas de latência do lado do cliente, conclua as seguintes tarefas:

  • Ative as métricas do lado do cliente no Bigtable.
  • Ative a preparação de canais se você usar uma versão do cliente Java 2.17.1 ou anterior. A atualização de canais é ativada por padrão a partir da versão 2.18.0.
  • Itere para determinar o tamanho ideal do pool de conexões para sua carga de trabalho. Canais inadequados ou excessivos podem causar latências de tentativa altas.

Verificar latências de bloqueio de aplicativos

Verifique a métrica Application Blocking Latencies no console do Google Cloud e realize uma das seguintes ações:

  • Se as latências de bloqueio de aplicativos forem altas e corresponderem ao aumento de latência relatado, concentre-se em resolver problemas do lado do cliente.
  • Se as latências de bloqueio de aplicativos forem altas e o cliente estiver hospedado na infraestrutura doGoogle Cloud , como o GKE ou o Compute Engine, encaminhe o problema para a equipe de suporte do Google Cloud .
  • Se as latências de bloqueio de aplicativos forem baixas e a latência de exibição do Bigtable também for baixa, o gargalo de latência provavelmente estará em um componente intermediário do caminho de rede ou de tráfego, como a rede ou o front-end do Google. Considere encaminhar o problema para a equipe de rede do Google Cloud para ajudar você com uma captura de pacote completa para identificar o gargalo de latência.

Resolver latências de operação altas

  1. Se connectivity_error_count for alto, o aplicativo terá problemas para acessar o front-end do Google. Defina tempos limite de RPC mais baixos para que a solicitação possa ser repetida em canais diferentes.
    • Se o tempo limite da RPC for muito baixo, isso também poderá levar a latências de operação altas. Determine o tempo limite típico de RPC P99 durante operações normais. Definir um valor de tempo limite de RPC mais próximo desse valor de referência ajuda a otimizar o desempenho.
  2. Se retry_count estiver alto, verifique a tag de status attempt_latencies. Se as tentativas falharem com erros DEADLINE_EXCEEDED, o prazo da solicitação será muito curto em comparação com a média de attempt_latencies.

Solicitações de endereço em fila na linha de execução do gRPC

Se nenhuma das métricas exceder a norma, as solicitações poderão ser colocadas em fila na linha de execução do gRPC. Isso pode acontecer pelos seguintes motivos:

  • O tamanho do pool de canais é muito pequeno, e as solicitações são colocadas em fila nos canais gRPC. Para mais informações, consulte Solicitações em buffer.
  • O uso da CPU da VM do cliente é alto. O alto uso da CPU também leva ao enfileiramento de solicitações no cliente.

Resolver problemas de latência do servidor

Siga estas etapas para resolver problemas de latência do lado do servidor.

Determinar se o cluster está sobrecarregado

  1. Verifique os gráficos Read requests e Write requests para ver se há mudanças no QPS.
  2. Verifique se há mudanças na contagem de nós no gráfico Node count.
  3. Verifique se há aumentos na largura de banda nos gráficos Read throughput e Write throughput. Para mais informações, consulte Entender o desempenho.
  4. Para identificar como a CPU é usada por perfil, método e tabela do app para resolver problemas de desempenho, consulte a postagem do blog Onde o cluster do Cloud Bigtable está gastando a CPU?.
  5. Aumente a contagem de nós no cluster afetado. Para mais informações, consulte Adicionar ou remover nós manualmente e Escalonamento automático. Verifique se a utilização média da CPU permanece abaixo do limite recomendado.

Verificar se há superutilizações pontuais

Um tablet mais usado usa uma porcentagem desproporcionalmente grande da CPU de um nó em comparação com outros tablets associados a esse nó. Esse uso desequilibrado pode ocorrer devido a um alto volume imprevisto de solicitações para um intervalo de linhas ou falhas no design do esquema. Esse desequilíbrio de uso de nós pode causar latências mais altas e atrasos de replicação, conhecidos como hotspots.

  1. Observe os pontos de acesso no gráfico CPU utilization (hottest node) high granularity.
  2. Para identificar tablets mais usados, use tablets mais usados ou a ferramenta Key Visualizer.
  3. Ao contrário da utilização excessiva de CPU no nível do cluster, que geralmente pode ser mitigada adicionando mais nós (escalonamento horizontal), os pontos de acesso podem exigir outras técnicas de mitigação. Essas técnicas incluem mudar a forma como você cria chaves de linha ou mudar o esquema. Para mais informações, consulte a postagem do blog Eliminar pontos de acesso no Cloud Bigtable.

Resolver a latência com QPS baixo

O Bigtable tem um desempenho melhor com tabelas grandes que são acessadas com frequência. Se você enviar solicitações após um período sem uso, poderá observar alta latência enquanto o Bigtable restabelece as conexões.

  1. Se os gráficos Read requests e Write requests mostrarem um QPS baixo, espere tempos de resposta mais lentos.
  2. Siga as práticas recomendadas em Inicializações a frio e QPS baixo para reduzir os problemas de inicialização a frio.

Avaliar a eficiência da solicitação

Avalie a eficiência da solicitação usando a página Padrões de acesso e as estatísticas de consulta:

  • Use a página Padrões de acesso no console do Google Cloud para monitorar a análise dos tipos de consulta de leitura e gravação ao longo do tempo (como leituras de pontos, verificações curtas, verificações reversas, leituras esparsas e leituras em massa) e comparar Linhas verificadas e Células vistas com Linhas retornadas e Células enviadas para suas tabelas e perfis de app. Para mais informações, consulte Analisar padrões de acesso.
  • Use as estatísticas de consulta para inspecionar a proporção de linhas vistas em relação às linhas retornadas e de células vistas em relação às células retornadas para solicitações de leitura individuais. Melhore a eficiência das solicitações revisando os padrões de consulta, os filtros ou o design do esquema. Para mais informações, consulte Receber estatísticas de consulta.

Verificar mudanças na configuração ou no perfil do app

Se a contagem de nós e a capacidade de processamento permanecerem inalteradas, mas a utilização média da CPU aumentar, isso pode ser resultado de mudanças nas estratégias de replicação ou de coleta de lixo. Para mais informações, consulte Replicação e desempenho. Reverta as alterações de configuração para replicação ou coleta de lixo.

Encaminhar para o suporte do Bigtable

Se as etapas anteriores não resolverem o problema, encaminhe-o para o suporte do Bigtable.

A seguir