Nesta página, descrevemos como o consultor do Storage Intelligence permite monitorar e gerenciar seu ambiente do Cloud Storage em grande escala em organizações, pastas e projetos.
O consultor do Storage Intelligence mostra tendências, anomalias e descobertas de avaliação de risco de segurança nos seus padrões de armazenamento, além de fornecer recomendações integradas para otimizar o uso, resolver gargalos de desempenho e alinhar as configurações de segurança com as práticas recomendadas.
Para acessar o consultor do Storage Intelligence, consulte Acessar o consultor do Storage Intelligence.
Estrutura e seções do consultor do Storage Intelligence
Para ajudar você a gerenciar seu ambiente de armazenamento, o consultor do Storage Intelligence mostra insights por uma hierarquia estruturada de métricas, descobertas e próximas etapas:
- Métricas: pontos de dados coletados do ambiente do Cloud Storage, como volume de armazenamento, contagem de objetos e taxas de operação.
- Descobertas: anomalias e lacunas de configuração de segurança detectadas nas suas métricas e metadados de objeto que exigem atenção, como um pico de erros, uso ineficiente de armazenamento ou objetos que violam as políticas de criptografia do bucket.
- Próximas etapas: recomendações fornecidas com cada descoberta para ajudar você a resolver o problema identificado.
Para ajudar você a analisar seus dados de armazenamento, o consultor do Storage Intelligence inclui as seções a seguir.
Resumo
A seção Resumo mostra um resumo diário do seu ambiente de armazenamento. O rótulo da seção se adapta ao recurso selecionado: Visão geral do projeto, Visão geral da pasta ou Visão geral da organização. Ele mostra métricas importantes, como o tamanho total do armazenamento, as contagens de buckets e objetos e o tamanho médio dos objetos. A tabela a seguir descreve como usar essas métricas para analisar o uso do armazenamento:
| Métrica | Descrição |
|---|---|
| Tamanho total do armazenamento | O tamanho total do armazenamento nas classes de armazenamento multirregional e Regional Storage. |
| Total de buckets com objetos | O número de buckets que contêm pelo menos um objeto. |
| Total de objetos | O número total de objetos no escopo de recursos selecionado. |
| Tamanho médio dos objetos | O tamanho médio dos objetos no projeto, na pasta ou na organização, o que indica a eficiência do armazenamento. |
Principais descobertas
A seção Principais descobertas alerta sobre mudanças no comportamento do armazenamento e lacunas na configuração de segurança que exigem atenção. Dependendo do escopo de recurso selecionado, as descobertas fornecem insights agregados ou granulares:
- Escopos de organização e pasta: cada card de descoberta agrega descobertas em projetos contidos, exibe o número de projetos afetados e permite visualizar uma lista de projetos afetados para detalhar as descobertas específicas do projeto.
- Escopo do projeto: os cards de descoberta permitem que você analise os detalhes no nível do bucket e do objeto para esse projeto.
Cada descoberta é associada a uma das seguintes categorias para indicar o impacto:
Otimização de uso: descobertas que afetam o uso do armazenamento e a eficiência de custos.
Desempenho: descobertas que afetam a velocidade, a latência e a integridade operacional.
Segurança e conformidade (pré-lançamento): descobertas que identificam lacunas de configuração de segurança e criptografia, como objetos que não obedecem às políticas de criptografia de bucket.
A tabela a seguir descreve as descobertas disponíveis no consultor do Storage Intelligence:
| Descoberta | Categoria | Descrição |
|---|---|---|
| Pico nas operações de classe A ou B em dados do Coldline ou Archive | Otimização de uso | Indica operações frequentes em dados no Coldline Storage e no Archive Storage. Por exemplo, essa descoberta pode aparecer se um job de análise acessar relatórios mensais no Archive Storage diariamente. Esse acesso diário resulta em uma alta taxa de operação para dados mais adequados ao Standard Storage. Para resolver essa descoberta, mova os dados para uma classe de armazenamento adequada para acesso frequente ou configure o job de análise para usar dados em cache. Para mais informações, consulte Otimizar o uso de dados de armazenamento Coldline e Archive Storage. |
| Pico de erros 429 indicando solicitações com limitação de taxa | Desempenho | Indica que o Cloud Storage está limitando as solicitações, o que causa latência e tempos limite. Por exemplo, essa descoberta pode aparecer se um job de processamento em lote ler ou gravar rapidamente muitos objetos no mesmo bucket. Essa explosão de solicitações excede os limites por bucket e aciona erros Para mais informações, consulte Melhorar o desempenho mitigando erros de solicitação com limitação de taxa. |
| Pico na saída de dados entre regiões | Otimização de uso | Indica um aumento na transferência de dados entre buckets do Cloud Storage em uma região e instâncias do Compute Engine ou outros serviços do Google Cloud em outra região. Esse tráfego entre regiões pode gerar custos de saída inesperados. Por exemplo, essa descoberta pode aparecer se uma instância do Compute Engine em Para mais informações, consulte Gerenciar saída de dados entre regiões. |
| O total de bytes armazenados aumentou acima da tendência nos últimos 30 dias | Otimização de uso | Indica que o consumo de armazenamento aumentou além das tendências históricas nos últimos 30 dias. Por exemplo, essa descoberta pode aparecer se o bucket reter versões de objetos não atuais indefinidamente depois que você fizer upload de novas versões. A retenção indefinida pode levar a custos de armazenamento desnecessários. Para resolver essa descoberta, use o Gerenciamento do ciclo de vida de objetos para excluir versões não atuais ou movê-las para um armazenamento de acesso mais raro, ou ative a classe automática para gerenciar automaticamente as classes de armazenamento com base nos padrões de acesso. Para mais informações, consulte Identificar o consumo de armazenamento acima da tendência. |
| Os objetos violam as políticas de chave de criptografia gerenciada pelo cliente (CMEK, na sigla em inglês) padrão para buckets (pré-lançamento) | Segurança e compliance | Indica que um bucket com uma chave de criptografia padrão gerenciada pelo cliente (CMEK) contém objetos que não estão criptografados com CMEK. Por exemplo, você pode ver essa descoberta se tiver feito upload de objetos antes de definir a chave padrão do Cloud Key Management Service (Cloud KMS) do bucket. Para resolver essa descoberta, identifique os objetos não compatíveis usando conjuntos de dados do Storage Insights e criptografe-os novamente com a chave padrão do Cloud KMS do bucket. Para mais informações, consulte Criptografar novamente objetos que violam as políticas de CMEK padrão para buckets. |
| Os objetos violam as regras de criptografia aplicadas (pré-lançamento) | Segurança e compliance | Indica que um bucket contém objetos que usam um método de criptografia restrito pela configuração de aplicação de criptografia do bucket. Por exemplo, essa descoberta pode aparecer se você tiver feito upload de objetos criptografados com criptografia padrão (criptografia padrão do Google ou GMEK) ou chaves de criptografia fornecidas pelo cliente (CSEK) antes de restringir esses métodos no bucket. Para resolver essa descoberta, identifique os objetos não compatíveis usando conjuntos de dados do Storage Insights e criptografe-os novamente com um método de criptografia permitido. Para mais informações, consulte Criptografar novamente objetos que violam as regras de criptografia aplicadas. |
Gráficos principais
A seção Gráficos principais contém gráficos de série temporal que ajudam a visualizar as seguintes tendências de armazenamento:
- Contagem cumulativa de objetos: rastreia o número total de objetos no projeto, na pasta ou na organização selecionada em todos os locais e classes de armazenamento.
- Volume de armazenamento ao longo do tempo: rastreia o tamanho do armazenamento em locais e classes de armazenamento.
Casos de uso
O consultor do Storage Intelligence é compatível com os seguintes casos de uso.
Minimizar relatórios personalizados
Acompanhe as métricas no ambiente do Cloud Storage sem manter pipelines personalizados de tratamento de dados, scripts do BigQuery ou ferramentas de visualização externas.
Centralize a supervisão
Avalie a integridade de todo o ambiente do Cloud Storage em uma única interface em projetos, pastas ou organizações, sem executar consultas manuais em vários registros ou recursos.
Para começar, consulte Acessar o consultor do Storage Intelligence.
Otimizar o uso do armazenamento
Identificar oportunidades para otimizar o uso do armazenamento alinhando os dados com a
classe de armazenamento apropriada. Por exemplo, uma descoberta Spike in Class A or B operations on
Coldline or Archive data indica acesso frequente a dados no
Coldline Storage ou no Archive Storage. Esses dados podem ser mais adequados
para uma classe de armazenamento destinada ao acesso frequente, como o Standard Storage ou
o Nearline Storage.
Para mais informações, consulte Otimizar o uso de dados de armazenamento Coldline e Archive Storage.
Resolver gargalos de desempenho
Identificar problemas de desempenho, como limitação de solicitações ou picos de operação
inesperados. Descobertas como Spike in 429 errors ajudam a otimizar os padrões de E/S para melhorar a confiabilidade do aplicativo.
Para mais informações, consulte Melhorar o desempenho mitigando erros de solicitação com limitação de taxa.
Monitorar a segurança e a conformidade
Avalie continuamente a conformidade de segurança e criptografia do Cloud Storage com a análise automatizada no nível do objeto. Quando você ativa o Storage Intelligence, o consultor do Storage Intelligence executa automaticamente avaliações de risco de segurança em segundo plano e atualiza as descobertas a cada 24 horas. O consultor do Storage Intelligence agrega
violações de criptografia no nível do objeto no nível do bucket, incluindo as
descobertas Objects violate default CMEK bucket policies e Objects violate enforced
encryption rules. É possível identificar objetos afetados consultando
conjuntos de dados do Storage Insights no BigQuery e criptografá-los novamente usando
operações em lote do Storage ou a Google Cloud CLI.
Para mais informações, consulte Criptografar novamente objetos que violam as políticas de CMEK padrão para buckets e Criptografar novamente objetos que violam as regras de criptografia aplicadas.
Suporte do VPC Service Controls
O consultor do Storage Intelligence é compatível com o VPC Service Controls para recursos no nível do projeto dentro de um perímetro de serviço. Para detalhes sobre o suporte do VPC Service Controls e as limitações no nível do recurso, consulte Produtos compatíveis com o VPC Service Controls: Cloud Storage.