Compreender e gerenciar a ingestão de dados

Você pode querer gerenciar a ingestão de dados do New Relic por vários motivos, incluindo:

• Removendo dados indesejados
• Gerenciando custos de ingestão de dados

UI de ingestão de dados

A guia Data ingestion está localizada na UI de gerenciamento de dados. Ele mostra um resumo do seu uso de dados por fonte, ajudando você a entender quais dados estão sendo enviados para o New Relic.

Recurso chave

A UI de ingestão de dados fornece ferramentas para ajudar você a monitorar e analisar seus dados:

Filters and controls:

• Time range selector: Escolha entre as visualizações Auto, Daily, Weekly ou Monthly para analisar as tendências de ingestão de dados durante o período de sua preferência.
• Data source filtering: Use o menu suspenso e a funcionalidade de pesquisa para filtrar e encontrar fontes de dados específicas.

Visualizations:

• Data source table: Veja todas as fontes de dados ativas com seus respectivos volumes de ingestão. A tabela mostra a contribuição de cada fonte para a sua ingestão total de dados (como BrowserEventsBytes, CustomEventsBytes, ApmEventsBytes).
• Visual trend chart: Exibe padrões de ingestão ao longo do tempo com faixas codificadas por cores representando diferentes fontes de dados, facilitando a identificação de picos ou tendências.
• Usage by account: Um gráfico de pizza mostrando a distribuição da ingestão de dados entre suas contas, exibindo tanto o volume total quanto o detalhamento percentual.
• Usage by data source: Um gráfico de pizza detalhando sua ingestão total por fonte de dados (por exemplo, BrowserEventsBytes pode mostrar 95,17% da sua ingestão total, CustomEventsBytes a 3,33%).

Para definições detalhadas das métricas exibidas, consulte Fontes de ingestão de dados.

Obtenha mais detalhes

Para visualizar detalhes adicionais sobre uma fonte de dados específica:

1. Clique no nome da fonte de dados na tabela
2. Use as opções adicionais de filtragem que aparecem para detalhar ainda mais essa fonte de dados específica.

Advanced options:

• Clique em View NRQL para ver a consulta subjacente de qualquer gráfico.
• Veja Configurações da conta para um tour em vídeo desta e de outras UIs de administração
• Para detalhes técnicos sobre como os gráficos exibem dados e mensagens de erro, consulte Detalhes do gráfico

Estimar a ingestão futura de dados

A página Data Ingestion inclui recursos preditivos que ajudam a prever o uso futuro de dados da sua organização.

Para prever o uso:

1. Navegue até o Daily view do gráfico de série temporal na parte superior da página
2. No menu do gráfico , selecione Predict Usage
3. Visualize a previsão de uso de dados para 1 semana tanto no gráfico quanto na tabela.

Para remover a previsão, selecione Remove prediction no menu do gráfico.

Gerencie a ingestão e evite picos de ingestão

A forma como você gerencia seus dados do New Relic dependerá de vários fatores específicos de sua organização e de suas necessidades. Dito isto, aqui estão algumas dicas gerais para gerenciar a ingestão de dados e evitar picos inesperados:

• Assign team members. Designe membros da equipe que serão responsáveis por revisar sua ingestão em uma cadência e gerenciá-la. Certifique-se de que eles entendem os fatores de faturamento relacionados aos dados, incluindo o que conta e o que não conta para o faturamento.
• Get to know your data. Passe algum tempo se familiarizando com seus dados. Conheça seus altos e baixos e entenda de onde vem.
• Monitor when you make significant changes. Ao ativar pela primeira vez uma nova ferramenta de relatório de dados, ou ao atualizar um agente ou integração, ou quando fizer qualquer grande alteração no seu sistema, você deverá monitor sua ingestão para garantir que não haja nenhum pico inesperado nos dados.
• Set up alerts. Se você estiver preocupado com cenários específicos que causam picos repentinos no conjunto de dados, ative uma condição do alerta para notificá-lo se isso ocorrer. Para dicas sobre isso, veja Consulta de uso.

Reduzindo a ingestão

Abaixo estão algumas dicas para abordagens comuns que os clientes da New Relic adotam para reduzir a ingestão de dados que não são úteis para eles.

Todas as soluções New Relic têm diversas opções de configuração que oferecem controle sobre como os dados são relatados à New Relic. Abaixo, temos alguns métodos populares para reduzir a ingestão de dados, mas para conhecer todas as opções disponíveis, recomendamos a leitura da documentação das ferramentas específicas que você está usando.

Fontes de ingestão de dados

O gráfico da interface de ingestão de dados mostra um detalhamento de alto nível do uso de dados faturáveis. A tabela abaixo explica essas fontes. Nesta tabela, "grupo de métricas de uso" refere-se ao valor do atributo usageMetric dessa fonte no evento NrConsumption .

Otimize sua ingestão de dados

Também temos um tutorial detalhado sobre como otimizar a ingestão de dados.

Transmitir dados ingeridos

Para obter mais informações sobre streaming de dados ingeridos para outras fontes, consulte Exportação de streaming.

Dados de diversas regiões de data center

Se você tiver contas em diversas regiões de data center, saiba mais sobre como entender seu uso.

Detalhes técnicos sobre o gráfico de ingestão

Alguns detalhes técnicos sobre a interface de ingestão:

• Displays are estimates. O valor de ingestão mostrado no gráfico de ingestão pode variar um pouco do valor real que você verá ao executar sua própria consulta. Isso ocorre porque o cálculo usado para o gráfico é uma estimativa.
• No chart data available. O gráfico de ingestão de dados pode exibir um período um pouco mais longo do que o coberto pelas configurações de retenção de dados. Por esse motivo, você pode receber a mensagem de que não há dados do gráfico disponíveis.
• Chart time buckets. Se uma conta tiver menos de um terabyte de dados, calculamos o volume durante um período de 24 horas; caso contrário, calculamos para um período de 1 hora.