Comprendre et gérer l'ingestion de données

Vous souhaiterez peut-être gérer votre ingestion de données New Relic pour plusieurs raisons, notamment :

• Suppression des données indésirables
• Gestion des coûts d'ingestion de données

Interface utilisateur d'ingestion de données

L'onglet Data ingestion se trouve dans l'interface utilisateur de gestion des données. Il affiche un résumé de votre utilisation des données par source, vous aidant à comprendre quelles données sont envoyées à New Relic.

Fonctionnalité clé

L'interface utilisateur d'ingestion de données fournit des outils pour vous aider à monitorer et analyser vos données :

Filters and controls:

• Time range selector: Choisissez parmi les vues Auto, Daily, Weekly ou Monthly pour analyser les tendances d'ingestion de données sur la période de votre choix.
• Data source filtering: Utilisez le menu déroulant et la fonctionnalité de recherche pour filtrer et trouver des sources de données spécifiques.

Visualizations:

• Data source table: Afficher toutes les sources de données actives avec leurs volumes d'ingestion respectifs. Le tableau indique la contribution de chaque source à votre ingestion totale de données (comme BrowserEventsBytes, CustomEventsBytes, ApmEventsBytes).
• Visual trend chart: Affiche les modèles d'ingestion au fil du temps avec des bandes de couleur représentant différentes sources de données, ce qui permet d'identifier facilement les pics ou les tendances.
• Usage by account: Un diagramme circulaire montrant la répartition de l'ingestion de données sur vos comptes, affichant à la fois le volume total et la ventilation en pourcentage.
• Usage by data source: Un diagramme circulaire répartissant votre ingestion totale par source de données (par exemple, BrowserEventsBytes pourrait représenter 95,17 % de votre ingestion totale, et CustomEventsBytes 3,33 %).

Pour obtenir des définitions détaillées des métriques affichées, consultez Sources d'ingestion de données.

Obtenez plus de détails

Pour afficher des détails supplémentaires sur une source de données spécifique :

1. Cliquez sur le nom de la source de données dans le tableau
2. Utilisez les options de filtrage supplémentaires qui s'affichent pour explorer plus en détail cette source de données spécifique.

Advanced options:

• Cliquez sur View NRQL pour voir la requête sous-jacente de n'importe quel graphique.
• Consultez les Paramètres du compte pour une visite guidée en vidéo de cette interface et d'autres interfaces d'administration.
• Pour obtenir des détails techniques sur la façon dont les graphiques affichent les données et les messages d'erreur, consultez Détails du graphique

Estimer l'ingestion future de données

La page Data Ingestion inclut des fonctionnalités prédictives qui vous aident à prévoir l'utilisation future des données de votre organisation.

Pour prévoir l'utilisation :

1. Accédez au Daily view du graphique de séries temporelles en haut de la page
2. Depuis le menu du graphique , sélectionnez Predict Usage
3. Affichez les prévisions d'utilisation des données pour 1 semaine à la fois dans le graphique et dans le tableau.

Pour supprimer la prévision, sélectionnez Remove prediction dans le menu du graphique.

Gérer l'ingestion et éviter les pics d'ingestion

La manière dont vous gérez vos données New Relic dépendra de nombreux facteurs spécifiques à votre organisation et à vos besoins. Cela dit, voici quelques conseils généraux pour gérer l’ingestion de données et éviter les pics inattendus :

• Assign team members. Désignez des membres de l'équipe qui seront chargés de vérifier votre ingestion à une cadence donnée et de la gérer. Assurez-vous qu'ils comprennent les facteurs de facturation liés aux données, y compris ce qui est et n'est pas comptabilisé dans la facturation.
• Get to know your data. Prenez le temps de vous familiariser avec vos données. Apprenez à connaître ses flux et reflux et à comprendre d’où il vient.
• Monitor when you make significant changes. Lorsque vous activez pour la première fois un nouvel outil de reporting de données, ou lorsque vous mettez à niveau un agent ou une intégration, ou lorsque vous apportez une modification importante à votre système, vous devez monitorer votre ingestion pour vous assurer qu'il n'y a pas de pic inattendu de données.
• Set up alerts. Si vous êtes préoccupé par des scénarios spécifiques provoquant des pics soudains dans l'ensemble de données, créez une condition d'alerte pour vous avertir si cela se produit. Pour obtenir des conseils à ce sujet, consultez Utilisation requête.

Réduire l'ingestion

Vous trouverez ci-dessous quelques conseils sur les approches courantes adoptées par les clients New Relic pour réduire l'ingestion de données qui ne leur sont pas utiles.

Toutes les solutions New Relic disposent de différentes options de configuration qui vous permettent de contrôler la manière dont les données sont signalées à New Relic. Ci-dessous, nous avons quelques méthodes populaires pour réduire l'ingestion de données, mais pour en savoir plus sur toutes les options disponibles, nous vous recommandons de lire la documentation des outils spécifiques que vous utilisez.

Sources d'ingestion de données

Le graphique UId'ingestion de données vous montre une répartition de haut niveau de votre utilisation de données facturables. Le tableau ci-dessous explique ces sources. Dans ce tableau, « groupe métrique d'utilisation » fait référence à la valeur de l'attribut usageMetric de cette source sur l'événement NrConsumption .

Optimisez votre ingestion de données

Nous avons également un didacticiel détaillé sur la façon d’optimiser l’ingestion de données.

Données ingérées en continu

Pour en savoir plus sur la diffusion en continu des données ingérées vers d'autres sources, consultez Exportation en continu.

Données provenant de plusieurs régions data center

Si vous avez des comptes dans plusieurs régions data center, découvrez comment comprendre votre utilisation.

Détails techniques sur le tableau d'ingestion

Quelques détails techniques sur l'UI d'ingestion :

• Displays are estimates. La valeur d'ingestion affichée sur le graphique d'ingestion peut varier légèrement du montant réel que vous pouvez voir lors de l'exécution de votre propre requête. Ceci est dû au fait que le calcul utilisé pour le graphique est une estimation.
• No chart data available. Le graphique d'ingestion de données peut afficher une période légèrement plus longue que celle couverte par vos paramètres de conservation des données. Pour cette raison, vous pouvez recevoir un message indiquant qu'aucune donnée graphique n'est disponible.
• Chart time buckets. Si un compte possède moins d'un téraoctet de données, nous calculons le volume sur une période de 24 heures ; sinon, nous le calculons sur une période d'une heure.