Dans cette section, vous explorerez l'architecture pipeline d'ingestion, qui représente visuellement la manière dont vos données télémétriques circulent dans le système. Vous verrez comment l’utilisation de règles de gateway et de cloud peut avoir un impact sur le volume de données et optimiser votre stratégie de gestion des données.
Composants de votre pipeline d'ingestion
Sources MELT :
- Métriques, événements, logs et traces (MELT) : ce sont les principaux types de données d'observabilité que vous collectez à partir de diverses sources. Ils constituent le point de départ de votre pipeline d’ingestion.
Lignes de flux de données :
- Des lignes émanent de chaque source MELT, représentant les données envoyées au NRDB. Chaque ligne est annotée avec un volume de données, mesuré en millions (M), indiquant la quantité de volume de données en transit.
Porte:
- Située entre les sources MELT et les règles cloud, le gateway agit comme un filtre, appliquant vos règles définies par l'utilisateur pour supprimer les données de faible valeur avant qu'elles ne quittent votre réseau. Cela réduit le volume de données envoyé au NRDB, optimisant ainsi les coûts de stockage et de sortie.
Règles du cloud :
- Les règles du cloud sont appliquées dans le cloud New Relic, filtrant davantage les données avant qu'elles n'atteignent la NRDB. Le diagramme indique le nombre de règles cloud opérationnelles.
NRDB :
- La base de données New Relic (NRDB) est la destination finale des données traitées. Il stocke les données télémétriques affinées, prêtes pour votre analyse et visualisation.
Représentation visuelle
La vue du pipeline d'ingestion est organisée en trois sections principales qui présentent votre workflow de traitement des données :
Sources :
- Displays the four telemetry types (Metrics, Event, Logs, Traces) that agents and collectors send to New Relic. Each source shows the data volume flowing through the pipeline. This represents the entry points for your observability data.
Porte:
- Affiche les cartes de configuration des processeurs qui transforment et filtrent vos données. Chaque processeur (Règle d'échantillonnage, Filtre, Transformation) affiche l'état actuel de sa configuration et ses règles. Vous pouvez visualiser et gérer la façon dont les données sont traitées avant qu'elles ne quittent votre infrastructure.
Cloud :
- Indicates cloud rules running in New Relic's infrastructure. Shows the number of active rules (for example, "0 rules" when no cloud rules are configured). This represents additional filtering applied after data reaches New Relic endpoints.