Integración de monitoreo Google Cloud Dataproc

La integración de New Relic incluye una integración para informar sus datos de GCP Dataproc a nuestros productos. Aquí te explicamos cómo activar la integración y qué datos recopila.

Activar la integración

Para habilitar la integración, siga los procedimientos estándar para conectar su servicio GCP a New Relic.

Configuración y sondeo

Puede cambiar la frecuencia de sondeo y filtrar datos usando las opciones de configuración.

Información de sondeo predeterminada para la integración de GCP Dataproc:

New Relic intervalo de sondeo: 5 minutos

Buscar y utilizar datos

Para encontrar sus datos de integración, vaya a one.newrelic.com > All capabilities > Infrastructure > GCP y seleccione una integración.

Los datos se adjuntan al siguiente tipo de evento:

Entidad	Tipo de evento	Proveedor
Grupo	`GcpDataprocClusterSample`	`GcpDataprocCluster`

Para obtener más información sobre cómo utilizar sus datos, consulte Comprender y utilizar los datos de integración.

Datos métricos

Esta integración recopila datos de GCP Dataproc para clúster.

Datos del clúster de procesamiento de datos

Métrica	Unidad	Descripción
`cluster.hdfs.Datanodes`	Contar	Indica la cantidad de HDFS DataNodes que se ejecutan dentro de un clúster.
`cluster.hdfs.StorageCapacity`	Gibibytes	Indica la capacidad del sistema HDFS que se ejecuta en el clúster en GB.
`cluster.hdfs.StorageUtilization`	Por ciento	El porcentaje de almacenamiento HDFS utilizado actualmente.
`cluster.hdfs.UnhealthyBlocks`	Contar	Indica la cantidad de bloques en mal estado dentro del clúster.
`cluster.job.CompletionTime`	Segundos	El tiempo que tardaron en completarse los trabajos desde el momento en que el usuario envía un trabajo hasta el momento en que Dataproc informa que se completó.
`cluster.job.Duration`	Segundos	El tiempo que los trabajos han pasado en un estado determinado.
`cluster.job.Failures`	Contar	Indica la cantidad de trabajos que han fallado en un clúster.
`cluster.job.Running`	Contar	Indica el número de trabajos que se ejecutan en un clúster.
`cluster.job.Submitted`	Contar	Indica el número de trabajos que se han enviado a un clúster.
`cluster.operation.CompletionTime`	Segundos	El tiempo que tardaron en completarse las operaciones desde el momento en que el usuario envía una operación hasta el momento en que Dataproc informa que se completó.
`cluster.operation.Duration`	Segundos	El tiempo que las operaciones han permanecido en un estado determinado.
`cluster.operation.Failures`	Contar	Indica el número de operaciones que han fallado en un clúster.
`cluster.operation.Running`	Contar	Indica el número de operaciones que se ejecutan en un clúster.
`cluster.operation.Submitted`	Contar	Indica el número de operaciones que se han enviado a un clúster.
`cluster.yarn.AllocatedMemoryPercentage`	Por ciento	Se asigna el porcentaje de memoria YARN.
`cluster.yarn.Apps`	Contar	Indica el número de aplicaciones YARN activas.
`cluster.yarn.Containers`	Contar	Indica el número de contenedor YARN.
`cluster.yarn.MemorySize`	Gibibytes	Indica el tamaño de la memoria YARN en GB.
`cluster.yarn.Nodemanagers`	Contar	Indica la cantidad de YARN NodeManagers que se ejecutan dentro del clúster.
`cluster.yarn.PendingMemorySize`	Gibibytes	La solicitud de memoria actual, en GB, que está pendiente de ser cumplida por el programador.
`cluster.yarn.VirtualCores`	Contar	Indica el número de núcleos virtuales en YARN.