Integración de Amazon Managed Kafka (MSK)

Importante

Habilite la integraciónAWS CloudWatch Metric Streams para monitor todas las métricas de CloudWatch desde sus servicios de AWS, incluido el espacio de nombres personalizado. La integración individual ya no es nuestra opción recomendada.

New Relic ofrece una integración para recopilar sus datos de Amazon Web Services Managed Streaming para Apache Kafka . Este documento explica cómo activar esta integración y describe los datos que se pueden reportar.

Activar la integración

Para habilitar esta integración, siga los procedimientos estándar para conectar los servicios de AWS a New Relic.

Configuración y sondeo

Para cambiar la frecuencia de sondeo y filtrar datos, utilice las opciones de configuración.

Información de sondeo predeterminada para la integración de Amazon Managed Kafka:

New Relic intervalo de sondeo: 5 minutos
Intervalo de datos de Amazon CloudWatch: 1 minuto

Ver y usar datos

Para ver sus datos de integración, vaya a one.newrelic.com > All capabilities > Infrastructure > AWS y seleccione una integración.

Puedes consultar y explorar tus datos utilizando el siguiente tipo de evento:

Entidad	Tipo de evento	Proveedor
Grupo	`AwsMskClusterSample`	`AwsMskCluster`
Corredor	`AwsMskBrokerSample`	`AwsMskBroker`
Tema	`AwsMskTopicSample`	`AwsMskTopic`

Para obtener más información sobre cómo utilizar sus datos, consulte Comprender y utilizar los datos de integración.

Datos métricos

Esta integración registra datos de Amazon Managed Kafka para clúster, broker y entidad temática.

Datos administrados del clúster Kafka

Métrica	Unidad	Descripción
`activeControllerCount`	Contar	Sólo un controlador por clúster debe estar activo en un momento dado.
`globalPartitionCount`	Contar	Número total de particiones en todos los intermediarios del clúster.
`globalTopicCount`	Contar	Número total de temas en todos los corredores del clúster.
`offlinePartitionsCount`	Contar	Número total de particiones que están fuera de línea en el clúster.

Datos gestionados de Kafka Broker

Métrica	Unidad	Descripción
`bytesInPerSec`	Bytes por segundo	El número de bytes por segundo recibidos de los clientes.
`bytesOutPerSec`	Bytes por segundo	El número de bytes por segundo enviados a los clientes.
`cpuSystem`	Por ciento	El porcentaje de CPU en el espacio del kernel.
`cpuUser`	Por ciento	El porcentaje de CPU en el espacio de usuario.
`cpuIdle`	Por ciento	El porcentaje de tiempo de inactividad de la CPU.
`fetchConsumerLocalTimeMsMean`	Milisegundos	El tiempo medio en milisegundos que se procesa la solicitud del consumidor en el líder.
`fetchConsumerRequestQueueTimeMsMean`	Milisegundos	El tiempo medio en milisegundos que la solicitud del consumidor espera en la cola de solicitudes.
`fetchConsumerResponseQueueTimeMsMean`	Milisegundos	El tiempo medio en milisegundos que la solicitud del consumidor espera en la cola de respuestas.
`fetchConsumerResponseSendTimeMsMean`	Milisegundos	El tiempo medio en milisegundos para que el consumidor envíe una respuesta.
`fetchConsumerTotalTimeMsMean`	Milisegundos	El tiempo total medio en milisegundos que el consumidor dedica a obtener datos del corredor.
`fetchFollowerLocalTimeMsMean`	Milisegundos	El tiempo medio en milisegundos que se procesa la solicitud del seguidor en el líder.
`fetchFollowerRequestQueueTimeMsMean`	Milisegundos	El tiempo medio en milisegundos que la solicitud del seguidor espera en la cola de solicitudes.
`fetchFollowerResponseQueueTimeMsMean`	Milisegundos	El tiempo medio en milisegundos que la solicitud del seguidor espera en la cola de respuestas.
`fetchFollowerResponseSendTimeMsMean`	Milisegundos	El tiempo medio en milisegundos para que el seguidor envíe una respuesta.
`fetchFollowerTotalTimeMsMean`	Milisegundos	El tiempo total medio en milisegundos que los seguidores dedican a obtener datos del corredor.
`fetchMessageConversionsPerSec`	ContarPorSegundo	El número de conversiones de mensajes de recuperación por segundo para el intermediario.
`fetchThrottleTime`	Milisegundos	El tiempo medio de aceleración de recuperación en milisegundos.
`fetchThrottleByteRate`	Bytes por segundo	El número de bytes limitados por segundo.
`fetchThrottleQueueSize`	Contar	El número de mensajes en la cola de aceleración.
`kafkaAppLogsDiskUsed`	Por ciento	El porcentaje de espacio en disco utilizado para el registro de la aplicación.
`kafkaDataLogsDiskUsed`	Por ciento	El porcentaje de espacio en disco utilizado para el registro de datos.
`leaderCount`	Contar	El número de réplicas de líder.
`memoryBuffered`	Bytes	El tamaño en bytes de la memoria intermedia del intermediario.
`memoryCached`	Bytes	El tamaño en bytes de la memoria caché del intermediario.
`memoryFree`	Bytes	El tamaño en bytes de memoria libre y disponible para el intermediario.
`memoryUsed`	Bytes	El tamaño en bytes de memoria que está utilizando el intermediario.
`messagesInPerSec`	ContarPorSegundo	El número de mensajes entrantes por segundo para el intermediario.
`networkProcessorAvgIdlePercent`	Por ciento	El porcentaje promedio de tiempo que los procesadores de la red están inactivos.
`networkRxDropped`	Contar	El número de paquetes de recepción descartados.
`networkRxErrors`	Contar	La cantidad de errores de recepción de red para el corredor.
`networkRxPackets`	Contar	El número de paquetes recibidos por el corredor.
`networkTxDropped`	Contar	El número de paquetes de transmisión descartados.
`networkTxErrors`	Contar	La cantidad de errores de transmisión de red para el corredor.
`networkTxPackets`	Contar	El número de paquetes transmitidos por el corredor.
`partitionCount`	Contar	El número de particiones del corredor.
`produceLocalTimeMsMean`	Milisegundos	El tiempo medio en milisegundos para que el seguidor envíe una respuesta.
`produceMessageConversionsPerSec`	ContarPorSegundo	El número de conversiones de mensajes producidos por segundo para el intermediario.
`produceMessageConversionsTimeMsMean`	Milisegundos	El tiempo medio en milisegundos dedicado a las conversiones de formato de mensaje.
`produceRequestQueueTimeMsMean`	Milisegundos	El tiempo medio en milisegundos que los mensajes de solicitud pasan en la cola.
`produceResponseQueueTimeMsMean`	Milisegundos	El tiempo medio en milisegundos que los mensajes de respuesta pasan en la cola.
`produceResponseSendTimeMsMean`	Milisegundos	El tiempo medio en milisegundos dedicado al envío de mensajes de respuesta.
`produceTotalTimeMsMean`	Milisegundos	El tiempo medio de producción en milisegundos.
`produceThrottleTime`	Milisegundos	El tiempo promedio de aceleración de producción es en milisegundos.
`produceThrottleByteRate`	Bytes por segundo	El número de bytes limitados por segundo.
`produceThrottleQueueSize`	Contar	El número de mensajes en la cola de aceleración.
`requestBytesMean`	Contar	El número medio de bytes de solicitud para el intermediario.
`requestExemptFromThrottleTime`	Milisegundos	El tiempo promedio dedicado a la red de intermediarios y a los subprocesos de E/S para procesar solicitudes que están exentas de limitación.
`requestHandlerAvgIdlePercent`	Por ciento	El porcentaje promedio de tiempo que los subprocesos del controlador de solicitudes están inactivos.
`requestThrottleQueueSize`	Contar	El número de mensajes en la cola de aceleración.
`requestThrottleTime`	Milisegundos	El tiempo promedio de aceleración de solicitudes en milisegundos.
`requestTime`	Milisegundos	El tiempo promedio dedicado a la red de intermediarios y a los subprocesos de E/S para procesar las solicitudes.
`rootDiskUsed`	Por ciento	El porcentaje del disco raíz utilizado por el intermediario.
`swapUsed`	Bytes	El tamaño en bytes de la memoria de intercambio que está utilizando el intermediario.
`swapFree`	Bytes	El tamaño en bytes de la memoria de intercambio que está disponible para el intermediario.
`underMinIsrPartitionCount`	Contar	El número de particiones inferiores a minIsr para el intermediario.
`underReplicatedPartitions`	Contar	El número de particiones poco replicadas para el intermediario.
`zooKeeperRequestLatencyMsMean`	Milisegundos	Latencia media en milisegundos para las solicitudes de ZooKeeper del corredor.
`zooKeeperSessionState`	Otro	Estado de conexión de la sesión de ZooKeeper del corredor, que puede ser uno de los siguientes: NOT_CONNECTED: '0.0', ASSOCIATING: '0.1', CONNECTING: '0.5', CONNECTEDREADONLY: '0.8', CONNECTED: '1.0', CLOSED: '5.0', AUTH_FAILED: '10.0'.

Datos de temas de Kafka administrados

Métrica	Unidad	Descripción
`bytesInPerSec`	Bytes por segundo	El número de bytes recibidos por segundo.
`bytesOutPerSec`	Bytes por segundo	El número de bytes enviados por segundo.
`fetchMessageConversionsPerSec`	ContarPorSegundo	El número de mensajes recuperados convertidos por segundo.
`messagesInPerSec`	ContarPorSegundo	El número de mensajes recibidos por segundo.
`produceMessageConversionsPerSec`	ContarPorSegundo	El número de conversiones por segundo de los mensajes producidos.

Te ofrecemos esta traducción automática para facilitar la lectura.