AWS Kinesis Data Analytics 모니터링 통합

중요

AWS CloudWatch Metric Streams 통합 을 활성화하여 사용자 지정 네임스페이스를 포함하여 AWS 서비스의 모든 CloudWatch 지표를 모니터링합니다. 개별 통합은 더 이상 권장되는 옵션이 아닙니다.

인프라 모니터링 통합 에는 AWS Kinesis Data Analytics 데이터를 당사 제품에 보고하기 위한 통합이 포함됩니다. 통합을 활성화하는 방법과 통합에서 수집하는 데이터에 대해 자세히 알아보세요.

통합 활성화

이 통합을 활성화하려면 AWS 서비스를 New Relic에 연결 하기 위한 표준 절차를 따르십시오.

구성 및 폴링

구성 옵션 을 사용하여 폴링 빈도를 변경하고 데이터를 필터링할 수 있습니다.

AWS Kinesis Data Analytics 통합에 대한 기본 폴링 정보:

New Relic 폴링 간격: 5분
Amazon CloudWatch 데이터 간격: 1분

데이터 찾기 및 사용

인프라 UI에서 통합 데이터를 찾으려면 one.newrelic.com > All capabilities > Infrastructure > AWS 으로 이동하여 통합을 선택하세요.

데이터는 다음 이벤트 유형 에 첨부됩니다.

실재	이벤트 유형	공급자
애플리케이션	`AwsKinesisAnalyticsApplicationSample`	`AwsKinesisAnalyticsApplication`
애플리케이션Kpu	`AwsKinesisAnalyticsApplicationSample`	`AwsKinesisAnalyticsApplication`
일	`AwsKinesisAnalyticsTaskSample`	`AwsKinesisAnalyticsTask`
작업 연산자	`AwsKinesisAnalyticsTaskOperatorSample`	`AwsKinesisAnalyticsTaskOperator`
작업 병렬성	`AwsKinesisAnalyticsTaskParallelismSample`	`AwsKinesisAnalyticsTaskParallelism`
TaskOperator 병렬 처리	`AwsKinesisAnalyticsTaskOperatorParallelismSample`	`AwsKinesisAnalyticsTaskOperatorParallelism`

데이터 사용 방법에 대한 자세한 내용은 통합 데이터 이해 및 사용 을 참조하십시오.

측정항목 데이터

이 통합은 Application, ApplicationKpu, Task, TaskOperator, TaskParallelism 및 TaskOperatorParallelism에 대한 AWS Kinesis Data Analytics 데이터를 수집합니다.

Kinesis Data Analytics 애플리케이션 데이터

미터법	유닛	설명
`bytesConsumedRate`	초당 바이트	주제에 대해 초당 사용된 평균 바이트 수입니다.
`commitsFailed`	세다	오프셋 커밋 및 체크포인트가 활성화된 경우 Kafka에 대한 오프셋 커밋 실패의 총 수입니다.
`commitsSucceeded`	세다	오프셋 커밋 및 체크포인트가 활성화된 경우 Kafka에 대한 성공적인 오프셋 커밋의 총 수입니다.
`cpuUtilization`	퍼센트	작업 관리자의 전체 CPU 사용률입니다. 예를 들어 5명의 작업 관리자가 있는 경우 Kinesis Data Analytics는 보고 간격당 이 지표의 5개 샘플을 게시합니다.
`currentInputWatermark`	밀리초	이 애플리케이션/운영자/작업/스레드가 받은 마지막 워터마크입니다.
`currentOutputWatermark`	밀리초	이 응용 프로그램/운영자/작업/스레드가 생성한 마지막 워터마크입니다.
`downtime`	밀리초	현재 실패/복구 상황에 있는 작업의 경우 이 중단 동안 경과된 시간입니다.
`fullRestarts`	세다	이 작업이 제출된 이후 완전히 다시 시작된 총 횟수입니다. 이 메트릭은 세분화된 다시 시작을 측정하지 않습니다.
`heapMemoryUtilization`	퍼센트	작업 관리자의 전체 힙 메모리 사용률입니다. 예를 들어 5명의 작업 관리자가 있는 경우 Kinesis Data Analytics는 보고 간격당 이 지표의 샘플 5개를 게시합니다.
`lastCheckpointDuration`	밀리초	마지막 체크포인트를 완료하는 데 걸린 시간입니다.
`lastCheckpointSize`	바이트	마지막 체크포인트의 전체 크기입니다.
`numRecordsInPerSecond`	CountPerSecond	이 운영자 또는 작업이 초당 수신한 총 레코드 수입니다.
`numRecordsOut`	세다	이 연산자 또는 작업이 내보낸 총 레코드 수입니다.
`numRecordsOutPerSecond`	CountPerSecond	이 연산자 또는 작업이 초당 내보낸 총 레코드 수입니다.
`numberOfFailedCheckpoints`	세다	체크포인트가 실패한 횟수입니다.
`numRecordsIn`	세다	이 운영자 또는 작업이 받은 총 레코드 수입니다.
`oldGenerationGcCount`	세다	모든 작업 관리자에서 발생한 이전 가비지 수집 작업의 총 수입니다.
`oldGenerationGcTime`	밀리초	이전 가비지 수집 작업을 수행하는 데 소요된 총 시간입니다.
`recordsLagMax`	세다	이 창의 모든 파티션에 대한 레코드 수의 최대 지연입니다.
`threadsCount`	세다	애플리케이션에서 사용하는 총 라이브 스레드 수입니다.
`uptime`	밀리초	작업이 중단 없이 실행된 시간입니다.
`bytes`	바이트	읽거나(입력 스트림당) 쓴 바이트 수(출력 스트림당).
`inputProcessing.DroppedRecords`	세다	삭제됨 상태로 표시된 Lambda 함수에서 반환된 레코드 수입니다.
`inputProcessing.Duration`	밀리초	Kinesis Data Analytics에서 수행한 각 AWS Lambda 함수 호출에 소요된 시간입니다.
`inputProcessing.OkBytes`	세다	Ok 상태로 표시된 Lambda 함수가 반환한 레코드의 바이트 합계입니다.
`inputProcessing.OkRecords`	세다	Ok 상태로 표시된 Lambda 함수에서 반환된 레코드 수입니다.
`inputProcessing.ProcessingFailedRecords`	세다	ProcessingFailed 상태로 표시된 Lambda 함수에서 반환된 레코드 수입니다.
`inputProcessing.Success`	세다	Kinesis Data Analytics의 성공적인 Lambda 호출 수입니다.
`lambdaDelivery.DeliveryFailedRecords`	세다	DeliveryFailed 상태로 표시된 Lambda 함수에서 반환된 레코드 수입니다.
`lambdaDelivery.Duration`	밀리초	Kinesis Data Analytics에서 수행한 각 Lambda 함수 호출에 소요된 시간입니다.
`lambdaDelivery.OkRecords`	세다	Ok 상태로 표시된 Lambda 함수에서 반환된 레코드 수입니다.
`millisBehindLatest`	밀리초	애플리케이션이 스트리밍 소스에서 읽는 현재 시간보다 얼마나 뒤쳐져 있는지 나타냅니다.
`records`	세다	읽거나(입력 스트림당) 기록된(출력 스트림당) 레코드 수입니다.
`success`	세다	응용 프로그램에 대해 구성된 대상에 대한 각 성공적인 배달 시도에 대해 1개, 실패한 모든 배달 시도에 대해 0입니다. 이 메트릭의 평균 값은 수행된 성공적인 배달 수를 나타냅니다.
`bytesRequestedPerFetch`	바이트	getRecords에 대한 단일 호출에서 요청된 바이트입니다.
`committedOffsets`	다른	각 파티션에 대해 Kafka에 마지막으로 성공적으로 커밋된 오프셋입니다. 특정 파티션의 메트릭은 주제 이름과 파티션 ID로 지정할 수 있습니다.
`currentOffsets`	다른	각 파티션에 대한 소비자의 현재 읽기 오프셋입니다. 특정 파티션의 메트릭은 주제 이름과 파티션 ID로 지정할 수 있습니다.

Kinesis Data Analytics 애플리케이션Kpu 데이터

미터법	유닛	설명
`KPUs`	세다	현재 사용 중인 Kinesis Processing Unit(KPU)의 수입니다. Known issue: 이 지표는 나머지 지표보다 지연 시간이 길어서 표시되지 않는 경우도 있습니다.

미터법

유닛

설명

KPUs

세다

현재 사용 중인 Kinesis Processing Unit(KPU)의 수입니다.

Known issue: 이 지표는 나머지 지표보다 지연 시간이 길어서 표시되지 않는 경우도 있습니다.

Kinesis Data Analytics 작업 데이터

미터법	유닛	설명
`commitsFailed`	세다	오프셋 커밋 및 체크포인트가 활성화된 경우 Kafka에 대한 오프셋 커밋 실패의 총 수입니다.
`commitsSucceeded`	세다	오프셋 커밋 및 체크포인트가 활성화된 경우 Kafka에 대한 성공적인 오프셋 커밋의 총 수입니다.
`currentInputWatermark`	밀리초	이 작업이 받은 마지막 워터마크입니다.
`currentOutputWatermark`	밀리초	현재 출력되는 워터마크입니다.
`numLateRecordsDropped`	세다	늦게 도착하여 이 작업이 삭제된 레코드 수입니다.
`numRecordsIn`	세다	이 작업이 받은 총 레코드 수입니다.
`numRecordsInPerSecond`	CountPerSecond	이 작업이 초당 받은 총 레코드 수입니다.
`numRecordsOut`	세다	이 작업에서 내보낸 총 레코드 수입니다.
`numRecordsOutPerSecond`	CountPerSecond	이 작업이 초당 내보낸 총 레코드 수입니다.
`recordsLagMax`	세다	이 창의 모든 파티션에 대한 레코드 수의 최대 지연입니다.

Kinesis Data Analytics TaskOperator 데이터

미터법	유닛	설명
`bytesConsumedRate`	초당 바이트	주제에 대해 초당 사용된 평균 바이트 수입니다.
`commitsFailed`	세다	오프셋 커밋 및 체크포인트가 활성화된 경우 Kafka에 대한 오프셋 커밋 실패의 총 수입니다.
`commitsSucceeded`	세다	오프셋 커밋 및 체크포인트가 활성화된 경우 Kafka에 대한 성공적인 오프셋 커밋의 총 수입니다.
`currentInputWatermark`	밀리초	이 작업이 받은 마지막 워터마크입니다.
`currentOutputWatermark`	밀리초	이 응용 프로그램/운영자/작업/스레드가 생성한 마지막 워터마크입니다.
`numLateRecordsDropped`	세다	이 운영자 또는 작업이 늦게 도착하여 삭제한 레코드 수입니다.
`numRecordsIn`	세다	이 작업이 받은 총 레코드 수입니다.
`numRecordsInPerSecond`	CountPerSecond	이 작업이 초당 받은 총 레코드 수입니다.
`numRecordsOut`	세다	이 작업에서 내보낸 총 레코드 수입니다.
`numRecordsOutPerSecond`	CountPerSecond	이 작업이 초당 내보낸 총 레코드 수입니다.
`recordsLagMax`	세다	이 창의 모든 파티션에 대한 레코드 수의 최대 지연입니다.

Kinesis Data Analytics Task병렬성 데이터

미터법	유닛	설명
`currentInputWatermark`	밀리초	이 애플리케이션/운영자/작업/스레드가 받은 마지막 워터마크입니다.
`numLateRecordsDropped`	세다	늦게 도착하여 이 작업이 삭제된 레코드 수입니다.
`numRecordsIn`	세다	이 작업이 받은 총 레코드 수입니다.
`numRecordsInPerSecond`	CountPerSecond	이 작업이 초당 받은 총 레코드 수입니다.
`numRecordsOut`	세다	이 작업에서 내보낸 총 레코드 수입니다.
`numRecordsOutPerSecond`	CountPerSecond	이 작업이 초당 내보낸 총 레코드 수입니다.

Kinesis Data Analytics TaskOperatorParallelism 데이터

미터법	유닛	설명
`bytesConsumedRate`	초당 바이트	주제에 대해 초당 사용된 평균 바이트 수입니다.
`commitsFailed`	세다	오프셋 커밋 및 체크포인트가 활성화된 경우 Kafka에 대한 오프셋 커밋 실패의 총 수입니다.
`commitsSucceeded`	세다	오프셋 커밋 및 체크포인트가 활성화된 경우 Kafka에 대한 성공적인 오프셋 커밋의 총 수입니다.
`currentInputWatermark`	밀리초	이 애플리케이션/운영자/작업/스레드가 받은 마지막 워터마크입니다.
`currentOutputWatermark`	밀리초	이 응용 프로그램/운영자/작업/스레드가 생성한 마지막 워터마크입니다.
`numRecordsIn`	세다	이 운영자 또는 작업이 받은 총 레코드 수입니다.
`numRecordsInPerSecond`	CountPerSecond	이 운영자 또는 작업이 초당 수신한 총 레코드 수입니다.
`numRecordsOut`	세다	이 연산자 또는 작업이 내보낸 총 레코드 수입니다.
`numRecordsOutPerSecond`	CountPerSecond	이 연산자 또는 작업이 초당 내보낸 총 레코드 수입니다.
`recordsLagMax`	세다	이 창의 모든 파티션에 대한 레코드 수의 최대 지연입니다.

사용자의 편의를 위해 제공되는 기계 번역입니다.