• 로그인

사용자의 편의를 위해 제공되는 기계 번역입니다.

영문본과 번역본이 일치하지 않는 경우 영문본이 우선합니다. 보다 자세한 내용은 이 페이지를 방문하시기 바랍니다.

문제 신고

AWS Glue 모니터링 통합

중요

AWS CloudWatch Metric Streams 통합 을 활성화하여 사용자 지정 네임스페이스를 포함하여 AWS 서비스의 모든 CloudWatch 지표를 모니터링합니다. 개별 통합은 더 이상 권장되는 옵션이 아닙니다.

New Relic은 AWS Glue 데이터 보고를 위한 통합을 제공합니다. 이 문서에서는 이 통합을 활성화하는 방법과 보고할 수 있는 데이터에 대해 설명합니다.

통합 활성화

이 통합을 활성화하려면 AWS 서비스를 New Relic에 연결 하기 위한 표준 절차를 따르십시오.

구성 및 폴링

구성 옵션 을 사용하여 폴링 빈도를 변경하고 데이터를 필터링할 수 있습니다.

AWS Glue 통합에 대한 기본 폴링 정보:

  • New Relic 폴링 간격: 5분
  • Amazon CloudWatch 데이터 간격: 1분

데이터 찾기 및 사용

통합 데이터를 찾으려면 one.newrelic.com > Infrastructure > AWS 로 이동하여 통합을 선택하십시오.

다음 이벤트 유형 을 사용 하여 데이터를 쿼리하고 탐색할 수 있습니다.

실재

이벤트 유형

공급자

직업

AwsGlueJobSample

AwsGlueJob

데이터 사용 방법에 대한 자세한 내용은 통합 데이터 이해 및 사용 을 참조하십시오.

측정항목 데이터

이 통합은 작업에 대한 AWS Glue 데이터를 수집합니다.

글루 작업 데이터

미터법

유닛

설명

glue.driver.aggregate.bytesRead

바이트

모든 실행기에서 실행되는 완료된 모든 Spark 작업이 모든 데이터 소스에서 읽은 바이트 수입니다.

glue.driver.aggregate.elapsedTime

밀리초

ETL 경과 시간(밀리초)입니다(작업 부트스트랩 시간은 포함하지 않음).

glue.driver.aggregate.numCompletedStages

세다

작업에서 완료된 단계의 수입니다.

glue.driver.aggregate.numCompletedTasks

세다

작업에서 완료된 작업의 수입니다.

glue.driver.aggregate.numFailedTasks

세다

실패한 작업의 수입니다.

glue.driver.aggregate.numKilledTasks

세다

죽인 작업의 수입니다.

glue.driver.aggregate.recordsRead

세다

모든 실행기에서 실행되는 완료된 모든 Spark 작업이 모든 데이터 소스에서 읽은 레코드 수입니다.

glue.driver.aggregate.shuffleBytesWritten

바이트

이전 보고서 이후 모든 실행자가 데이터를 섞기 위해 작성한 바이트 수(AWS Glue 지표 대시보드에서 이전 1분 동안 이 목적으로 작성된 바이트 수로 집계).

glue.driver.aggregate.shuffleLocalBytesRead

바이트

이전 보고서 이후 모든 실행자가 데이터를 섞기 위해 읽은 바이트 수(AWS Glue 지표 대시보드에서 이전 1분 동안 이 목적을 위해 읽은 바이트 수로 집계).

glue.driver.BlockManager.disk.diskSpaceUsed_MB

바이트

모든 실행기에서 사용된 디스크 공간의 메가바이트 수입니다.

glue.driver.ExecutorAllocationManager.executors.numberAllExecutors

세다

활성 실행 중인 작업 실행기의 수입니다.

glue.driver.ExecutorAllocationManager.executors.numberMaxNeededExecutors

세다

현재 로드를 충족시키는 데 필요한 최대(현재 실행 중 및 보류 중인) 작업 실행기의 수입니다.

glue.driver.jvm.heap.usage

퍼센트

이 드라이버에 대해 JVM 힙에서 사용하는 메모리 비율(스케일: 0-1) 드라이버용입니다.

glue.ALL.jvm.heap.usage

퍼센트

모든 실행기에 대해 이 드라이버(스케일: 0-1)에 대해 JVM 힙에서 사용하는 메모리 비율입니다.

glue.driver.jvm.heap.used

바이트

드라이버의 JVM 힙에서 사용하는 메모리 바이트 수입니다.

glue.ALL.jvm.heap.used

바이트

모든 실행기의 JVM 힙에서 사용하는 메모리 바이트 수입니다.

glue.driver.s3.filesystem.read_bytes

바이트

이전 보고서 이후 드라이버가 Amazon S3에서 읽은 바이트 수(AWS Glue 지표 대시보드에서 이전 1분 동안 읽은 바이트 수로 집계).

glue.ALL.s3.filesystem.read_bytes

바이트

이전 보고서 이후 모든 실행자가 Amazon S3에서 읽은 바이트 수(AWS Glue 지표 대시보드에서 이전 1분 동안 읽은 바이트 수로 집계).

glue.driver.s3.filesystem.write_bytes

바이트

이전 보고서 이후 드라이버가 Amazon S3에 쓴 바이트 수(AWS Glue 지표 대시보드에서 이전 1분 동안 쓴 바이트 수로 집계).

glue.ALL.s3.filesystem.write_bytes

바이트

이전 보고서 이후 모든 실행자가 Amazon S3에 쓴 바이트 수(AWS Glue 지표 대시보드에서 이전 1분 동안 쓴 바이트 수로 집계).

glue.driver.system.cpuSystemLoad

퍼센트

드라이버가 사용한 CPU 시스템 부하 비율(스케일: 0-1).

glue.ALL.system.cpuSystemLoad

퍼센트

모든 실행기에서 사용된 CPU 시스템 부하의 비율(스케일: 0-1).

Copyright © 2022 New Relic Inc.

This site is protected by reCAPTCHA and the Google Privacy Policy and Terms of Service apply.