지연시간 급증이나 오류 급증에 대한 공지가 발생할 때, 첫 번째 과제는 문제가 어디에 있는지 찾는 것입니다. 표준 워크플로우는 조사 컨텍스트를 유지하는 대신 필터링되지 않은 수천 개의 트레이스 목록으로 이동시킵니다 ― 이는 문제를 보여주는 단일 트레이스를 찾기 위해 수동으로 필터를 다시 작성하고 데이터를 조사하도록 강제합니다.
Intelligent Exemplar (IE) 이러한 검색을 제거합니다. 클릭의 정확한 컨텍스트를 유지하고, 알고리즘을 통해 이상 징후를 가장 잘 나타내는 트레이스를 표면화하며, 실패한 스팬으로 직접 이동시켜 줍니다 ― 따라서 몇 시간이 아닌 몇 번의 클릭만으로 스파이크에서 루트 스팬으로 이동할 수 있습니다.
실패한 스팬을 식별한 후에는 속성 상관관계 분석 을 사용하여 이상 징후 트레이스를 정상적인 기준과 통계적으로 비교하고 문제를 일으키는 특정 속성을 표시함으로써 실패하는 이유 를 확인하십시오.
인텔리전트 이그젬플러 작동 방식
IE는 세 가지 동작을 결합하여 상위 레벨 메트릭과 필요한 정확한 코드 레벨 트레이스 사이의 간격을 좁힙니다:
컨텍스트 보존 지원되는 오류 또는 지연시간 차트에서 시간 창을 클릭하면 Intelligent Exemplar 은(는) 해당 순간 범위 내의 모든 항목을 캡처합니다: 엔티티, 정확한 시간 범위, transaction.name 또는 error.class와 같은 활성 필터, 선택한 패싯. 이들은 백앤드로 기본적으로 전달됩니다. 일반적이고 필터링되지 않은 트레이스 목록으로 이동되지 않습니다.
알고리즘 트레이스 우선순위 지정 무작위 또는 시간순으로 정렬된 샘플을 표시하는 대신, Intelligent Exemplar 은(는) 전체 트레이스 데이터 세트를 평가하고 이상 징후를 가장 잘 나타내는 최대 500개의 트레이스로 구성된 선별된 목록을 표시합니다. 조각난 트레이스는 자동으로 필터링됩니다. 트레이스는 스파이크 창 내에 속하는 발생에 가중치가 부여됩니다. 단일 트랜잭션 이름, 호스트 또는 배포 버전과 같은 단일 변수가 이상 징후 트레이스의 60% 이상을 차지하는 경우, 제안된 시작점으로 자동으로 표시됩니다.
이상 징후 스팬 탐색 목록에서 트레이스를 선택하면 UI가 루트 스팬이나 전체적으로 가장 느린 스팬이 아니라 해당 작업의 기준 동작에서 가장 많이 벗어난 스팬인 이상 징후 스팬으로 직접 이동합니다. 여러 다운스트림 서비스에 걸쳐 있는 200개 스팬의 워터폴에서 이는 문제가 발생한 위치를 찾는 데 필요한 수동 탐색을 제거합니다.
요구 사항
Intelligent Exemplar 사용 전:
- 서비스에 대해 분산 추적 을 활성화해야 합니다.
- 트레이스 경로에서 계측된 서비스가 많을수록 다운스트림 종속성 맵이 더 완전해집니다. 계측되지 않은 서비스는 인과 경로에 공백을 만듭니다.
조사 시작
Intelligent Exemplar 세 위치의 오류 및 지연시간 차트에서 사용할 수 있습니다:
- APM & Services > Summary: 웹 트랜잭션 시간 차트 및 오류율 차트
- Errors Inbox: Errors Inbox 홈페이지의 오류 및 지연시간 차트
- Transactions: Transactions 홈페이지의 오류 및 지연시간 차트
세 위치 모두에서 단계는 동일합니다:
- 조사하려는 급증에 해당하는 오류 또는 지연시간 차트의 시간 창을 클릭합니다.
- 나타나는 툴팁에서 Intelligent Traces을(를) 선택합니다.
랜딩 페이지를 검토합니다
급증 창을 선택하면 해당 서비스 및 시간 범위에 대한 이상 동작의 전체 그림과 함께 Intelligent Exemplar 랜딩 페이지가 열립니다. 쿼리 작성이나 수동 필터 설정이 필요하지 않습니다 ― 클릭한 컨텍스트가 이미 적용되어 있습니다.
랜딩 페이지에는 네 가지 구성 요소가 있습니다:
요약 표시줄
시간 범위, 이상 징후 유형(지연시간 또는 오류) 및 해당 기간 동안 식별된 이상치 트레이스 수를 표시합니다.
감지된 패턴
이상 징후가 발생하는 위치와 원인을 식별하는 분류된 신호입니다. 하나 이상의 패턴을 선택하여 특정 신호에 대한 이상치 트레이스 목록에 집중할 수 있습니다.
무늬 | 의미 |
|---|---|
다운스트림 지연시간 | 종속성의 p95 또는 p99 지연시간은 중심 엔티티의 스파이크와 상관관계가 있습니다. 근본 원인은 시작한 서비스의 다운스트림 서비스에 있을 가능성이 높습니다. |
다운스트림 오류 | 급증 창 동안 다운스트림 서비스의 오류율이 증가했습니다. 이상 징후가 종속성에서 전파되고 있습니다. |
중심 엔티티 지연시간 | 시작한 서비스 자체가 지연시간 소스입니다 ― 문제는 다운스트림 종속성으로 인해 발생하지 않습니다. |
처리량 급증 | 중심 엔티티 또는 다운스트림 엔티티의 요청 볼륨 급증은 지연시간 또는 오류 급증과 상관관계가 있습니다. 이상 징후는 코드나 인프라 오류가 아니라 로드로 인해 발생한 것일 수 있습니다. |
팁
단일 패턴이 이상 징후 트레이스의 60% 이상을 차지하는 경우, Intelligent Exemplar 은(는) 이를 제안된 시작점으로 자동 선택합니다. 선택을 취소하고 다른 패턴을 선택하여 대안 가설을 탐색할 수 있습니다.
이상치 트레이스
선택한 창 내에서 이상 징후 동작을 나타내는 트레이스의 순위 목록입니다. 트레이스는 스파이크에 대한 기여도에 따라 정렬됩니다. 트레이스를 선택하여 열고 이상 징후 스팬으로 직접 이동합니다.
산점도
타임 윈도우 내의 이상치 트레이스와 다른 모든 트레이스의 시각적 비교.
- X-axis: 선택한 창 내의 시간
- Y-axis: 트레이스 기간(지연시간 조사의 경우) 또는 오류 수
- Outlier traces All Traces 기준 시리즈와 뚜렷하게 구분되어 표시됩니다.
산점도를 사용하여 이상치 트레이스가 전체 시간 범위에 걸쳐 무작위로 분포되는 대신 스파이크 윈도우 주변에 클러스터를 형성하는지 확인합니다. 밀집된 클러스터는 이상 징후가 특정 시간에 국한되며 선택한 트레이스가 스파이크를 제대로 나타낸다는 것을 확인해 줍니다.
이상 징후 스팬 검사
이상치 목록에서 트레이스를 선택하면 트레이스 세부 정보 패널이 열립니다. Intelligent Exemplar 은(는) 루트 스팬으로 이동하지 않습니다 ― 해당 작업에 대해 예상되는 기준 동작에서 가장 많이 벗어난 스팬으로 직접 이동합니다.
이는 깊고 다중 서비스로 구성된 트레이스에서 가장 중요합니다. 5개의 다운스트림 서비스를 교차하는 200개 스팬의 워터폴에서, 이상 징후 스팬은 처음에 의심하지 않았던 종속성의 여러 계층 깊숙이 묻혀 있을 수 있습니다. Intelligent Exemplar 은(는) 자동으로 해당 위치로 이동합니다.
이상 징후 스팬에서 다음을 수행할 수 있습니다:
- 스팬 속성을 검토하여 기준에서 벗어난 값을 확인합니다
- 스팬을 소유한 엔티티로 이동하여 APM 요약을 확인합니다
- 추가 컨텍스트를 위해 워터폴에서 주변 스팬 보기
- 속성 상관관계 분석 을 실행하여 이상 징후를 유발하는 특정 속성-값 쌍을 식별합니다 ― 예: 배포 버전, 호스트 또는 오류 클래스
트레이스 세부 정보 및 스팬 속성 작업에 대한 전체 가이드는 트레이스 세부 정보 UI 페이지 이해하기를 참조하십시오.
다운스트림 상관관계 이해
이상 징후가 다운스트림 종속성에서 발생하는 경우, Intelligent Exemplar 은(는) 서비스 종속성 그래프 전체에서 인과적 전파 경로를 매핑합니다.
시스템은 다운스트림 엔티티 전반에 걸쳐 상관관계가 있는 지연시간 및 오류 패턴을 자동으로 분석하고 전체 실패에 대한 각 경로의 기여도를 계산합니다.
팁
트레이스 경로 전반에 걸쳐 더 완전한 계측은 더 정확한 다운스트림 기여도를 생성합니다. 다운스트림 서비스가 계측되지 않은 경우, 해당 기여도는 상관관계 맵에 나타나지 않습니다.
무엇 향후 계획
- 근본 원인 식별: 속성 상관관계 분석 을 실행하여 배포 버전, 호스트, 리전 또는 오류 클래스와 같이 이상 징후의 원인이 되는 특정 속성-값 쌍을 식별합니다.
- 트레이스 볼륨 관리: 인시던트 중 및 이후에 트레이스 수집 비용을 관리하려면 분산 추적 데이터 수집 제어 를 참조하십시오.
- 샘플링 조정: 영향을 받는 서비스의 샘플링 속도를 조정하려면 샘플링 구성 을 참조하십시오.