로그 전달을 위한 Fluentd 플러그인

Fluentd에서 이미 로그 데이터를 모니터링하고 있는 경우 Fluentd 통합을 사용하여 뉴렐릭에서 로그 데이터를 전달하고 강화할 수 있습니다.

Fluentd 로그를 뉴렐릭으로 전달하면 로그 데이터를 수집, 처리, 탐색, 쿼리 및 알림 설정할 수 있는 향상된 로그 관리 기능이 제공됩니다.

기본 프로세스

로그 관리 기능을 활성화하려면:

1. 다음 사항이 있는지 확인합니다.

• New Relic

  계정 라이선스 키

• Fluentd 1.0 이상

2. Fluentd 플러그인을 설치합니다.
3. Fluentd 플러그인을 구성합니다.
4. 해당하는 경우 EU 엔드포인트를 구성합니다.
5. Fluentd 플러그인을 테스트합니다.
6. 트래픽을 생성하고 몇 분 정도 기다린 다음, 계정에서 데이터를 확인합니다.

Fluentd 플러그인 설치

Fluentd 플러그인을 설치하려면:

fluent-gem install fluent-plugin-newrelic

td-agent-gem install fluent-plugin-newrelic

Fluentd 플러그인 구성

Fluentd 플러그인을 구성하려면:

1. fluent.conf 파일 또는 td-agent.conf에서 td-agent를 사용하는 경우, 다음 데이터 블록을 추가하고, 자리 표시자 텍스트를

   계정 라이선스 키

   로 대체합니다.

#Tail one or more log files
<source>
  @type tail
  <parse>
    @type none
  </parse>
  path /path/to/file
  tag example.service
</source>

#Add hostname and service_name to all events with "example.service" tag
<filter example.service>
  @type record_transformer
  <record>
    service_name ${tag}
    hostname "#{Socket.gethostname}"
  </record>
</filter>

#Forward all events to New Relic
<match **>
  @type newrelic
  license_key YOUR_LICENSE_KEY
</match>

2. 변경 사항이 적용되었는지 확인하려면 Fluentd 서비스를 다시 시작합니다.

EU 계정용 Fluentd 플러그인 구성

기본적으로 Fluentd 플러그인은 미국의 엔드포인트 https://log-api.newrelic.com/log/v1으로 로그를 전달합니다. 귀사의 뉴렐릭 조직이 EU 데이터 센터에 있는 경우 수동으로 base_uri 속성을 EU 엔드포인트로 설정해야 합니다. 예를 들어:

#Tail one or more log files
<source>
  @type tail
  <parse>
    @type none
  </parse>
  path /path/to/file
  tag example.service
</source>

#Add hostname and service_name to all events with "example.service" tag
<filter example.service>
  @type record_transformer
  <record>
    service_name ${tag}
    hostname "#{Socket.gethostname}"
  </record>
</filter>

#Forward all events to New Relic EU Endpoint
<match **>
  @type newrelic
  license_key YOUR_LICENSE_KEY
  base_uri https://log-api.eu.newrelic.com/log/v1
</match>

Fluentd 플러그인 테스트

Fluentd 플러그인이 로그 파일에서 입력을 수신하는지 테스트하려면 다음을 수행합니다.

1. 다음 명령을 실행하여 테스트 로그 메시지를 로그 파일에 추가합니다.

echo "test message" >> /PATH/TO/YOUR/LOG/FILE

2. test message에 대한 로그 UI를 검색합니다.

로그 데이터 확인

모든 것이 올바르게 구성되고 데이터가 수집되는 경우 다음 두 위치에서 로그가 표시되어야 합니다.

• 로그 UI
• NRQL 쿼리 실행을 위한 툴입니다.예를 들어 다음과 같은 쿼리를 실행할 수 있습니다.

SELECT * FROM Log

로그 관리 기능을 활성화한 후에도 데이터가 나타나지 않으면 표준 로그 문제 해결 절차를 따르십시오.

로그 Fluentd 버퍼 조정

기본적으로 플러그인은 5초마다 뉴렐릭에 로그를 보냅니다. 이 타이밍을 변경하려면 다음 예에 따라 구성에 <buffer> 블록을 추가합니다.

[...]

# Forward all events to New Relic EU Endpoint
<match **>
  @type newrelic
  license_key YOUR_LICENSE_KEY

  <buffer time>
    timekey 60s
  </buffer>
</match>

보다 자세한 내용은 버퍼 구성에 대한 Fluentd 문서를 참조하십시오.

다음 단계는?

로그 UI를 사용하여 플랫폼 전반에 걸쳐 로깅 데이터를 탐색합니다.

• 문맥적 로그 기능으로 로그를 전달하여 애플리케이션과 플랫폼 성능 데이터에 대한 더 깊은 가시성을 얻을 수 있습니다.
• 알림을 설정합니다.
• 데이터를 쿼리하고 대시보드를 만듭니다.

로그 전달 비활성화

로그 전달 기능을 비활성화하려면 Fluentd 문서의 표준 절차를 따르십시오. 뉴렐릭에서는 다른 작업을 수행할 필요가 없습니다.