• ログイン今すぐ開始

本書は、お客様のご参考のために原文の英語版を機械翻訳したものです。

英語版と齟齬がある場合、英語版の定めが優先するものとします。より詳しい情報については、本リンクをご参照ください。

問題を作成する

Google Cloud Dataprocモニタリング統合

New Relic の統合 には、GCP Dataproc のデータを弊社製品に報告するための統合があります。ここでは、この統合を有効にする方法と、どのようなデータを収集するのかを説明します。

統合を有効にする

統合を有効にするには、標準的な手順に従って GCP サービスを New Relic に接続してください。

設定およびポーリング

設定オプションを使用し、ポーリングの頻度を変更し、データを絞り込むことができます。

デフォルト ポーリング GCP Dataproc 統合のための情報です。

  • New Relicのポーリング間隔:5分

データの検索と使用

統合データを探すには、 one.newrelic.com > Infrastructure> GCP にアクセスし、統合を選択します。

データは、以下の イベントタイプ に添付されます。

エンティティ

イベントタイプ

プロバイダー

クラスタ

GcpDataprocClusterSample

GcpDataprocCluster

データの利用方法については、 統合データの理解と利用 を参照してください。

メトリックデータ

このインテグレーションは、GCP DataprocデータをCluster用に収集します。

Dataproc クラスターデータ

メトリック

ユニット

説明

cluster.hdfs.Datanodes

Count

クラスター内で稼働しているHDFS DataNodesの数を示します。

cluster.hdfs.StorageCapacity

ジビエ

クラスタ上で稼働しているHDFSシステムの容量をGBで示す。

cluster.hdfs.StorageUtilization

パーセント

現在使用されているHDFSストレージの割合です。

cluster.hdfs.UnhealthyBlocks

Count

クラスタ内の不健全なブロックの数を示す。

cluster.job.CompletionTime

ユーザーがジョブを送信してから、Dataprocが完了したと報告するまでにかかったジョブの時間。

cluster.job.Duration

ジョブが特定の状態で過ごした時間。

cluster.job.Failures

Count

クラスタで失敗したジョブの数を示す。

cluster.job.Running

Count

クラスタ上で実行されているジョブの数を示します。

cluster.job.Submitted

Count

クラスタに投入されたジョブの数を示す。

cluster.operation.CompletionTime

ユーザーが操作を送信してから、Dataprocが完了したと報告するまでにかかった操作時間。

cluster.operation.Duration

オペレーションが特定の状態で過ごした時間。

cluster.operation.Failures

Count

クラスタで失敗したオペレーションの数を示す。

cluster.operation.Running

Count

クラスター上で実行されているオペレーションの数を示します。

cluster.operation.Submitted

Count

クラスタに送信されたオペレーションの数を示します。

cluster.yarn.AllocatedMemoryPercentage

パーセント

YARNのメモリを割り当てる割合です。

cluster.yarn.Apps

Count

アクティブなYARNアプリケーションの数を示す。

cluster.yarn.Container

Count

YARNコンテナの数を示す。

cluster.yarn.MemorySize

ジビエ

YARNのメモリサイズをGBで示す。

cluster.yarn.Nodemanagers

Count

クラスター内で稼働しているYARN NodeManagerの数を示す。

cluster.yarn.PendingMemorySize

ジビエ

スケジューラーが処理を保留している現在のメモリ要求(GB単位)。

cluster.yarn.VirtualCores

Count

YARNの仮想コアの数を示す。

Copyright © 2022 New Relic株式会社。