New Relic の統合 には、GCP Dataproc のデータを弊社製品に報告するための統合があります。ここでは、この統合を有効にする方法と、どのようなデータを収集するのかを説明します。
統合をアクティブ化する
統合を有効にするには、標準的な手順に従って GCP サービスを New Relic に接続してください。
構成とポーリング
構成オプションを使用して、ポーリング頻度とフィルターデータを変更できます。
デフォルト ポーリング GCP Dataproc 統合のための情報です。
- New Relicのポーリング間隔:5分
データを見つけて使用する
インテグレーションデータを検索するには、 one.newrelic.com > All capabilities > Infrastructure > GCPに移動してインテグレーションを選択してください。
データは、以下の イベントタイプ に添付されます。
エンティティ | イベントタイプ | プロバイダー |
---|---|---|
クラスタ |
|
|
データの使用方法の詳細については、統合データの理解と使用を参照してください。
メトリックデータ
このインテグレーションは、GCP DataprocデータをCluster用に収集します。
Dataproc クラスターデータ
メトリック | ユニット | 説明 |
---|---|---|
| Count | クラスター内で稼働しているHDFS DataNodesの数を示します。 |
| ジビエ | クラスタ上で稼働しているHDFSシステムの容量をGBで示す。 |
| パーセント | 現在使用されているHDFSストレージの割合です。 |
| Count | クラスタ内の不健全なブロックの数を示す。 |
| 秒 | ユーザーがジョブを送信してから、Dataprocが完了したと報告するまでにかかったジョブの時間。 |
| 秒 | ジョブが特定の状態で過ごした時間。 |
| Count | クラスタで失敗したジョブの数を示す。 |
| Count | クラスタ上で実行されているジョブの数を示します。 |
| Count | クラスタに投入されたジョブの数を示す。 |
| 秒 | ユーザーが操作を送信してから、Dataprocが完了したと報告するまでにかかった操作時間。 |
| 秒 | オペレーションが特定の状態で過ごした時間。 |
| Count | クラスタで失敗したオペレーションの数を示す。 |
| Count | クラスター上で実行されているオペレーションの数を示します。 |
| Count | クラスタに送信されたオペレーションの数を示します。 |
| パーセント | YARNのメモリを割り当てる割合です。 |
| Count | アクティブなYARNアプリケーションの数を示す。 |
| Count | YARNコンテナの数を示す。 |
| ジビエ | YARNのメモリサイズをGBで示す。 |
| Count | クラスター内で稼働しているYARN NodeManagerの数を示す。 |
| ジビエ | スケジューラーが処理を保留している現在のメモリ要求(GB単位)。 |
| Count | YARNの仮想コアの数を示す。 |