GCP Composerのデータを当社のプラットフォームに報告するためのクラウド統合を提供しています。ここでは、統合を有効にする方法と、どのようなデータを収集するかを説明します。
統合機能の有効化
統合を有効にするには、標準的な手順に従って、 GCPサービスに接続してください 。
構成とポーリング
構成オプションを使用して、ポーリング頻度とフィルターデータを変更できます。
デフォルト ポーリング GCP Composerインテグレーションの情報。
- New Relicのポーリング間隔:5分
データを見つけて使用する
インテグレーションデータを見つけるには、 one.newrelic.com > All capabilities > Infrastructure > GCPに移動してインテグレーションを選択します。
データは、次のイベントタイプに添付されます。
エンティティ | イベントタイプ | プロバイダー |
---|---|---|
環境 |
|
|
ワークフロー |
|
|
データの使用方法の詳細については、統合データの理解と使用を参照してください。
メトリックデータ
この統合は、「環境」と「ワークフロー」のGCP Composerデータを収集します。
作曲環境データ
メトリック | ユニット | 説明 |
---|---|---|
| Count | これまでに確認されたComposer APIリクエストの数。 |
| ミリ秒 | Composer APIコールレイテンシーの分布。 |
| Count | DAGファイルの解析中に発生したエラーの数。 |
| Count | 現在実行中のDAG解析プロセスの数。 |
| Count | 処理のタイムアウトにより終了したファイルプロセッサの数。 |
| 秒 | すべてのDAGファイルを一度にスキャンして取り込むのにかかる秒数。 |
| Count | 現在のダグバッグのサイズ。 |
| Count | データベースインスタンスに予約されているコアの数。 |
| 秒 | データベースインスタンスのCPU使用時間。 |
| Count | データベースインスタンスのCPU使用率(0.0から1.0まで)。 |
| バイト | データベースインスタンスの使用ディスク容量(バイト)。 |
| バイト | データベースインスタンスの最大データディスクサイズ(バイト)。 |
| Count | データベースインスタンスのディスククォータ使用率(0.0から1.0まで)。 |
| バイト | データベースインスタンスのメモリ使用量(単位:バイト)。 |
| バイト | データベースインスタンスの最大RAMサイズ(バイト)。 |
| Count | データベースインスタンスのメモリ使用率(0.0から1.0まで)。 |
| Count | 実行者の空きスロット数。 |
| Count | 実行中のタスクの数。 |
| Count | タスク全体のインスタンス。 |
| Count | セロリの労働者の数 |
| Count | スケジューラーのハートビート |
| Count | キューに入っているタスクの数。 |
| Count | Airflowワーカーポッドの退避回数です。 |
| Count | 殺したゾンビタスクの数 |
コンポーザーワークフローデータ
メトリック | ユニット | 説明 |
---|---|---|
| Count | これまでに完了したワークフローの実行回数。 |
| 秒 | ワークフローの実行完了までの期間。 |
| Count | これまでに完了したワークフロータスクの数。 |
| 秒 | タスク完了までの期間 |