Apache Spark 容量の消費を監視する
この記事の目的は、管理する容量のアクティビティを監視する管理者のためのガイダンスを提供することです。 管理者は、Microsoft Fabric 容量メトリック アプリ で使用できる Apache Spark 容量消費量レポートを利用することで、Lakehouse、Notebook、Apache Spark ジョブ定義など、項目の課金対象の Spark 容量消費量に関する分析情報を得ることができます。 一部の Spark 容量消費アクティビティは、アプリでは報告されません。
報告される Spark 容量消費
レイクハウス、ノートブック、および Spark ジョブ定義からの次の操作は、課金可能なアクティビティとして扱われます。
| 工程名 | 品目 | 説明 |
|---|---|---|
| レイクハウスの操作 | レイクハウス | レイクハウス エクスプローラーのユーザー プレビュー テーブル。 |
| レイクハウスのテーブル読み込み | レイクハウス | ユーザーはレイクハウス エクスプローラーでデルタ テーブルを読み込みます。 |
| ノートブックの実行 | ノートブック | ノートブックはユーザーによって手動で実行されます。 |
| ノートブック HC の実行 | ノートブック | ノートブックはコンカレンシーの高い Apache Spark セッションで実行されます。 |
| ノートブックのスケジュールされた実行 | ノートブック | ノートブックは、ノートブックのスケジュールされたイベントによってトリガーされます。 |
| ノートブックのパイプライン実行 | ノートブック | ノートブックは、パイプラインによってトリガーされて実行されます。 |
| ノートブックの VS Code 実行 | ノートブック | ノートブックは VS Code で実行されます。 |
| Spark ジョブの実行 | Spark ジョブ定義 | Spark バッチ ジョブは、ユーザーの送信によって開始されます。 |
| Spark ジョブのスケジュールされた実行 | Spark ジョブ定義 | バッチ ジョブは、ノートブックのスケジュールされたイベントによってトリガーされて実行されます。 |
| Spark ジョブのパイプラインの実行 | Spark ジョブ定義 | バッチ ジョブは、パイプラインによってトリガーされて実行されます。 |
| Spark ジョブの VS Code 実行 | Spark ジョブ定義 | VS Code から送信された Spark ジョブ定義。 |
報告されない Spark 容量消費
一部の Spark 容量消費アクティビティは、メトリック アプリでは報告されません。 これらのアクティビティには、ライブラリ管理用のシステム Spark ジョブと、Spark ライブ プールまたはライブ セッション用の特定のシステム Spark ジョブが含まれます。
ライブラリ管理 - ワークスペース レベルのライブラリ管理に関連付けられている容量消費は、メトリック アプリでは報告されません。
システム Spark ジョブ - ノートブック、Spark ジョブ定義、またはレイクハウスに関連付けられていない Spark 容量消費は、容量レポートに含まれません。
容量消費レポート
Spark 関連のすべての操作は、バックグラウンド操作として分類されます。 Spark からの容量消費は、ノートブック、Spark ジョブ定義、またはレイクハウスの下に表示され、操作名と項目によって集計されます。
バックグラウンド操作レポート
バックグラウンド操作は、特定の タイムポイントに対して表示されます。 レポートの表では、各行はユーザー操作を示します。 [User](ユーザー) 列を確認して、特定の操作を実行したユーザーを特定します。 特定の操作について詳しい情報が必要な場合は、その "操作 ID" を 使用して、Microsoft Fabric no監視ハブで参照できます。
