Azure Monitor ログでクエリを実行して HDInsight クラスターを監視する

[アーティクル]
09/15/2023

Azure Monitor ログを使用して Azure HDInsight クラスターを監視する基本的なシナリオを説明します。

HDInsight クラスターのメトリックを分析する
イベントアラートを作成する

注意

この記事は最近、Log Analytics ではなく Azure Monitor ログという用語を使うように更新されました。ログデータは引き続き Log Analytics ワークスペースに格納され、同じ Log Analytics サービスによって収集されて分析されます。 Azure Monitor のログの役割をより適切に反映させるために、用語を更新しています。詳しくは、Azure Monitor の用語の変更に関するページをご覧ください。

前提条件

Azure Monitor ログを使用するように HDInsight クラスターを構成し、HDInsight クラスター固有の Azure Monitor ログ監視ソリューションをワークスペースに追加しておく必要があります。手順については、「Use Azure Monitor logs with HDInsight clusters」(HDInsight クラスターでの Azure Monitor ログの使用) を参照してください。

HDInsight クラスターのメトリックを分析する

HDInsight クラスターの特定のメトリックを検索する方法を説明します。

Azure Portal から HDInsight クラスターに関連付けられた Log Analytics ワークスペースを開きます。
[全般] で、[ログ] を選択します。
検索ボックスに、Azure Monitor ログを使用するように構成したすべての HDInsight クラスターで使用できるすべてのメトリックを検索する次のクエリを入力して、[実行] を選択します。結果を確認します。
```
search *
```
左側のメニューから、[フィルター] タブを選択します。
[種類] で [ハートビート] を選択します。次に、[適用して実行] を選択します。
テキストボックス内のクエリが次のように変更されていることに注意してください。
```
search *
| where Type == "Heartbeat"
```
左側のメニューにあるオプションを使用して、詳しく調べることができます。次に例を示します。
- 特定のノードからのログを表示するには、次のようにします。
- 特定の時刻のログを表示するには、次のようにします。

[適用して実行] を選択し、結果を確認します。クエリが次のように更新されたことにも注意してください。

search *
| where Type == "Heartbeat"
| where (Computer == "zk2-myhado") and (TimeGenerated == "2019-12-02T23:15:02.69Z" or TimeGenerated == "2019-12-02T23:15:08.07Z" or TimeGenerated == "2019-12-02T21:09:34.787Z")

追加のサンプルクエリ

10 分間に使用されたリソースの平均値に基づくサンプルクエリ。クラスター名によって分類されます。

search in (metrics_resourcemanager_queue_root_default_CL) * 
| summarize AggregatedValue = avg(UsedAMResourceMB_d) by ClusterName_s, bin(TimeGenerated, 10m)

使用されたリソースの平均値に基づいて結果を調整する代わりに、次のクエリを使用すると、10 分間で最大 (および 90 パーセンタイルと 95 パーセンタイル) のリソースが使用された時刻に基づいて結果を調整できます。

search in (metrics_resourcemanager_queue_root_default_CL) * 
| summarize ["max(UsedAMResourceMB_d)"] = max(UsedAMResourceMB_d), ["pct95(UsedAMResourceMB_d)"] = percentile(UsedAMResourceMB_d, 95), ["pct90(UsedAMResourceMB_d)"] = percentile(UsedAMResourceMB_d, 90) by ClusterName_s, bin(TimeGenerated, 10m)

イベント追跡用のアラートを作成する

アラートを作成する最初の手順は、アラートをトリガーする基準となるクエリを作成することです。アラートの作成には任意のクエリを使用できます。

Azure Portal から HDInsight クラスターに関連付けられた Log Analytics ワークスペースを開きます。
[全般] で、[ログ] を選択します。
アラートを作成する次のクエリを実行して、[実行] を選択します。
```
metrics_resourcemanager_queue_root_default_CL | where AppsFailed_d > 0
```
このクエリは、HDInsight クラスターで実行されている失敗したアプリケーションの一覧を提供します。
ページの先頭にある [新しいアラートルール] を選択します。
[ルールの作成] ウィンドウで、クエリとその他の情報を入力してアラートを作成し、[アラートルールの作成] を選択します。