Python のチュートリアル:SQL 機械学習を使用して顧客を分類するモデルを構築する

[アーティクル]
05/30/2023

適用対象: SQL Server 2017 (14.x) 以降 Azure SQL Managed Instance

この 4 部構成のチュートリアルシリーズのパート 3 では、クラスタリングを実行するために、Python で K-Means モデルをビルドします。このシリーズの次のパートでは、SQL Server Machine Learning Services またはビッグデータクラスターを使用して、このモデルをデータベースにデプロイします。

この 4 部構成のチュートリアルシリーズのパート 3 では、クラスタリングを実行するために、Python で K-Means モデルをビルドします。このシリーズの次のパートでは、SQL Server Machine Learning Services を使用して、このモデルをデータベースにデプロイします。

この 4 部構成のチュートリアルシリーズのパート 3 では、クラスタリングを実行するために、Python で K-Means モデルをビルドします。このシリーズの次の部では、Azure SQL Managed Instance Machine Learning Services を使用し、データベースにこのモデルをデプロイします。

この記事では、次の方法について学習します。

K-Means アルゴリズムのクラスター数を定義する
クラスタリングを実行する
結果を分析する

パート 1 では、前提条件をインストールしてサンプルデータベースを復元しました。

パート 2 では、データベースからデータを準備してクラスタリングを実行する方法を学びました。

パート 4 では、新しいデータに基づいて Python でクラスタリングを実行できるストアドプロシージャをデータベースに作成する方法について説明します。

前提条件

このチュートリアルのパート 3 は、パート 1の前提条件を満たし、パート 2の手順を完了していることを前提としています。

クラスターの数を定義する

顧客データのクラスター化には、データをグループ化する最も単純かつ有名な方法の 1 つ、K-Means クラスタリングアルゴリズムを使用します。 K-Means の詳細については、K-means クラスタリングアルゴリズムの詳細ガイドに関するページを参照してください。

このアルゴリズムでは、次の 2 つの入力を受け取ります。データ自体、および定義済みの数値 "k" は、生成するクラスターの数を表します。出力は、クラスター間でパーティション分割された入力データを持つ k クラスターとなっています。

K-means が目指すのは、項目を k クラスターにグループ化して、同じクラスター内のすべての項目が互いに類似し、他のクラスター内の項目とは可能な限り異なるようにすることです。

アルゴリズムで使用するクラスターの数を決定するには、抽出されたクラスターの数によって、グループ内の平方和のプロットを使用します。使用するクラスターの数は、プロットの曲がっている部分または "カギ" の部分になります。

################################################################################################
## Determine number of clusters using the Elbow method
################################################################################################

cdata = customer_data
K = range(1, 20)
KM = (sk_cluster.KMeans(n_clusters=k).fit(cdata) for k in K)
centroids = (k.cluster_centers_ for k in KM)

D_k = (sci_distance.cdist(cdata, cent, 'euclidean') for cent in centroids)
dist = (np.min(D, axis=1) for D in D_k)
avgWithinSS = [sum(d) / cdata.shape[0] for d in dist]
plt.plot(K, avgWithinSS, 'b*-')
plt.grid(True)
plt.xlabel('Number of clusters')
plt.ylabel('Average within-cluster sum of squares')
plt.title('Elbow for KMeans clustering')
plt.show()

カギ線グラフ

グラフに基づいて、k = 4 の値をまず試します。 k 値は、顧客を 4 つのクラスターにグループ化します。

クラスタリングを実行する

次の Python スクリプトでは、sklearn パッケージの KMeans 関数を使用します。

################################################################################################
## Perform clustering using Kmeans
################################################################################################

# It looks like k=4 is a good number to use based on the elbow graph.
n_clusters = 4

means_cluster = sk_cluster.KMeans(n_clusters=n_clusters, random_state=111)
columns = ["orderRatio", "itemsRatio", "monetaryRatio", "frequency"]
est = means_cluster.fit(customer_data[columns])
clusters = est.labels_
customer_data['cluster'] = clusters

# Print some data about the clusters:

# For each cluster, count the members.
for c in range(n_clusters):
    cluster_members=customer_data[customer_data['cluster'] == c][:]
    print('Cluster{}(n={}):'.format(c, len(cluster_members)))
    print('-'* 17)
print(customer_data.groupby(['cluster']).mean())

結果を分析する

K-Means を使用したクラスタリングが完了したため、次の手順では結果を分析して、実行可能な情報を見つけられるかどうかを確認します。

前のスクリプトから出力されたクラスタリングの平均値とクラスターサイズを確認します。

Cluster0(n=31675):
-------------------
Cluster1(n=4989):
-------------------
Cluster2(n=1):
-------------------
Cluster3(n=671):
-------------------

         customer  orderRatio  itemsRatio  monetaryRatio  frequency
cluster
0        50854.809882    0.000000    0.000000       0.000000   0.000000
1        51332.535779    0.721604    0.453365       0.307721   1.097815
2        57044.000000    1.000000    2.000000     108.719154   1.000000
3        48516.023845    0.136277    0.078346       0.044497   4.271237

4 つのクラスターは、パート 1 で定義した変数を使用して指定されます。

orderRatio = 注文返品率 (注文の総数に対する部分的または完全に返品された注文の総数)
itemsRatio = アイテム返品率 (購入されたアイテムの総数に対する返品されたアイテムの総数)
monetaryRatio = 返品金額率 (合計購入金額に対する返されたアイテムの合計金額)
frequency = 返品の頻度

多くの場合、K-Means を使用したデータマイニングでは結果をさらに詳しく分析し、各クラスターについて理解を深めるためにさらに手順を進める必要がありますが、これにより良いスタートを切ることができるようになります。これらの結果を解釈するいくつかの方法を次に示します。

クラスター 0 は、アクティブでない (すべての値が 0 である) 顧客のグループである可能性があります。
クラスター 3 は、戻り値の動作の観点では目立つグループであるように見えます。

クラスター 0 は、アクティブでないことが明らかな顧客のセットです。場合によっては、このグループをターゲットにしたマーケティング策を講じることで、購買を促すことができるかもしれません。次の手順では、クラスター 0 の顧客の電子メールアドレスをデータベースに照会して、マーケティングメールを送信できるようにします。

リソースをクリーンアップする

このチュートリアルを続行しない場合は、tpcxbb_1gb データベースを削除してください。

次のステップ

このチュートリアルシリーズのパート 3 では、次の手順を完了しました。

K-Means アルゴリズムのクラスター数を定義する
クラスタリングを実行する
結果を分析する

作成した機械学習モデルをデプロイするには、このチュートリアルシリーズのパート 4 の手順に従います。

Python のチュートリアル:クラスタリングモデルをデプロイする

次の方法で共有