レッスン 5: モデルのテスト (基本的なデータマイニングチュートリアル)

ターゲットメーリングシナリオトレーニングセットを使用してモデルを処理したら、テストセットに対してモデルをテストします。検証は、データマイニングプロセスの重要な手順です。運用環境にモデルをデプロイする前に、対象のメーリングマイニングモデルが実際のデータに対してどの程度適切に実行されるかを把握することが重要です。

テストセット内のデータには自転車購入の既知の値が既に含まれているため、モデルの予測が正しいかどうかを簡単に判断できます。最高のパフォーマンスを発揮するモデルは、Adventure Works Cycles マーケティング部門によって使用され、対象となるメーリングキャンペーンの顧客を識別します。

このレッスンでは、複数のメソッドを使用してモデルを検証します。

テストセットに対して予測を行って、既知の結果に対するモデルの精度を確認します。 リフトチャートを使用して、その有効性を測定します。

リフトチャートを使用した精度のテスト (基本的なデータマイニングチュートリアル)
フィルター処理されたデータのサブセットでモデルをテストします。同じリフトチャート内の複数のモデルを比較できます。

フィルター処理されたモデルのテスト (基本的なデータマイニングチュートリアル)

モデルの検証の一般的な方法の詳細については、「データマイニングの概念」を参照してください。