Урок 5. Тестирование моделей (учебник по интеллектуальному анализу данных уровня "Базовый")

Теперь, когда вы обработали модели с помощью целевого обучающего набора для рассылок, вы протестируете свои модели на тестовом наборе данных. Проверка является важным шагом процесса интеллектуального анализа данных. Важно знать, насколько эффективно работают ваши модели анализа данных для целевой рассылки на основе реальных данных, прежде чем внедрять их в рабочую среду.

Так как данные в тестовом наборе уже содержат известные значения для покупки велосипедов, легко определить правильность прогнозов модели. Модель, которая показывает лучшие результаты, будет использоваться отделом маркетинга Adventure Works Cycles, чтобы определить клиентов для целевой кампании рассылки.

На этом занятии вы проверите модели с помощью нескольких методов:

Вы сделаете прогнозы на тестовом наборе данных, чтобы узнать, насколько точно модель предсказывает известные результаты. Вы будете использовать диаграмму лифта для измерения ее эффективности.

Проверка точности с помощью диаграммы лифта (Базовый учебник по интеллектуальному анализу данных)
Вы протестируете модели в отфильтрованном подмножестве данных. Можно сравнить несколько моделей на одной диаграмме лифта.

Тестирование отфильтрованной модели (учебник по интеллектуальному анализу данных уровня "Базовый")

Дополнительные сведения о том, как обычно выполняется проверка модели, см. в разделе "Основные понятия интеллектуального анализа данных".