Samouczek języka Python: wdrażanie modelu regresji liniowej przy użyciu uczenia maszynowego SQL

Dotyczy: SQL Server 2017 (14.x) i nowsze wersje usługi Azure SQL Managed Instance

W czwartej części tej czteroczęściowej serii samouczków wdrożysz model regresji liniowej opracowany w języku Python w bazie danych programu SQL Server przy użyciu usług Machine Learning Services lub klastrów danych big data.

W tym artykule dowiesz się, jak:

• Tworzenie procedury składowanej, która generuje model uczenia maszynowego
• Przechowywanie modelu w tabeli bazy danych
• Tworzenie procedury składowanej, która tworzy przewidywania przy użyciu modelu
• Wykonywanie modelu przy użyciu nowych danych

W części drugiej przedstawiono sposób przywracania przykładowej bazy danych.

W drugiej części przedstawiono sposób ładowania danych z bazy danych do ramki danych języka Python i przygotowywania danych w języku Python.

W trzeciej części przedstawiono sposób trenowania modelu uczenia maszynowego regresji liniowej w języku Python.

Wymagania wstępne

• Część czwarta tego samouczka zakłada, że ukończono część pierwszą i jej wymagania wstępne.

Utwórz procedurę składowaną, która generuje model

Teraz przy użyciu utworzonych skryptów języka Python utwórz procedurę składowaną generate_rental_py_model , która trenuje i generuje model regresji liniowej przy użyciu metody LinearRegression z biblioteki scikit-learn.

Uruchom następującą instrukcję języka T-SQL w narzędziu Azure Data Studio, aby utworzyć procedurę składowaną w celu wytrenowania modelu.

-- Stored procedure that trains and generates a Python model using the rental_data and a linear regression algorithm
DROP PROCEDURE IF EXISTS generate_rental_py_model;
go
CREATE PROCEDURE generate_rental_py_model (@trained_model varbinary(max) OUTPUT)
AS
BEGIN
    EXECUTE sp_execute_external_script
      @language = N'Python'
    , @script = N'
from sklearn.linear_model import LinearRegression
import pickle

df = rental_train_data

# Get all the columns from the dataframe.
columns = df.columns.tolist()

# Store the variable well be predicting on.
target = "RentalCount"

# Initialize the model class.
lin_model = LinearRegression()

# Fit the model to the training data.
lin_model.fit(df[columns], df[target])

# Before saving the model to the DB table, convert it to a binary object
trained_model = pickle.dumps(lin_model)'

, @input_data_1 = N'select "RentalCount", "Year", "Month", "Day", "WeekDay", "Snow", "Holiday" from dbo.rental_data where Year < 2015'
, @input_data_1_name = N'rental_train_data'
, @params = N'@trained_model varbinary(max) OUTPUT'
, @trained_model = @trained_model OUTPUT;
END;
GO

Przechowywanie modelu w tabeli bazy danych

Utwórz tabelę w bazie danych TutorialDB, a następnie zapisz model w tabeli.

1. Uruchom następującą instrukcję języka T-SQL w narzędziu Azure Data Studio, aby utworzyć tabelę o nazwie dbo.rental_py_models , która jest używana do przechowywania modelu.

   USE TutorialDB;
   DROP TABLE IF EXISTS dbo.rental_py_models;
   GO
   CREATE TABLE dbo.rental_py_models (
       model_name VARCHAR(30) NOT NULL DEFAULT('default model') PRIMARY KEY,
       model VARBINARY(MAX) NOT NULL
   );
   GO
   

2. Zapisz model w tabeli jako obiekt binarny z nazwą modelu linear_model.

   DECLARE @model VARBINARY(MAX);
   EXECUTE generate_rental_py_model @model OUTPUT;
   
   INSERT INTO rental_py_models (model_name, model) VALUES('linear_model', @model);
   

Utwórz procedurę składowaną, która przewiduje

1. Utwórz procedurę składowaną py_predict_rentalcount , która tworzy przewidywania przy użyciu wytrenowanego modelu i zestawu nowych danych. Uruchom poniższy kod T-SQL w narzędziu Azure Data Studio.

   DROP PROCEDURE IF EXISTS py_predict_rentalcount;
   GO
   CREATE PROCEDURE py_predict_rentalcount (@model varchar(100))
   AS
   BEGIN
       DECLARE @py_model varbinary(max) = (select model from rental_py_models where model_name = @model);
   
       EXECUTE sp_execute_external_script
                   @language = N'Python',
                   @script = N'
   
   # Import the scikit-learn function to compute error.
   from sklearn.metrics import mean_squared_error
   import pickle
   import pandas
   
   rental_model = pickle.loads(py_model)
   
   df = rental_score_data
   
   # Get all the columns from the dataframe.
   columns = df.columns.tolist()
   
   # Variable you will be predicting on.
   target = "RentalCount"
   
   # Generate the predictions for the test set.
   lin_predictions = rental_model.predict(df[columns])
   print(lin_predictions)
   
   # Compute error between the test predictions and the actual values.
   lin_mse = mean_squared_error(lin_predictions, df[target])
   #print(lin_mse)
   
   predictions_df = pandas.DataFrame(lin_predictions)
   
   OutputDataSet = pandas.concat([predictions_df, df["RentalCount"], df["Month"], df["Day"], df["WeekDay"], df["Snow"], df["Holiday"], df["Year"]], axis=1)
   '
   , @input_data_1 = N'Select "RentalCount", "Year" ,"Month", "Day", "WeekDay", "Snow", "Holiday"  from rental_data where Year = 2015'
   , @input_data_1_name = N'rental_score_data'
   , @params = N'@py_model varbinary(max)'
   , @py_model = @py_model
   with result sets (("RentalCount_Predicted" float, "RentalCount" float, "Month" float,"Day" float,"WeekDay" float,"Snow" float,"Holiday" float, "Year" float));
   
   END;
   GO
   

2. Utwórz tabelę do przechowywania przewidywań.

   DROP TABLE IF EXISTS [dbo].[py_rental_predictions];
   GO
   
   CREATE TABLE [dbo].[py_rental_predictions](
    [RentalCount_Predicted] [int] NULL,
    [RentalCount_Actual] [int] NULL,
    [Month] [int] NULL,
    [Day] [int] NULL,
    [WeekDay] [int] NULL,
    [Snow] [int] NULL,
    [Holiday] [int] NULL,
    [Year] [int] NULL
   ) ON [PRIMARY]
   GO
   

3. Wykonaj procedurę składowaną, aby przewidzieć liczbę wypożyczeń

   --Insert the results of the predictions for test set into a table
   INSERT INTO py_rental_predictions
   EXEC py_predict_rentalcount 'linear_model';
   
   -- Select contents of the table
   SELECT * FROM py_rental_predictions;
   

   Powinny zostać wyświetlone wyniki podobne do poniższych.

   

Pomyślnie utworzyliśmy, wytrenowaliśmy i wdrożyliśmy model. Następnie użyto tego modelu w procedurze składowanej do przewidywania wartości na podstawie nowych danych.

Dalsze kroki

W czwartej części tej serii samouczków wykonano następujące kroki:

• Tworzenie procedury składowanej, która generuje model uczenia maszynowego
• Przechowywanie modelu w tabeli bazy danych
• Tworzenie procedury składowanej, która tworzy przewidywania przy użyciu modelu
• Wykonywanie modelu przy użyciu nowych danych

Aby dowiedzieć się więcej na temat używania języka Python z uczeniem maszynowym SQL, zobacz:

• Samouczki dotyczące języka Python