SQL Server Machine Learning Services を使用して Python および R スクリプトのトラブルシューティングのためにデータを収集する

[アーティクル]
05/30/2023

適用対象: SQL Server 2016 (13.x) 以降のバージョン

重要

2022 年 7 月 1 日に、Machine Learning Server (以前の Microsoft R Server) のサポートは終了しました。詳細については、Machine Learning Server の現状に関するページを参照してください。

この記事では、SQL Server Machine Learning Services の問題を解決する際に必要なデータを収集する方法について説明します。このデータは、自分自身で問題を解決しているか、Microsoft カスタマーサポートの支援を受けるかに関係なく、役立つ可能性があります。

SQL Server のバージョンおよびエディション

SQL Server 2016 R Services は、R の統合サポートが含まれる SQL Server の最初のリリースです。 SQL Server 2016 Service Pack 1 (SP1) には、外部スクリプトを実行する機能など、いくつかの重要な機能強化が含まれています。 SQL Server 2016 を使用している場合は、SP1 以降をインストールすることを検討してください。

SQL Server 2017 以降には Python 言語が統合されています。以前のリリースでは、Python 機能を統合できません。

使用している SQL Server のエディションによっては、一部の機械学習機能が使用できないか、制限される場合があります。

R 言語とツールのバージョン

一般に、R Services 機能または Machine Learning Services 機能を選択したときにインストールされる Microsoft R のバージョンは、SQL Server のビルド番号によって決まります。 SQL Server をアップグレードまたは修正する場合は、その R コンポーネントもアップグレードまたは修正する必要があります。

R コンポーネントのダウンロードに関するリリースとリンクの一覧については、インターネットアクセスを使用しない機械学習コンポーネントのインストールに関する記事を参照してください。インターネットにアクセスできるコンピューターでは、必要なバージョンの R が自動的に識別され、インストールされます。

バインドと呼ばれるプロセスでは、R Server コンポーネントを SQL Server データベースエンジンとは別にアップグレードすることができます。そのため、SQL Server で R コードを実行するときに使用する R のバージョンは、インストールされている SQL Server のバージョンと、サーバーを最新の R バージョンに移行したかどうかによって異なる場合があります。

R バージョンを確認する

R バージョンを確認する最も簡単な方法は、次のようなステートメントを実行してランタイムプロパティを取得することです。

EXECUTE sp_execute_external_script
       @language = N'R'
       , @script = N'
# Transform R version properties to data.frame
OutputDataSet <- data.frame(
  property_name = c("R.version", "Revo.version"),
  property_value = c(R.Version()$version.string, Revo.version$version.string),
  stringsAsFactors = FALSE)
# Retrieve properties like R.home, libPath & default packages
OutputDataSet <- rbind(OutputDataSet, data.frame(
  property_name = c("R.home", "libPaths", "defaultPackages"),
  property_value = c(R.home(), .libPaths(), paste(getOption("defaultPackages"), collapse=", ")),
  stringsAsFactors = FALSE)
)
'
WITH RESULT SETS ((PropertyName nvarchar(100), PropertyValue nvarchar(4000)));

ヒント

R Services が動作していない場合は、RGui から R スクリプトの部分のみを実行してみてください。

最後の手段として、サーバー上のファイルを開いて、インストールされているバージョンを確認できます。これを行うには、rlauncher.config ファイルを見つけて、R ランタイムの場所と現在の作業ディレクトリを調べます。プロパティを誤って変更しないように、ファイルのコピーを作成して開くことをお勧めします。

SQL Server 2016

C:\Program Files\Microsoft SQL Server\MSSQL13.<instance_name\MSSQL\Binn\rlauncher.config
SQL Server 2017

C:\Program Files\Microsoft SQL Server\MSSQL14.<instance_name>\MSSQL\Binn\rlauncher.config

R バージョンと RevoScaleR バージョンを調べるには、R のコマンドプロンプトを開くか、インスタンスに関連する RGui を開きます。

SQL Server 2016

C:\Program Files\Microsoft SQL Server\MSSQL13.<instancename>\R_SERVICES\bin\x64\RGui.exe
SQL Server 2017

C:\Program Files\Microsoft SQL Server\MSSQL14.<instance_name>\R_SERVICES\bin\x64\RGui.exe

R コンソールには、スタートアップ時にバージョン情報が表示されます。たとえば、次のバージョンは、SQL Server 2017 の既定の構成を表しています。

*Microsoft R Open 3.3.3*

*The enhanced R distribution from Microsoft*

*Microsoft packages Copyright (C) 2017 Microsoft*

*Loading Microsoft R Server packages, version 9.1.0.*

Python のバージョン

Python のバージョンを調べるには、いくつかの方法があります。最も簡単な方法は、Management Studio またはその他の SQL クエリツールからこのステートメントを実行することです。

-- Get Python runtime properties:
exec sp_execute_external_script
       @language = N'Python'
       , @script = N'
import sys
import pkg_resources
OutputDataSet = pandas.DataFrame(
                    {"property_name": ["Python.home", "Python.version", "Revo.version", "libpaths"],
                    "property_value": [sys.executable[:-10], sys.version, pkg_resources.get_distribution("revoscalepy").version, str(sys.path)]}
)
'
with WITH RESULT SETS (SQL keywords) ((PropertyName nvarchar(100), PropertyValue nvarchar(4000)));

Machine Learning Services が実行されていない場合は、pythonlauncher.config ファイルを参照して、インストールされている Python のバージョンを確認できます。プロパティを誤って変更しないように、ファイルのコピーを作成して開くことをお勧めします。

SQL Server 2017 の場合のみ: C:\Program Files\Microsoft SQL Server\MSSQL14.<instance_name>\MSSQL\Log\ExtensibilityLog\pythonlauncher.config
PYTHON HOME の値を取得します。
現在の作業ディレクトリの値を取得します。

Note

SQL Server 2017 に Python と R の両方をインストールした場合、作業ディレクトリとワーカーアカウントのプールは、R 言語と Python 言語で共有されます。

R または Python の複数のインスタンスがインストールされていますか?

R ライブラリの複数のコピーがコンピューターにインストールされているかどうかを確認します。この重複は、次の場合に発生する可能性があります。

セットアップ中に、R Services (データベース内) と R Server (スタンドアロン) の両方を選択した。
SQL Server に加えて Microsoft R Client をインストールした。
R Tools for Visual Studio、R Studio、Microsoft R Client、または別の R IDE を使用して、別の R ライブラリセットをインストールした。
コンピューターが SQL Server の複数のインスタンスをホストし、複数のインスタンスが機械学習を使用する。

Python にも同じ条件が適用されます。

複数のライブラリまたはランタイムがインストールされていることが判明した場合は、SQL Server インスタンスで使用されている Python または R ランタイムに関連するエラーのみを取得してください。

エラーの発生元

R コードを実行しようとすると、次のいずれかのソースからエラーが発生する可能性があります。

SQL Server データベースエンジン (ストアドプロシージャ sp_execute_external_script を含む)
SQL Server Trusted Launchpad
拡張機能フレームワークのその他のコンポーネント (R および Python ランチャー、サテライトプロセスを含む)
Microsoft Open Database Connectivity (ODBC) などのプロバイダー
R 言語

サービスを初めて使用するときは、どのメッセージがどのサービスから発信されたものかを判断するのが難しい場合があります。正確なメッセージテキストだけでなく、メッセージが表示されたコンテキストも取得することをお勧めします。機械学習コードを実行するために使用しているクライアントソフトウェアを確認します。

Management Studio を使用していますか? 外部アプリケーションですか?
R コードをリモートクライアントで実行していますか、それともストアドプロシージャで直接実行していますか?

SQL Server のログファイル

最新の SQL Server ERRORLOG を取得します。エラーログの完全なセットは、次の既定のログディレクトリのファイルで構成されます。

SQL Server 2016

C:\Program Files\Microsoft SQL Server\MSSQL13.SQL2016\MSSQL\Log\ExtensibilityLog
SQL Server 2017

C:\Program Files\Microsoft SQL Server\MSSQL14.SQL2016\MSSQL\Log\ExtensibilityLog

Note

正確なフォルダー名は、インスタンス名によって異なります。

sp_execute_external_script によって返されるエラー

sp_execute_external_script コマンドの実行時に返されるエラー (存在する場合) の完全なテキストを取得します。

R または Python の問題を考慮の対象から除外するには、このスクリプトを実行します。これにより、R または Python ランタイムが起動し、データをやり取りします。

R の場合

exec sp_execute_external_script @language =N'R',  
@script=N'OutputDataSet<-InputDataSet',  
@input_data_1 =N'select 1 as hello'  
with result sets (([hello] int not null));  
go

Python の場合

exec sp_execute_external_script @language =N'Python',  
@script=N'OutputDataSet= InputDataSet',  
@input_data_1 =N'select 1 as hello'  
with result sets (([hello] int not null));  
go

拡張機能フレームワークによって生成されるエラー

SQL Server では、外部スクリプト言語ランタイムごとに個別のログが生成されます。これらのエラーは Python 言語または R 言語では生成されません。これらは、言語固有のランチャーとそのサテライトプロセスなど、SQL Server の拡張機能コンポーネントから生成されます。

これらのログは、次の既定の場所から取得できます。

SQL Server 2016

C:\Program Files\Microsoft SQL Server\MSSQL13.<instance_name>\MSSQL\Log\ExtensibilityLog
SQL Server 2017

C:\Program Files\Microsoft SQL Server\MSSQL14.<instance_name>\MSSQL\Log\ExtensibilityLog

Note

正確なフォルダー名は、インスタンス名によって異なります。構成によっては、フォルダーが別のドライブにある場合があります。

たとえば、次のログメッセージは拡張機能フレームワークに関連しています。

LogonUser Failed for user MSSQLSERVER01 (ユーザー MSSQLSERVER01 の LogonUser に失敗しました)

これは、外部スクリプトを実行するワーカーアカウントがインスタンスにアクセスできないことを示している可能性があります。
InitializePhysicalUsersPool Failed (InitializePhysicalUsersPool が失敗しました)

このメッセージは、セキュリティ設定が原因で、外部スクリプトを実行するために必要なワーカーアカウントのプールが作成されないことを意味している可能性があります。
Security Context Manager initialization failed (セキュリティコンテキストマネージャーの初期化に失敗しました)
Satellite Session Manager initialization failed (サテライトセッションマネージャーの初期化に失敗しました)

システムイベント

Windows イベントビューアーを開き、システムイベント ログで、文字列 Launchpad を含むメッセージを検索します。
ExtLaunchErrorlog ファイルを開き、文字列 ErrorCode を探します。 ErrorCode に関連するメッセージを確認します。

たとえば、次のメッセージは SQL Server 拡張機能フレームワークに関連する一般的なシステムエラーです。

SQL Server Launchpad (MSSQLSERVER) サービスは次のエラーのため開始できませんでした: <text>
そのサービスは指定時間内に開始要求または制御要求に応答しませんでした。
A timeout was reached (120000 milliseconds) while waiting for the SQL Server Launchpad (MSSQLSERVER) service to connect. (SQL Server Launchpad (MSSQLSERVER) サービスの接続待機中にタイムアウトになりました (120000 ミリ秒)。)

ダンプファイル

デバッグに精通している場合は、ダンプファイルを使用して Launchpad のエラーを分析できます。

SQL Server のセットアップブートストラップログが格納されているフォルダーを見つけます。たとえば SQL Server 2016 では、既定のパスは C:\Program Files\Microsoft SQL Server\130\Setup Bootstrap\Log でした。
拡張機能に固有のブートストラップログサブフォルダーを開きます。
サポートリクエストを送信する必要がある場合は、このフォルダーの内容全体を ZIP ファイルに追加します。たとえば、C:\Program Files\Microsoft SQL Server\130\Setup Bootstrap\Log\LOG\ExtensibilityLog です。

正確な場所はシステムによって異なる場合があり、C ドライブ以外のドライブに配置されている場合があります。必ず機械学習がインストールされているインスタンスのログを取得してください。

構成設定

このセクションでは、R または Python スクリプトを実行したときにエラーの原因となる可能性がある追加のコンポーネントまたはプロバイダーを示します。

どのようなネットワークプロトコルを使用できますか?

Machine Learning Services では、拡張機能コンポーネント間の内部通信、および外部の R クライアントまたは Python クライアントとの通信に次のネットワークプロトコルが必要です。

名前付きパイプ
TCP/IP

SQL Server 構成マネージャーを開いて、プロトコルがインストールされているかどうかを確認し、インストールされている場合は有効になっているかどうかを確認します。

セキュリティの構成およびアクセス許可

ワーカーアカウントの場合:

コントロールパネルで、 [ユーザーとグループ] を開き、外部スクリプトジョブを実行するために使用するグループを探します。既定では、そのグループは SQLRUserGroup です。
そのグループが存在し、少なくとも 1 つのワーカーアカウントが含まれていることを確認してください。
SQL Server Management Studio で、R ジョブまたは Python ジョブを実行するインスタンスを選択し、 [セキュリティ] を選択して、SQLRUserGroup のログオンがあるかどうかを確認します。
ユーザーグループのアクセス許可を確認します。

個々のユーザーアカウントの場合:

インスタンスが混合モード認証、SQL ログインのみ、または Windows 認証のみのいずれをサポートするかを判断します。この設定は、R または Python のコード要件に影響します。
R コードを実行する必要があるユーザーごとに、R からオブジェクトが書き込まれる、データにアクセスする、またはオブジェクトが作成される各データベースで必要なアクセス許可のレベルを決定します。
スクリプトの実行を有効にするには、必要に応じて、ロールを作成するか、次のロールにユーザーを追加します。
- db_owner を除くすべて:EXECUTE ANY EXTERNAL SCRIPT が必要です。
- db_datawriter:R または Python から結果を書き込む。
- db_ddladmin:新しいオブジェクトを作成する。
- db_datareader:R または Python のコードによって使用されるデータを読み取る。
SQL Server 2016 をインストールしたときに、既定のスタートアップアカウントを変更したかどうかに注意してください。
ユーザーが新しい R パッケージをインストールする必要がある場合、または他のユーザーによってインストールされた R パッケージを使用する必要がある場合は、インスタンスでパッケージ管理を有効にしてから、追加のアクセス許可を割り当てることが必要な場合があります。

ウイルス対策ソフトウェアによるロックの対象となるフォルダーは何ですか?

ウイルス対策ソフトウェアによってフォルダーがロックされる可能性があり、それにより機械学習機能のセットアップとスクリプトの正常な実行の両方が妨げられます。 SQL Server ツリー内のフォルダーがウイルススキャンの対象になるかどうかを判断してください。

ただし、1 つのインスタンスに複数のサービスまたは機能がインストールされている場合、そのインスタンスで使用されている可能性のあるすべてのフォルダーを列挙することは困難な場合があります。たとえば、新しい機能が追加されたときに、新しいフォルダーを識別して除外する必要があります。

また、実行時に新しいフォルダーを動的に作成する機能もあります。たとえば、インメモリ OLTP テーブル、ストアドプロシージャ、および関数はすべて、実行時に新しいディレクトリを作成します。これらのフォルダー名には多くの場合 GUID が含まれており、予測できません。 SQL Server Trusted Launchpad は、R および Python のスクリプトジョブ用の新しい作業ディレクトリを作成します。

SQL Server プロセスとその機能に必要なすべてのフォルダーを除外することはできない場合があるため、SQL Server インスタンスディレクトリツリー全体を除外することをお勧めします。

ファイアウォールは SQL Server に対して開いていますか? インスタンスはリモート接続をサポートしていますか?

SQL Server がリモート接続をサポートしているかどうかを判断するには、リモートサーバー接続の構成に関する記事を参照してください。
SQL Server に対してファイアウォール規則が作成されているかどうかを確認します。セキュリティ上の理由から、既定のインストールでは、リモート R または Python クライアントがインスタンスに接続できない場合があります。詳細については、SQL Server への接続のトラブルシューティングに関する記事を参照してください。

SQL Server Machine Learning Services を使用して Python および R スクリプトのトラブルシューティングのためにデータを収集する

SQL Server のバージョンおよびエディション

R 言語とツールのバージョン

R バージョンを確認する

Python のバージョン

R または Python の複数のインスタンスがインストールされていますか?

エラーの発生元

SQL Server のログファイル

sp_execute_external_script によって返されるエラー

拡張機能フレームワークによって生成されるエラー

システムイベント

ダンプファイル

構成設定

どのようなネットワークプロトコルを使用できますか?

セキュリティの構成およびアクセス許可

ウイルス対策ソフトウェアによるロックの対象となるフォルダーは何ですか?

ファイアウォールは SQL Server に対して開いていますか? インスタンスはリモート接続をサポートしていますか?

関連項目

フィードバック

フィードバック

その他のリソース

SQL Server Machine Learning Services を使用して Python および R スクリプトのトラブルシューティングのためにデータを収集する

SQL Server のバージョンおよびエディション

R 言語とツールのバージョン

R バージョンを確認する

Python のバージョン

R または Python の複数のインスタンスがインストールされていますか?

エラーの発生元

SQL Server のログ ファイル

sp_execute_external_script によって返されるエラー

拡張機能フレームワークによって生成されるエラー

システム イベント

ダンプ ファイル

構成設定

どのようなネットワーク プロトコルを使用できますか?

セキュリティの構成およびアクセス許可

ウイルス対策ソフトウェアによるロックの対象となるフォルダーは何ですか?

ファイアウォールは SQL Server に対して開いていますか? インスタンスはリモート接続をサポートしていますか?

関連項目

フィードバック

フィードバック

その他のリソース

SQL Server のログファイル

システムイベント

ダンプファイル

どのようなネットワークプロトコルを使用できますか?