データ サイエンス仮想マシンのデータ取り込みツール
データ サイエンスや AI プロジェクトの初期段階では、必要なデータセットを特定し、分析環境にそれらを取り込む必要があります。 Data Science Virtual Machine (DSVM) には、DSVM 上のローカル分析データ ストレージ リソースにさまざまなソースのデータを取り込むためのツールとライブラリが用意されています。 DSVM は、クラウドまたはオンプレミスにあるデータ プラットフォームにデータを取り込むこともできます。
DSVM には、次のデータ移動ツールが用意されています。
Azure CLI
カテゴリ | 値 |
---|---|
紹介 | Azure の管理ツール。 これは、Azure Blob Storage や Azure Data Lake Store などの Azure データ プラットフォームからデータを移動するためのコマンド動詞を提供します |
サポートされている DSVM バージョン | Windows、Linux |
標準的な使用 | Azure Storage と Azure Data Lake Store の間でデータをインポートおよびエクスポートします |
使用/実行方法 | コマンド プロンプトを開き、「az 」と入力してヘルプを表示します。 |
サンプルへのリンク | Azure CLI の使用 |
AzCopy
カテゴリ | 値 |
---|---|
紹介 | ローカル ファイル、Azure Blob Storage、ファイル、テーブルの間でデータをコピーするためのツール |
サポートされている DSVM バージョン | Windows |
標準的な使用 | Azure Blob Storage にファイルをコピーします アカウント間で BLOB をコピーします |
使用/実行方法 | コマンド プロンプトを開き、「azcopy 」と入力してヘルプを表示します。 |
サンプルへのリンク | Windows での AzCopy |
Azure Cosmos DB データ移行ツール
カテゴリ | 値 |
---|---|
紹介 | さまざまなソースからクラウド内の NoSQL データベースである Azure Cosmos DB にデータをインポートするツール。 これらのソースは次のとおりです: JSON ファイル CSV ファイル SQL MongoDB Azure Table Storage Amazon DynamoDB Azure Cosmos DB for NoSQL コレクション |
サポートされている DSVM バージョン | Windows |
標準的な使用 | VM から Azure Cosmos DB にファイルをインポートします Azure テーブル ストレージから Azure Cosmos DB にデータをインポートします Microsoft SQL Server データベースから Azure Cosmos DB にデータをインポートします |
使用/実行方法 | コマンド ライン バージョンを使用するには、コマンド プロンプトを開いて「dt 」と入力します。 GUI ツールを使用するには、コマンド プロンプトを開いて「dtui 」と入力します |
サンプルへのリンク | Azure Cosmos DB へのデータのインポート |
Azure ストレージ エクスプローラー
カテゴリ | 値 |
---|---|
紹介 | Azure クラウドに格納されているファイルと対話するためのグラフィカル ユーザー インターフェイス |
サポートされている DSVM バージョン | Windows |
標準的な使用 | DSVM との間でデータをインポートおよびエクスポートします |
使用/実行方法 | [スタート] メニュー内で "Azure Storage Explorer" を検索します |
サンプルへのリンク | Azure Storage Explorer |
bcp
カテゴリ | 値 |
---|---|
紹介 | SQL Server とデータ ファイルの間でデータをコピーする SQL Server ツール |
サポートされている DSVM バージョン | Windows |
標準的な使用 | CSV ファイルを SQL Server テーブルにインポートします SQL Server テーブルをファイルにエクスポートします |
使用/実行方法 | コマンド プロンプトを開き、「bcp 」と入力してヘルプを表示します |
サンプルへのリンク | bcp ユーティリティ |
blobfuse
カテゴリ | 値 |
---|---|
紹介 | Linux ファイル システムで Azure Blob Storage コンテナーをマウントするツール |
サポートされている DSVM バージョン | Linux |
標準的な使用 | コンテナー内の BLOB の読み取りと書き込みを行います |
使用と実行の方法 | 端末で blobfuse を実行します |
サンプルへのリンク | GitHub の blobfuse |