setMethod("acos",
          signature(x = "Column"),
          function(x) {
            jc <- callJStatic("org.apache.spark.sql.functions", "acos", x@jc)
            column(jc)
          })

Azure ML PowerShell モジュールのインストール

1.  モジュールの取得と配置

2.  既定のワークスペース情報の設定

{ "Location": "South Central US", "WorkspaceId": "<Workspace Id>", "AuthorizationToken": "<Autorization Token>" }

3.  PowerShell モジュールのインポート

> Unblock-File .\AzureMLPS.dll > Import-Module .\AzureMLPS.dll

4.  Azure ML PowerShell の実行 (稼働確認)

> Get-AmlWorkspace

Azure ML ワークスペースに対する操作

ワークスペースに対するユーザーの追加 ：　Add-AmlWorkspaceUsers

> Add-AmlWorkspaceUsers -Emails 'user1@example.com,user2@example.com' -Role 'User'

対象ワークスペースのユーザー一覧取得：　Get-AmlWorkspaceUsers

> Get-AmlWorkspaceUsers

データセット一覧の取得：　Get-AmlDataset、データセットのダウンロード：　Download-AmlDataset

> $ds = Get-AmlDataset | where Name -eq 'Sample Named Entity Recognition Articles' > Download-AmlDataset -DatasetId $ds.Id -DownloadFileName 'C:\work\download\TestDataset.csv'

データセットのアップロード：　Upload-AmlDataset

> Upload-AmlDataset -FileFormat GenericCSV -UploadFileName 'C:\work\AzureMLPS\download\TestDataset.csv' -DatasetName 'Uploaded Dataset by PowerShell' -Description 'Test Dataset'

Experiment のエクスポート：　Export-AmlExperimentGraph

> $exp = Get-AmlExperiment | where Description -eq 'Test Experiment 1' > Export-AmlExperimentGraph -ExperimentId $exp.ExperimentId -OutputFile 'TestExperimentBackup.json'

Experiment のインポート：　Import-AmlExperimentGraph

> Import-AmlExperimentGraph -InputFile 'C:\work\TestExperimentBackup.json' -NewName 'New Test Experiment'

パフォーマンス調査の準備

1)  最新の SQL Server Data Tools (SSDT) をダウンロード、インストールします

2)  SSDT を起動し [表示] - [SQL Server オブジェクト エクスプローラー] を開きます

3)  SQL Server オブジェクト エクスプローラーで "SQL Server" を右クリックして [SQL Server の追加] から対象の Azure SQL Data Warehouse を追加します

 パフォーマンス調査のための情報採取

1)  処理時間のかかっているクエリー(の request_id) を特定します

SELECT TOP 10 * FROM sys.dm_pdw_exec_requests ORDER BY total_elapsed_time DESC;

SELECT TOP 10 * FROM sys.dm_pdw_exec_requests WHERE status = 'Running' ORDER BY total_elapsed_time DESC;

2)  問題クエリーをステップ単位に掘り下げ、問題ステップを特定します

SELECT * FROM sys.dm_pdw_request_steps WHERE request_id = 'QID10154' ORDER BY step_index;

3) Compute (実行) ノードのクエリー処理詳細を確認します

SELECT * FROM sys.dm_pdw_sql_requests WHERE request_id = 'QID10236'

4)  DMS (ノード間データ移動) の処理詳細を確認します

SELECT * FROM sys.dm_pdw_dms_workers WHERE request_id = 'QID10236'

5)  実行プランを確認して問題点をより詳細に把握します

DBCC PDW_SHOWEXECUTIONPLAN (12, 1287)

参考情報

sys.dm_pdw_exec_requests (Transact-SQL) https://msdn.microsoft.com/ja-JP/library/mt203887.aspx

sys.dm_pdw_request_steps (Transact-SQL) https://msdn.microsoft.com/ja-JP/library/mt203913.aspx

sys.dm_pdw_sql_requests (Transact-SQL) https://msdn.microsoft.com/ja-JP/library/mt203889.aspx

sys.dm_pdw_dms_workers (Transact-SQL) https://msdn.microsoft.com/ja-JP/library/mt203878.aspx

1. Microsoft Bot Framework とは？

  Bot Connector

Bot Builder SDK

Bot Directory (Comming Soon)

Bot Framework は誰をターゲットにしたものか？どのようなメリットがあるのか？

何のために Bot を開発するのか？

Bot を開発したい場合、何から始めればよいか？

なぜマイクロソフトは Bot Framework を開発したのか？

Bot Framework はどのような人々が関わっているのか？

Bot Framework いつから始まったのか？

Bot Framework は既に公開されているのか？

Bot Framework はいつまでプレビュー期間か？現状(プレビュー) の Bot Framework を使ってアプリ開発、公開できるか？

Bot Framework の今後のロードマップは？

Bot Connector は開発者に何を提供するか？　どのように動くのか？

どのように動くか？

• Bot  (もしまだなら、GitHub にある Bot Builder SDK を checkout しましょう)
• マイクロソフトアカウント (Bot を登録、管理するために必要です)
• Bot Connector メッセージ API のためのインターネット接続可能な REST API エンドポイント
• (オプション)　Bot と会話させるための 1 つ、もしくは複数のサービスに対するアカウント

Bot の登録

チャネルに対する接続

Bot Directory の参照 (Comming Soon)

状態評価

管理

Bot Connector は現状 どのようなチャネルをサポートしているか？

• Text/SMS
• Office 365 メール
• Skype
• Slack
• GroupMe
• Telegram
• Facebook Messenger
• Web (Bot Framework の組み込み Web チャット経由)

今後どのようなインタフェースを Bot Connector に追加するか？

Bot Connector 上で追加したい新しいチャネルがあります。マイクロソフトと共同でチャネル追加することはできますか？

もし Skype に対する Bot を開発したい場合、どのツールとサービスを使うべきか？

Facebook Messenger はチャネルとしてサポートしていますか？

なぜ Google Hangouts やその他チャネルがないのか？将来的にサポートする予定にしているか？

Bot Builder SDK は開発者に何を提供するか？どのように動くか？

Bot Framework を使ってプライベート もしくは自社内のみで利用可能な Bot を開発することは可能か？

Bot Builder SDK は Python のような他言語をサポートする予定か？

Bot Directory は開発者に何を提供するか？どのように動くか？

自分の  Bot を Bot Directory に申請できるか？

Bot Directory は現状 "Comming Soon" となっている。いつ利用可能になるか？

Microsoft Bot Framework は他の Bot 開発ツールとどのように比較するか？

Bot Connector と共に登録された Bot は個人情報を収集するか？ もし収集する場合、どうやってデータの安全性を確かにできるか？プライバシーはどうなっているか？

Bot をどのようにして利用停止、削除するか？

質問 1：　どの機械学習アルゴリズムを使えばいいの？

質問 2：　機械学習のモデルを作るにあたって参考になるものないの？

質問 3：　Azure ML のワークスペースって何単位で作ればよいの？

質問 4：　Azure ML ワークスペースは誰でもアクセスできるの？

質問 5：　Azure ML って何にいくらかかるの？

質問 6：　Azure ML にはどのようなアルゴリズムが用意されているの？

質問 7：　各アルゴリズムの実装は公開されているの？

質問 8：　どの項目がトレーニング結果に効いているかを簡単に把握する方法はないの？

質問 9：　作成した Experiment を他のワークスペースに持っていきたい場合はどうすればいいの？

質問 10：　Azure ML の Experiment を ML Studio ではなくプログラマブルに実装できないの？

1. お客様ごとに合わせたプロモーション
2. お客様に合わせたケータイ クーポン
3. お客様ターゲットに合わせたプッシュ通知

1. 「用意されたツールセット」を使用して実際に問題解決できる状態に至るまでに壁がある
2. 「パフォーマンス問題対処の手法」を把握して実際に問題解決できる状態に至るまでに壁がある