Catatan
Akses ke halaman ini memerlukan otorisasi. Anda dapat mencoba masuk atau mengubah direktori.
Akses ke halaman ini memerlukan otorisasi. Anda dapat mencoba mengubah direktori.
Pelajari cara menganalisis log situs web menggunakan Data Lake Analytics, terutama tentang mengetahui perujuk mana yang mengalami kesalahan ketika mereka mencoba mengunjungi situs web.
Penting
Azure Data Lake Analytics pensiun pada 29 Februari 2024. Pelajari lebih lanjut dengan pengumuman ini.
Untuk analitik data, organisasi Anda dapat menggunakan Azure Synapse Analytics atau Microsoft Fabric.
Prasyarat
Visual Studio 2015 atau Visual Studio 2013.
Data Lake Tools untuk Visual Studio.
Setelah Data Lake Tools for Visual Studio diinstal, Anda akan melihat item Data Lake di menu Alat di Visual Studio:
Pengetahuan dasar tentang Data Lake Analytics dan Data Lake Tools for Visual Studio. Untuk memulai, lihat:
Akun Data Lake Analytics. Lihat Membuat akun Azure Data Lake Analytics.
Instal data contoh. Di portal Microsoft Azure, buka akun Data Lake Analytics Anda dan pilih Contoh Skrip di menu sebelah kiri, lalu pilih Salin Data Sampel.
Hubungkan ke Azure
Sebelum dapat membuat dan menguji skrip U-SQL apa pun, Anda harus terlebih dahulu menyambungkan ke Azure.
Untuk menyambungkan ke Data Lake Analytics
- Buka Visual Studio.
- Pilih Opsi dan Pengaturan Data Lake>.
- Pilih Masuk, atau Ubah Pengguna jika seseorang telah masuk, dan ikuti instruksinya.
- Pilih OK untuk menutup dialog Opsi dan Pengaturan.
Untuk menelusuri akun Data Lake Analytics Anda
- Dari Visual Studio, buka Server Explorer dengan menekan CTRL+ALT+S.
- Dari Server Explorer, perluas Azure, lalu perluas Data Lake Analytics. Anda akan melihat daftar akun Data Lake Analytics Jika ada. Anda tidak dapat membuat akun Data Lake Analytics dari studio. Untuk membuat akun, lihat Mulai menggunakan Azure Data Lake Analytics menggunakan portal Microsoft Azure atau Mulai menggunakan Azure Data Lake Analytics menggunakan Azure PowerShell.
Mengembangkan aplikasi U-SQL
Aplikasi U-SQL sebagian besar adalah skrip U-SQL. Untuk mempelajari selengkapnya tentang U-SQL, lihat Mulai menggunakan U-SQL.
Anda dapat menambahkan operator tambahan yang ditentukan pengguna ke aplikasi. Untuk informasi selengkapnya, lihat Mengembangkan operator yang ditentukan pengguna U-SQL untuk pekerjaan Data Lake Analytics.
Untuk membuat dan mengirimkan tugas dalam Data Lake Analytics
Pilih File > Proyek Baru>.
Pilih jenis Proyek U-SQL.
Pilih OK. Visual studio membuat solusi dengan file Script.usql.
Masukkan skrip berikut ke dalam file Script.usql:
// Create a database for easy reuse, so you don't need to read from a file very time. CREATE DATABASE IF NOT EXISTS SampleDBTutorials; // Create a Table valued function. TVF ensures that your jobs fetch data from he weblog file with the correct schema. DROP FUNCTION IF EXISTS SampleDBTutorials.dbo.WeblogsView; CREATE FUNCTION SampleDBTutorials.dbo.WeblogsView() RETURNS @result TABLE ( s_date DateTime, s_time string, s_sitename string, cs_method string, cs_uristem string, cs_uriquery string, s_port int, cs_username string, c_ip string, cs_useragent string, cs_cookie string, cs_referer string, cs_host string, sc_status int, sc_substatus int, sc_win32status int, sc_bytes int, cs_bytes int, s_timetaken int ) AS BEGIN @result = EXTRACT s_date DateTime, s_time string, s_sitename string, cs_method string, cs_uristem string, cs_uriquery string, s_port int, cs_username string, c_ip string, cs_useragent string, cs_cookie string, cs_referer string, cs_host string, sc_status int, sc_substatus int, sc_win32status int, sc_bytes int, cs_bytes int, s_timetaken int FROM @"/Samples/Data/WebLog.log" USING Extractors.Text(delimiter:' '); RETURN; END; // Create a table for storing referrers and status DROP TABLE IF EXISTS SampleDBTutorials.dbo.ReferrersPerDay; @weblog = SampleDBTutorials.dbo.WeblogsView(); CREATE TABLE SampleDBTutorials.dbo.ReferrersPerDay ( INDEX idx1 CLUSTERED(Year ASC) DISTRIBUTED BY HASH(Year) ) AS SELECT s_date.Year AS Year, s_date.Month AS Month, s_date.Day AS Day, cs_referer, sc_status, COUNT(DISTINCT c_ip) AS cnt FROM @weblog GROUP BY s_date, cs_referer, sc_status;Untuk memahami U-SQL, lihat Mulai menggunakan bahasa U-SQL Data Lake Analytics.
Tambahkan skrip U-SQL baru ke proyek Anda dan masukkan yang berikut ini:
// Query the referrers that ran into errors @content = SELECT * FROM SampleDBTutorials.dbo.ReferrersPerDay WHERE sc_status >=400 AND sc_status < 500; OUTPUT @content TO @"/Samples/Outputs/UnsuccessfulResponses.log" USING Outputters.Tsv();Beralih kembali ke skrip U-SQL pertama dan di samping tombol Kirim , tentukan akun Analitik Anda.
Dari Penjelajah Solusi, pilih kanan Script.usql, lalu pilih Bangun Skrip. Verifikasi hasilnya di panel Output.
Dari Penjelajah Solusi, pilih kanan Script.usql, lalu pilih Kirim Skrip.
Verifikasi Akun Analitik adalah akun tempat Anda ingin menjalankan pekerjaan, lalu pilih Kirim. Hasil pengiriman dan tautan pekerjaan tersedia di jendela Data Lake Tools for Visual Studio Results saat pengiriman selesai.
Tunggu hingga pekerjaan berhasil diselesaikan. Jika pekerjaan gagal, kemungkinan besar file sumber hilang. Lihat bagian Prasyarat dari tutorial ini. Untuk informasi pemecahan masalah selengkapnya, lihat Memantau dan memecahkan masalah pekerjaan Azure Data Lake Analytics.
Ketika pekerjaan selesai, Anda akan melihat layar berikut:
Sekarang ulangi langkah 7- 10 untuk Script1.usql.
Untuk melihat output pekerjaan
- Dari Server Explorer, perluas Azure, perluas Data Lake Analytics, perluas akun Data Lake Analytics Anda, perluas Akun Penyimpanan, klik kanan akun Data Lake Storage default, lalu pilih Explorer.
- Klik dua kali Sampel untuk membuka folder, lalu klik dua kali Output.
- Klik dua kali UnsuccessfulResponses.log.
- Anda juga dapat mengeklik dua kali file output di dalam tampilan grafik tugas untuk langsung menuju ke output.
Langkah berikutnya
Untuk mulai menggunakan Data Lake Analytics menggunakan alat yang berbeda, lihat: