Arsitektur analitik tingkat lanjut

Arsitektur ini memungkinkan Anda untuk menggabungkan data apa pun pada skala apa pun dengan pembelajaran mesin khusus dan mendekati analisis data real-time pada layanan streaming.

Arsitektur

Unduh file Visio arsitektur ini.

Aliran data

1. Satukan semua data terstruktur, tidak terstruktur, dan semi-terstruktur Anda (log, file, dan media) menggunakan Synapse Pipelines ke Azure Data Lake Storage.
2. Gunakan kumpulan Apache Spark untuk membersihkan dan mengubah kumpulan data tanpa struktur dan menggabungkannya dengan data terstruktur dari database operasional atau gudang data.
3. Gunakan teknik pembelajaran mesin/pembelajaran mendalam yang dapat diskalakan, untuk mendapatkan wawasan yang lebih mendalam dari data ini menggunakan Python, Scala, atau .NET, dengan pengalaman notebook di kumpulan Apache Spark.
4. Terapkan kumpulan Apache Spark dan Synapse Pipelines di Azure Synapse Analytics untuk mengakses dan memindahkan data dalam skala besar.
5. Kueri dan laporkan data di Power BI.
6. Ambil wawasan dari kumpulan Apache Spark ke Azure Cosmos DB untuk membuatnya dapat diakses melalui aplikasi web dan seluler.

Alur kerja

• Azure Synapse Analytics adalah gudang data cloud yang cepat, fleksibel, dan tepercaya yang memungkinkan Anda menskalakan, menghitung, dan menyimpan secara elastis dan mandiri, dengan arsitektur pemrosesan paralel yang masif.
• Dokumentasi Synapse Pipelines memungkinkan Anda membuat, menjadwalkan, dan mengatur alur kerja ETL/ELT Anda.
• Azure Blob storage adalah penyimpanan objek yang sangat skalabel untuk semua jenis data tidak terstruktur-gambar, video, audio, dokumen, dan lainnya dengan mudah dan hemat biaya.
• Kumpulan Azure Synapse Analytics Spark adalah platform analisis berbasis Apache Spark yang cepat, mudah, dan kolaboratif.
• Azure Cosmos DB adalah layanan database multi-model yang didistribusikan secara global. Pelajari cara mereplikasi data Anda di sejumlah wilayah Azure dan menskalakan throughput Anda secara independen dari penyimpanan Anda.
• Azure Synapse Link untuk Azure Cosmos DB memungkinkan Anda menjalankan analisis mendekati real-time atas data operasional di Azure Cosmos DB, tanpa adanya dampak performa atau biaya pada beban kerja transaksi Anda, dengan menggunakan dua mesin analitik yang tersedia dari ruang kerja Azure Synapse Anda: SQL Serverless dan Spark Pools.
• Azure Analysis Services adalah analitik tingkat perusahaan sebagai layanan yang memungkinkan Anda mengatur, menyebarkan, menguji, dan memberikan solusi BI Anda dengan keyakinan.
• Power BI adalah serangkaian alat analitik bisnis yang memberikan wawasan ke seluruh organisasi Anda. Tersambung ke ratusan sumber data, sederhanakan persiapan data, dan dorong analisis yang tidak direncanakan. Buat laporan yang menarik, lalu terbitkan untuk digunakan organisasi Anda di web dan di seluruh perangkat seluler.

Alternatif

• Synapse Link adalah solusi pilihan Microsoft untuk analitik di atas data Azure Cosmos DB.

Detail skenario

Ubah data Anda menjadi wawasan yang dapat ditindaklanjuti menggunakan alat pembelajaran mesin terbaik di kelasnya. Solusi ini memungkinkan Anda untuk menggabungkan data apa pun dalam skala apa pun, dan untuk membangun serta menerapkan model pembelajaran mesin kustom dalam skala besar. Untuk mempelajari bagaimana platform data skala perusahaan dirancang sebagai bagian dari zona pendaratan perusahaan, lihat dokumentasi zona pendaratan Data Kerangka Kerja Adopsi Cloud .

Potensi penggunaan kasus

Organisasi memiliki kemampuan untuk mengakses lebih banyak data daripada sebelumnya. Analitik tingkat lanjut membantu memanfaatkan wawasan data. Area meliputi:

• Layanan pelanggan.
• Pemeliharaan prediktif.
• Merekomendasikan produk atau layanan.
• Pengoptimalan sistem dari segala sesuatu mulai dari rantai pasokan hingga operasi pusat data.
• Pengembangan produk dan layanan.

Pertimbangan

Pengoptimalan biaya

Optimalisasi biaya adalah tentang mencari cara untuk mengurangi pengeluaran yang tidak perlu dan meningkatkan efisiensi operasional. Untuk informasi selengkapnya, lihat Gambaran umum pilar pengoptimalan biaya.

• Menyesuaikan dan mendapatkan perkiraan harga

Langkah berikutnya

• Pelajari tentang desain platform data skala perusahaan
• Pelajari cara merancang dan menyebarkan platform analitik data end-to-end

Lihat dokumentasi berikut tentang layanan yang ditampilkan dalam arsitektur ini:

• Dokumentasi Synapse Analytics
• Dokumentasi Synapse Pipelines
• Pengenalan penyimpanan objek di Azure
• Kumpulan Spark Azure Synapse Analytics
• Dokumentasi Azure Cosmos DB
• Dokumentasi Analysis Services
• Dokumentasi Power BI

Sumber daya terkait

• Mengamankan data lakehouse dengan Azure Synapse Analytics
• Menganalisis data operasional di MongoDB Atlas menggunakan Azure Synapse Analytics
• Analitik data besar dengan keamanan tingkat perusahaan menggunakan Azure Synapse
• Analisis data spaceborne dengan Azure Synapse Analytics
• Analitik ujung ke ujung dengan Azure Synapse