Apa arsip baru untuk Azure Data Factory
Azure Data Factory ditingkatkan secara berkelanjutan. Untuk tetap mendapatkan informasi terbaru tentang perkembangan terbaru, lihat halaman Apa yang Baru saat ini, yang memberi Anda informasi tentang:
- Rilis terbaru.
- Masalah yang diketahui.
- Perbaikan bug.
- Fungsionalitas yang tidak digunakan lagi.
- Rencana perubahan.
Halaman arsip ini menyimpan pembaruan dari bulan yang lebih lama.
Lihat arsip video Apa yang Baru untuk semua pembaruan bulanan kami.
Juli 2023
Ubah Pengambilan Data
Sumber daya CDC tingkat atas sekarang mendukung evolusi skema. Pelajari lebih lanjut
Aliran Data
Opsi gabungkan skema di sink delta sekarang mendukung evolusi skema dalam Pemetaan Aliran Data. Pelajari lebih lanjut
Pergerakan data
- Komentari Bagian Dari Alur dengan Pennonaktifkan. Pelajari lebih lanjut
- Nilai pengembalian alur sekarang tersedia secara umum. Pelajari lebih lanjut
Produktivitas pengembang
Pencarian dokumentasi sekarang disertakan dalam toolbar pencarian Azure Data Factory. Pelajari lebih lanjut
Juni 2023
Apa itu integrasi berkelanjutan dan penyebaran berkelanjutan
Paket npm sekarang mendukung bundel yang telah diunduh sebelumnya untuk membangun templat ARM. Jika pengaturan firewall Anda memblokir unduhan langsung untuk paket npm Anda, Anda sekarang dapat memuat paket sebelumnya, dan membiarkan paket npm menggunakan versi lokal sebagai gantinya. Ini adalah peningkatan super untuk alur CI/CD Anda di lingkungan firewall.
Perluasan Wilayah
Azure Data Factory sekarang tersedia di Swedia Tengah. Anda dapat menemukan alur kerja ETL Anda di wilayah baru ini jika Anda menggunakan wilayah untuk menyimpan dan mengelola gudang data modern Anda. Pelajari lebih lanjut
Pergerakan data
Mengamankan lalu lintas keluar dengan aturan jaringan keluar Azure Data Factory sekarang didukung. Pelajari lebih lanjut
Konektor
Konektor Amazon S3 sekarang didukung sebagai tujuan sink menggunakan Pemetaan Aliran Data. Pelajari lebih lanjut
Aliran Data
Kami memperkenalkan pengaturan Sumber opsional untuk sumber DelimitedText dan JSON di sumber daya CDC tingkat atas. Sumber daya CDC tingkat atas di pabrik data sekarang mendukung konfigurasi sumber opsional untuk sumber Yang Dibatasi dan JSON. Sekarang Anda dapat memilih pemisah kolom/baris untuk sumber yang dibatasi dan mengatur jenis dokumen untuk sumber JSON. Pelajari lebih lanjut
Mei 2023
Data Factory di Microsoft Fabric
Pabrik data di Microsoft Fabric menyediakan pergerakan data skala cloud dan layanan transformasi data yang memungkinkan Anda memecahkan skenario pabrik data dan ETL yang paling kompleks. Ini dimaksudkan untuk membuat pengalaman pabrik data Anda mudah digunakan, kuat, dan benar-benar tingkat perusahaan.
April 2023
Aliran Data
Buka beberapa array dengan mudah dalam aliran data ADF. ADF memperbarui transformasi Flatten yang sekarang membuatnya sangat mudah untuk membuka beberapa array dari satu langkah transformasi Flatten . Pelajari lebih lanjut
Apa itu integrasi berkelanjutan dan penyebaran berkelanjutan
Anda dapat menyesuaikan pesan penerapan dalam mode Git sekarang. Ketik deskripsi terperinci tentang perubahan yang Anda buat, dan kami akan menyimpannya ke repositori Git.
Konektor
Konektor Azure Blob Storage sekarang mendukung autentikasi anonim. Pelajari lebih lanjut
Maret 2023
Konektor
Konektor Azure Data Lake Storage Gen2 sekarang mendukung autentikasi tanda tangan akses bersama. Pelajari lebih lanjut
Februari 2023
Pergerakan data
- Jenis autentikasi anonim yang didukung untuk penyimpanan Azure Blob Pelajari selengkapnya
- Templat SAP yang diperbarui untuk memindahkan data SAP dengan mudah ke ADLSGen2 dalam format Delta Pelajari selengkapnya
Pemantauan
Tampilan pemantauan kontainer tersedia di studio ADF default Pelajari selengkapnya
Orkestrasi
- Atur nilai output alur (Pratinjau publik) Pelajari selengkapnya
- Workflow Orchestration Manager (Pratinjau publik) Pelajari selengkapnya
Produktivitas pengembang
Dukungan tema gelap ditambahkan (Pratinjau publik) Pelajari selengkapnya
January 2023
Aliran Data
- Alur sekarang mendukung penyimpangan skema Pelajari selengkapnya
- Ekstrak tambahan SQL CDC sekarang mendukung kolom numerik Pelajari selengkapnya
Pergerakan data
Sumber daya CDC tingkat atas baru - konfigurasi CDC asli dalam 3 langkah sederhana Pelajari selengkapnya
Orkestrasi
Mengatur notebook Synapse dan definisi pekerjaan Synapse spark secara asli Pelajari lebih lanjut
Perluasan Wilayah
- Ekspansi wilayah berkelanjutan - Tiongkok Utara 3 sekarang didukung Pelajari selengkapnya
- Ekspansi wilayah berkelanjutan - Swiss Barat sekarang didukung Pelajari selengkapnya
SQL Server Integration Services (SSIS)
Injeksi jaringan virtual ekspres untuk SSIS sekarang tersedia secara umum Pelajari selengkapnya
Produktivitas pengembang
- Menambahkan dukungan untuk sumber daya favorit di halaman beranda
- Simpan lebar kolom untuk pemantauan alur
- Memantau pembaruan filter untuk pencarian yang lebih cepat
- Langsung luncurkan Galeri Templat Alur melalui portal Azure
Desember 2022
Aliran Data
Ekstrak inkremental SQL change data capture (CDC) - mendukung kolom numerik dalam memetakan aliran data Pelajari selengkapnya
Pergerakan data
Injeksi jaringan virtual ekspres untuk SSIS di Azure Data Factory umumnya tersedia Pelajari selengkapnya
Perluasan Wilayah
Ekspansi wilayah berkelanjutan - Azure Data Factory sekarang tersedia di Tiongkok Utara 3 Pelajari selengkapnya
November 2022
Aliran Data
- Inkremental hanya tersedia di SAP CDC - dapatkan perubahan hanya dari sistem SAP tanpa beban penuh awal Pelajari lebih lanjut
- Partisi sumber dalam beban data lengkap awal SAP CDC untuk meningkatkan performa Pelajari selengkapnya
- Templat alur baru - Memuat beberapa objek dengan jumlah besar dari SAP melalui SAP CDC Pelajari selengkapnya
Pergerakan Data
- Dukungan ke Azure Databricks melalui tautan privat dari jaringan virtual terkelola Data Factory Pelajari selengkapnya
Antarmuka Pengguna
3 Penyempurnaan perancang alur ditambahkan ke pengalaman pratinjau ADF Studio
- Flyout konten dinamis - mempermudah mengatur konten dinamis dalam aktivitas alur Anda tanpa menggunakan penyusun ekspresi Pelajari selengkapnya
- Relokasi pesan kesalahan ke kolom status - memudahkan Anda untuk melihat kesalahan saat Anda melihat eksekusi alur Gagal Pelajari selengkapnya
- Tampilan kontainer - di Tab Penulis, Alur dapat mengubah tampilan output dari daftar ke kontainer Pelajari selengkapnya
Apa itu integrasi berkelanjutan dan penyebaran berkelanjutan
Dalam konfigurasi publikasi otomatis, tombol nonaktifkan penerbitan tersedia untuk membatalkan penimpaan penyebaran publikasi otomatis terakhir Pelajari selengkapnya
Oktober 2022
Ringkasan video
Aliran Data
- Ekspor hingga 1000 baris dari pratinjau aliran data Pelajari selengkapnya
- SQL CDC di Pemetaan Aliran Data sekarang tersedia (Pratinjau Publik) Pelajari selengkapnya
- Buka kunci analitik tingkat lanjut dengan Aliran Data Pemetaan Microsoft 365 Koneksi or Pelajari selengkapnya
- SAP Change Data Capture (CDC) sekarang tersedia secara umum Pelajari selengkapnya
Produktivitas pengembang
- Sekarang menerima kontribusi komunitas ke Galeri Templat Pelajari selengkapnya
- Desain baru di portal Azure - temukan cara meluncurkan ADF Studio Learn lebih lanjut dengan mudah
- Pembelajaran Center sekarang tersedia di studio Azure Data FactoryPelajari lebih lanjut
- Satu klik untuk mencoba Azure Data Factory Pelajari selengkapnya
Orkestrasi
- Tampilan penagihan terperinci yang tersedia untuk ADF - lihat informasi penagihan terperinci menurut alur (Pratinjau Umum) Pelajari selengkapnya
- Batas waktu eksekusi aktivitas skrip sekarang dapat dikonfigurasi Pelajari selengkapnya
Perluasan Wilayah
Ekspansi wilayah berkelanjutan - Qatar Central sekarang didukung Pelajari selengkapnya
Apa itu integrasi berkelanjutan dan penyebaran berkelanjutan
Mengecualikan pemicu alur yang tidak berubah dalam penyebaran sekarang tersedia secara umum Pelajari selengkapnya
September 2022
Ringkasan video
Aliran Data
- Konektor sumber Amazon S3 ditambahkan Pelajari selengkapnya
- Konektor berbasis REST Google Spreadsheet ditambahkan sebagai Sumber (Pratinjau) Pelajari selengkapnya
- Pengoptimalan kolom maksimum dalam aliran data Pelajari selengkapnya
- Kemampuan Pengambilan Data Perubahan SAP di Pemetaan Aliran Data (Pratinjau) - Mengekstrak dan mengubah perubahan data dari sistem SAP untuk refresh data yang lebih efisien Pelajari selengkapnya
- Menulis data ke bidang pencarian melalui kunci alternatif yang didukung di konektor Dynamics 365/CRM untuk memetakan aliran data Pelajari selengkapnya
Pergerakan data
Dukungan untuk mengonversi jenis Oracle NUMBER ke bilangan bulat terkait di sumber Pelajari selengkapnya
Pemantauan
- Peningkatan pemantauan tambahan di Azure Data Factory Pelajari selengkapnya
- Memantau peningkatan pemuatan - data pengelompokan eksekusi ulang alur yang diambil hanya saat diperluas
- Penomoran halaman ditambahkan ke tampilan eksekusi aktivitas alur untuk memperlihatkan semua rekaman aktivitas dalam eksekusi alur
- Memantau peningkatan konsumsi - ikon pemuatan ditambahkan untuk mengetahui kapan laporan konsumsi dihitung sepenuhnya
- Kolom pengurutan tambahan dalam pemantauan - pengurutan ditambahkan untuk Nama alur, Jalankan Akhir, dan Status
- Pengaturan zona waktu sekarang disimpan dalam pemantauan
- Tampilan bagan Gantt sekarang didukung dalam pemantauan runtime integrasi Pelajari selengkapnya
Orkestrasi
Metode DELETE dalam aktivitas Web sekarang mendukung pengiriman isi dengan permintaan HTTP Pelajari selengkapnya
Antarmuka pengguna
- Dukungan antarmuka pengguna asli parameterisasi ditambahkan untuk 6 layanan tertaut tambahan - SAP ODP, ODBC, Microsoft Access, Informix, Snowflake, dan DB2 Pelajari selengkapnya
- Penyempurnaan perancang alur yang ditambahkan dalam pengalaman Pratinjau Studio - pengguna dapat melihat alur kerja di dalam objek alur seperti Untuk Setiap, Jika Kemudian, dll. Pelajari lebih lanjut
Agustus 2022
Ringkasan video
Aliran Data
- Konektor Appfigures ditambahkan sebagai Sumber (Pratinjau) Pelajari selengkapnya
- Transformasi transmisi ditambahkan - mengonversi jenis data secara visual Pelajari selengkapnya
- UI baru untuk himpunan data sebaris - kategori ditambahkan untuk menemukan sumber data dengan mudah Pelajari selengkapnya
Pergerakan data
Jenis autentikasi perwakilan layanan ditambahkan untuk penyimpanan Azure Blob Pelajari selengkapnya
Produktivitas pengembang
- Batas waktu aktivitas default berubah dari 7 hari menjadi 12 jam Pelajari selengkapnya
- Pengalaman pembuatan pabrik data baru - satu klik untuk menyiapkan pabrik Anda dalam hitungan detik Pelajari selengkapnya
- Pembaruan UI penyusun ekspresi - tab kategoris ditambahkan untuk penggunaan lebih mudah Pelajari selengkapnya
Integrasi Berkelanjutan dan Penyediaan Berkelanjutan (CI/CD)
Saat CI/CD mengintegrasikan templat ARM, alih-alih menonaktifkan semua pemicu, itu dapat mengecualikan pemicu yang tidak berubah dalam penyebaran Pelajari lebih lanjut
Juli 2022
Ringkasan video
Aliran Data
- Konektor Asana ditambahkan sebagai sumber Pelajari selengkapnya
- Tiga fungsi transformasi data baru sekarang didukung Pelajari selengkapnya
- collectUnique() - Buat koleksi baru nilai unik dalam array.
- substringIndex() - Ekstrak substring sebelum n terjadinya pemisah.
- topN() - Mengembalikan hasil n teratas setelah mengurutkan data Anda.
- Mengambil ulang dari sumber yang tersedia di Refresh untuk skenario perubahan sumber data Pelajari selengkapnya
- Fungsi yang ditentukan pengguna (GA) - Membuat ekspresi yang dapat digunakan kembali dan disesuaikan untuk menghindari membangun logika yang kompleks berulang-ulang Pelajari lebihlanjut Video
- Konfigurasi yang lebih mudah pada runtime aliran data - pilih ukuran komputasi di antara Kecil, Sedang, dan Besar untuk mengonfigurasi sebelumnya semua pengaturan runtime integrasi Pelajari selengkapnya
Integrasi Berkelanjutan dan Penyediaan Berkelanjutan (CI/CD)
Sertakan parameter Global yang didukung dalam templat ARM. Pelajari lebih lanjut
Produktivitas pengembang
Jadilah bagian dari fitur pratinjau studio Azure Data Factory - Rasakan kemampuan Azure Data Factory terbaru dan jadilah yang pertama berbagi umpan balik Anda Pelajari selengkapnya
Juni 2022
Ringkasan video
| Kategori Layanan | Peningkatan layanan | Rincian |
| Aliran Data | Fuzzy join didukung untuk alur data | Fuzzy join sekarang didukung dalam transformasi Join dari alur data dengan skor kesamaan yang dapat dikonfigurasi pada kondisi join. Pelajari lebih lanjut |
| Kemampuan mengedit dalam proyeksi sumber | Kemampuan pengeditan dalam proyeksi sumber tersedia di Dataflow untuk membuat modifikasi skema dengan mudah Pelajari lebih lanjut | |
| Menegaskan penanganan kesalahan | Menegaskan penanganan kesalahan sekarang didukung dalam alur data untuk kualitas data dan validasi data Pelajari lebih lanjut | |
| Pergerakan Data | Parameterisasi secara native didukung di 4 konektor tambahan | Kami menambahkan dukungan UI asli untuk parameterisasi untuk layanan tertaut berikut: Azure Data Lake Gen1, Azure PostgreSQL, Google AdWords, dan PostgreSQL. Pelajari lebih lanjut |
| Kemampuan SAP Change Data Capture (CDC) di konektor SAP ODP baru (Pratinjau Publik) | Kemampuan SAP Change Data Capture (CDC) sekarang didukung di konektor SAP ODP baru. Pelajari lebih lanjut | |
| Integration Runtime | Time-To-Live di VNET terkelola (Pratinjau Publik) | Time-To-Live dapat diatur ke komputasi yang disediakan di VNET terkelola. Pelajari lebih lanjut |
| Pemantauan | Menjalankan kembali alur dengan parameter baru | Anda sekarang dapat menjalankan kembali alur dengan nilai parameter baru di Azure Data Factory. Pelajari lebih lanjut |
| Orkestrasi | Properti 'turnOffAsync' tersedia di aktivitas Web | Aktivitas web mendukung pola permintaan-balasan asinkron yang memanggil HTTP GET di bidang Lokasi di header respons dari Respons HTTP 202. Aktivitas ini membantu aktivitas web secara otomatis melakukan polling titik akhir pemantauan hingga pekerjaan berjalan. Properti 'turnOffAsync' didukung untuk menonaktifkan perilaku ini jika polling tidak diperlukan Pelajari lebih lanjut |
Mei 2022
| Kategori Layanan | Peningkatan layanan | Rincian |
| Aliran Data | Fungsi yang Ditentukan Pengguna untuk memetakan alur data | Azure Data Factory diterapkan pada fungsi yang ditentukan pengguna dan pustaka aliran data pratinjau publik. Fungsi yang ditentukan pengguna adalah ekspresi yang disesuaikan yang dapat Anda tentukan untuk dapat menggunakan kembali logika di beberapa aliran data pemetaan. Fungsi yang ditentukan pengguna hidup dalam koleksi yang disebut pustaka aliran data untuk dapat dengan mudah mengelompokkan kumpulan umum fungsi yang disesuaikan. Pelajari lebih lanjut |
April 2022
| Kategori Layanan | Peningkatan layanan | Rincian |
| Aliran Data | Peningkatan pratinjau data dan debug dalam pemetaan aliran data | Sesi debug menggunakan runtime integrasi (IR) AutoResolve Azure sekarang akan dimulai dalam waktu kurang dari 10 detik. Terdapat pembaruan baru pada panel pratinjau data dalam pemetaan aliran data. Sekarang Anda bisa mengurutkan baris di dalam tampilan pratinjau data dengan memilih header kolom. Anda dapat memindahkan kolom secara interaktif. Anda juga dapat menyimpan hasil pratinjau data sebagai CSV dengan menggunakan Ekspor CSV. Pelajari lebih lanjut |
| Konektor Dataverse tersedia untuk pemetaan aliran data | Konektor Dataverse tersedia sebagai sumber dan sink untuk pemetaan aliran data. Pelajari lebih lanjut | |
| Dukungan untuk skema database pengguna untuk penahapan dengan konektor Azure Synapse Analytics dan PostgreSQL di sink aliran data | Sink aliran data sekarang mendukung penggunaan skema database pengguna untuk penahapan di konektor Azure Synapse Analytics dan PostgreSQL. Pelajari lebih lanjut | |
| Pemantauan | Berbagai pembaruan untuk pengalaman pemantauan Data Factory | Pembaruan baru untuk pengalaman pemantauan di Data Factory mencakup kemampuan untuk mengekspor hasil ke CSV, menghapus semua filter, dan membuka proses di tab baru. Penembolokan kolom dan hasil juga ditingkatkan. Pelajari lebih lanjut |
| Antarmuka pengguna | Dukungan format wilayah baru | Memilih bahasa Anda dan format regional dalam pengaturan akan memengaruhi format bagaimana data seperti tanggal dan waktu muncul di pemantauan Azure Data Factory Studio. Misalnya, format waktu di Monitoring akan muncul seperti "2 Apr 2022, 3:40:29 pm" ketika memilih bahasa Inggris sebagai format regional, dan "2 Apr 2022, 15:40:29" ketika memilih bahasa Prancis sebagai format regional. Pengaturan bahasa dan wilayah ini hanya memengaruhi antarmuka pengguna Azure Data Factory Studio dan tidak mengubah/memodifikasi zona waktu dan data Anda yang sebenarnya. |
Maret 2022
Ringkasan video
| Kategori Layanan | Peningkatan layanan | Rincian |
| Aliran Data | ScriptLines dan layanan tertaut berparameter mendukung aliran data pemetaan yang ditambahkan | Sekarang, mudah untuk mendeteksi perubahan pada skrip aliran data Anda di Git dengan ScriptLines dalam definisi JSON aliran data Anda. Layanan tertaut berparameter saat ini juga dapat digunakan di dalam aliran data Anda untuk pola sambungan generik yang fleksibel. Pelajari lebih lanjut |
| Ketersediaan umum fowlets (GA) | Flowlet saat ini umumnya tersedia untuk membuat bagian logika aliran data yang dapat digunakan kembali yang dapat Anda bagikan di alur lain sebagai transformasi sebaris. Flowlets mengaktifkan pekerjaan extract-transform-and-load (ETL) terdiri dari komponen logika kustom atau umum. Pelajari lebih lanjut | |
| Konektor Ubah Umpan tersedia dalam lima transformasi sumber aliran data | Konektor Umpan Perubahan tersedia dalam transformasi sumber aliran data untuk Azure Cosmos DB, Azure Blob Storage, Azure Data Lake Storage Gen1, Azure Data Lake Storage Gen2, dan model data umum (CDM). Pelajari lebih lanjut | |
| Peningkatan pratinjau data dan debug dalam pemetaan aliran data | Fitur baru ditambahkan ke pratinjau data dan pengalaman debug dalam memetakan aliran data. Pelajari lebih lanjut | |
| Konektor SFTP untuk pemetaan aliran data | Konektor SFTP tersedia untuk pemetaan aliran data sebagai sumber dan sink. Pelajari lebih lanjut | |
| Pergerakan data | Mendukung Always Encrypted untuk konektor terkait SQL dalam Aktivitas Pencarian di bagian Jaringan virtual terkelola | Always Encrypted didukung untuk SQL Server, Azure SQL Database, Azure SQL Managed Instance, dan Synapse Analytics dalam aktivitas Pencarian di bawah jaringan virtual terkelola. Pelajari lebih lanjut |
| Runtime integrasi | Tata letak UI baru di halaman pembuatan dan edit Azure IR | Tata letak UI halaman pembuatan dan edit IR sekarang menggunakan gaya tab untuk Pengaturan, Jaringan virtual, dan Waktu proses aliran data. Pelajari lebih lanjut |
| Orkestrasi | Transformasi data menggunakan Script activity | Anda dapat menggunakan aktivitas Skrip untuk memanggil skrip SQL di SQL Database, Azure Synapse Analytics, SQL Server, Oracle, atau Snowflake. Pelajari lebih lanjut |
| Peningkatan waktu habis aktivitas web | Anda dapat mengonfigurasi waktu habis respons dalam aktivitas Web untuk mencegahnya agar tidak kehabisan waktu jika periode responsnya lebih dari satu menit, terutama dalam kasus API sinkron. Pelajari lebih lanjut |
Februari 2022
Ringkasan video
| Kategori Layanan | Peningkatan layanan | Rincian |
| Aliran Data | Layanan tertaut berparameter yang didukung dalam memetakan aliran data | Anda sekarang dapat menggunakan layanan tertaut berparameter dalam memetakan aliran data untuk membuat alur aliran data menjadi generik dan fleksibel. Pelajari lebih lanjut |
| Ekstrak sumber bertambah SQL Database tersedia dalam aliran data (pratinjau umum) | Opsi baru telah ditambahkan dalam memetakan sumber SQL Database aliran data yang disebut Mengaktifkan ekstrak bertambah (pratinjau). Sekarang Anda dapat secara otomatis menarik hanya baris yang telah diubah pada sumber SQL Database Anda dengan menggunakan aliran data. Pelajari lebih lanjut | |
| Empat konektor baru tersedia untuk memetakan aliran data (pratinjau umum) | Data Factory sekarang mendukung empat konektor baru (pratinjau umum) untuk memetakan aliran data: Konektor Quickbase, Konektor Smartsheet, Konektor TeamDesk, dan Konektor Zendesk. Pelajari lebih lanjut | |
| Azure Cosmos DB (API SQL) untuk memetakan aliran data sekarang mendukung mode sebaris | Azure Cosmos DB (API SQL) untuk memetakan aliran data sekarang dapat menggunakan himpunan data sebaris. Pelajari lebih lanjut | |
| Pergerakan data | Dapatkan alur penyerapan data berbasis metadata pada alat Data Factory Copy Data dalam 10 menit (GA) | Anda dapat membangun alur penyalinan data skala besar dengan pendekatan berbasis metadata pada alat Copy Data dalam waktu 10 menit. Pelajari lebih lanjut |
| Peningkatan API konektor Google AdWords Data Factory tersedia | Konektor Google AdWords Data Factory sekarang mendukung versi API AdWords yang baru. Tidak ada tindakan yang diperlukan untuk pengguna konektor baru karena diaktifkan secara default. Pelajari lebih lanjut | |
| Integrasi Berkelanjutan dan Penyediaan Berkelanjutan (CI/CD) | Dukungan lintas penyewa Azure DevOps | Mengonfigurasi repositori menggunakan Azure DevOps Git tidak di penyewa yang sama dengan Azure Data Factory。 Pelajari lebih lanjut |
| Perluasan Wilayah | Data Factory sekarang tersedia di US Barat3 dan India Barat Jio | Data Factory sekarang tersedia di dua wilayah baru: US Barat3 dan India Barat Jio. Anda dapat menempatkan alur kerja ETL Anda di wilayah baru ini jika Anda menggunakan wilayah ini untuk menyimpan dan mengelola gudang data modern Anda. Anda juga dapat menggunakan wilayah ini untuk kelangsungan bisnis dan tujuan pemulihan bencana jika Anda perlu melakukan failover dari wilayah lain dalam geo. Pelajari lebih lanjut |
| Keamanan | Menghubungkan ke akun Azure DevOps di penyewa Azure Active Directory (Azure AD) lainnya | Anda dapat membuat sambungan instans Data Factory Anda ke akun Azure DevOps di penyewa Azure AD yang berbeda untuk tujuan kontrol sumber. Pelajari lebih lanjut |
2022 Januari
| Kategori Layanan | Peningkatan layanan | Rincian |
| Aliran Data | Penggunaan kembali secara cepat sekarang bersifat otomatis di semua IR Azure yang menggunakan Time to Live (TTL) | Anda tidak perlu lagi menentukan “penggunaan kembali cepat” secara manual Aliran data pemetaan Data Factory sekarang dapat memulai aktivitas aliran data berikutnya dalam waktu kurang dari lima detik setelah Anda mengatur TTL. Pelajari lebih lanjut |
| Mengambil deskripsi Pernyataan kustom Anda | Dalam transformasi Pernyataan, Anda dapat menentukan pesan deskripsi dinamis Anda sendiri. Anda dapat menggunakan fungsi baru assertErrorMessage()untuk mengambil pesan baris demi baris dan menyimpannya di data tujuan Anda. Pelajari lebih lanjut | |
| Deteksi skema otomatis dalam transformasi Penguraian | Fitur baru yang ditambahkan ke transformasi Penguraian memudahkan deteksi skema secara otomatis dari bidang kompleks yang disematkan di dalam kolom string. Pilih tombol Deteksi skema untuk mengatur skema target Anda secara otomatis. Pelajari lebih lanjut | |
| Mendukung konektor Dynamics 365 sebagai sink dan sumber | Anda sekarang dapat terhubung langsung ke Dynamics 365 untuk mengubah data Dynamics Anda dalam skala besar dengan menggunakan konektor aliran data pemetaan baru untuk Dynamics 365. Pelajari lebih lanjut | |
| Koneksi SQL Always Encrypted sekarang tersedia dalam aliran data | Always Encrypted sekarang dapat mendapatkan sumber transformasi di SQL Server, SQL Database, SQL Managed Instance, dan Azure Synapse saat Anda menggunakan aliran data. Pelajari lebih lanjut | |
| Pergerakan data | Konektor Data Factory Azure Databricks Delta Lake mendukung jenis autentikasi baru | Konektor Data Factory Databricks Delta Lake sekarang mendukung dua jenis autentikasi: autentikasi identitas terkelola yang ditetapkan sistem dan autentikasi identitas terkelola yang ditetapkan pengguna. Pelajari lebih lanjut |
| Aktivitas Penyalinan Data Factory mendukung upsert di beberapa konektor lainnya | Aktivitas Penyalinan Data Factory sekarang mendukung upsert sementara hal tersebut memasukkan data ke SQL Server, SQL Database, SQL Managed Instance, dan Azure Synapse. Pelajari lebih lanjut |
Desember 2021
| Kategori Layanan | Peningkatan layanan | Rincian |
| Aliran Data | Konektor Dynamics sebagai sumber asli dan sink untuk memetakan aliran data | Konektor Dynamics sekarang didukung sebagai sumber dan sink untuk memetakan aliran data. Pelajari lebih lanjut |
| Pengambilan data perubahan asli (CDC) sekarang didukung secara native | CDC sekarang didukung secara khusus di Data Factory untuk Azure Cosmos DB, Blob Storage, Data Lake Storage Gen1, Data Lake Storage Gen2, dan CDM. Pelajari lebih lanjut | |
| Pratinjau umum flowlet | Pratinjau umum flowlet memungkinkan pengembang aliran data membangun komponen yang dapat digunakan kembali untuk membangun logika transformasi data yang dapat disusun dengan mudah. Pelajari lebih lanjut | |
| Pratinjau umum Data Pemetaan | Pratinjau Data Pemetaan memungkinkan pengguna bisnis untuk menentukan pemetaan kolom dan transformasi untuk memuat database lake Azure Synapse. Pelajari lebih lanjut | |
| Beberapa tujuan output dari Power Query | Anda sekarang dapat memetakan beberapa tujuan output dari Power Query di Data Factory untuk pola ETL yang fleksibel untuk integrator data warga. Pelajari lebih lanjut | |
| Dukungan transformasi Panggilan Eksternal | Perluas fungsionalitas dari pemetaan aliran data dengan menggunakan transformasi Panggilan Eksternal. Anda sekarang dapat menambahkan kode kustom Anda sendiri sebagai titik akhir REST atau memanggil layanan pihak ketiga yang dikumpulkan baris demi baris. Pelajari lebih lanjut | |
| Mengaktifkan penggunaan kembali secara cepat dengan aliran data pemetaan Azure Synapse dengan dukungan TTL | Aliran data pemetaan Azure Synapse sekarang mendukung penggunaan kembali secara cepat dengan menyetel TTL di Azure IR. Dengan menggunakan pengaturan, aktivitas aliran data berikutnya dapat dijalankan dalam waktu kurang dari lima detik. Pelajari lebih lanjut | |
| Menyatakan transformasi | Tambahkan kualitas data, validasi domain data, dan pemeriksaan metadata dengan mudah ke alur Data Factory Anda menggunakan transformasi Pernyataan dalam pemetaan aliran data. Pelajari lebih lanjut | |
| Dukungan IntelliSense dalam penyusun ekspresi untuk pengalaman penulisan alur yang lebih produktif | Dukungan IntelliSense dalam penyusun ekspresi dan penulisan konten dinamis menjadikan pengembang alur Data Factory dan Azure Synapse lebih produktif saat mereka menulis ekspresi kompleks dalam alur data mereka. Pelajari lebih lanjut |
November 2021
| Kategori Layanan | Peningkatan layanan | Rincian |
| Integrasi Berkelanjutan dan Penyediaan Berkelanjutan (CI/CD) | Peningkatan integrasi GitHub | Penyempurnaan dalam integrasi Data Factory dan GitHub menghilangkan batasan pada 1.000 sumber daya Data Factory per jenis sumber daya, seperti himpunan data dan alur. Untuk pabrik data besar, perubahan ini membantu mengurangi dampak batas laju API GitHub. Pelajari lebih lanjut |
| Aliran Data | Atur kode galat kustom dan pesan kesalahan dengan aktivitas Gagal | Aktivitas gagal memungkinkan pengembang ETL mengatur pesan kesalahan dan kode galat kustom untuk alur Data Factory. Pelajari lebih lanjut |
| Transformasi panggilan eksternal | Transformasi Panggilan Eksternal aliran data Pemetaan memungkinkan pengembang ETL menggunakan transformasi, dan pengayaan data yang disediakan oleh titik akhir REST atau layanan API pihak ketiga. Pelajari lebih lanjut | |
| Penggunaan kembali Synapse secara cepat | Saat menjalankan aliran data di Synapse Analytics, gunakan fitur TTL. Fitur TTL menggunakan fitur penggunaan kembali cepat sehingga aliran data berurutan akan dijalankan dalam beberapa detik. Anda dapat mengatur TTL saat mengonfigurasi runtime integrasi Azure. Pelajari lebih lanjut | |
| Pergerakan data | Aktivitas penyalinan mendukung pembacaan data dari FTP atau SFTP tanpa chunking | Secara otomatis menentukan panjang file atau offset yang relevan untuk dibaca saat menyalin data dari server FTP atau SFTP. Dengan kemampuan ini, Data Factory akan secara otomatis terhubung ke server FTP atau SFTP untuk menentukan panjang file. Setelah panjang ditentukan, Data Factory membagi file menjadi beberapa gugus dan membacanya secara paralel. Pelajari lebih lanjut |
| UTF-8 tanpa dukungan tanda urutan byte dalam aktivitas Penyalinan | Aktivitas penyalinan mendukung penulisan data dengan jenis pengodean UTF-8 tanpa tanda urutan byte untuk JSON dan himpunan data teks yang dibatasi. | |
| Dukungan pemisah kolom multi-karakter | Aktivitas penyalinan mendukung penggunaan pemisah kolom multi-karakter untuk himpunan data teks yang dibatasi. | |
| Runtime integrasi | Jalankan proses apa pun di mana saja dalam tiga langkah dengan SQL Server Integration Services (SSIS) di Data Factory | Pelajari cara menggunakan Data Factory dengan tepat dan kemampuan SSIS dalam alur. Sampel paket SSIS dengan properti berparameter membantu Anda mendapatkan jump-start. Dengan Studio Data Factory, paket SSIS dapat dengan mudah ditarik dan diletakkan ke dalam alur dan digunakan sebagai bagian dari aktivitas Jalankan Paket SSIS. Kemampuan ini memungkinkan Anda menjalankan alur Data Factory dengan paket SSIS pada IR yang dihost sendiri atau IR SSIS. Dengan memberikan nilai parameter run-time, Anda dapat menggunakan kemampuan yang kuat dari Data Factory dan kemampuan SSIS secara bersamaan. Artikel ini menggambarkan tiga langkah untuk menjalankan proses apa pun yang dapat dieksekusi, seperti file aplikasi, program, utilitas atau batch di mana saja. Pelajari lebih lanjut |
Oktober 2021
| Kategori Layanan | Peningkatan layanan | Rincian |
| Aliran Data | Konektor Azure Data Explorer dan Amazon Web Services (AWS) | Tim Integrasi Data Microsoft telah merilis dua konektor baru untuk memetakan aliran data. Jika Anda menggunakan Azure Synapse, Anda sekarang dapat terhubung langsung ke wadah AWS S3 untuk transformasi data. Di Data Factory dan Azure Synapse, Anda sekarang dapat terhubung secara khusus ke kluster Azure Data Explorer Anda dalam memetakan aliran data. Pelajari lebih lanjut |
| Aktivitas Power Query meninggalkan pratinjau untuk GA | Aktivitas alur Data Factory Power Query sekarang tersedia secara umum. Fitur baru ini menyediakan persiapan data yang ditingkatkan dan perselisihan data untuk integrator warga di dalam UI browser Data Factory untuk pengalaman terintegrasi bagi para teknisi data. Fitur perselisihan data Power Query di Data Factory memberikan kemampuan alur yang kuat dan mudah digunakan untuk menyelesaikan integrasi data Anda yang paling kompleks dan pola ETL dalam satu layanan. Pelajari lebih lanjut | |
| Transformasi data Stringify baru dalam memetakan aliran data | Pemetaan aliran data menambahkan transformasi data baru yang disebut Stringify untuk memudahkan konversi jenis data kompleks seperti struct dan array menjadi bentuk string. Jenis data ini kemudian dapat dikirim ke tujuan output terstruktur. Pelajari lebih lanjut | |
| Runtime integrasi | Injeksi jaringan virtual ekspres untuk SSIS IR (pratinjau publik) | Runtime integrasi SSIS sekarang mendukung injeksi jaringan virtual ekspres. Selengkapnya: Gambaran umum injeksi jaringan virtual untuk runtime integrasi SSIS Injeksi jaringan virtual standar vs. ekspres untuk runtime integrasi SSIS Injeksi jaringan virtual ekspres untuk runtime integrasi SSIS |
| Keamanan | Peningkatan integrasi Azure Key Vault | Integrasi Key Vault sekarang memiliki dropdown sehingga pengguna dapat memilih nilai rahasia dalam layanan tertaut. Kemampuan ini meningkatkan produktivitas karena pengguna tidak diharuskan mengetik rahasia, yang dapat mengakibatkan kesalahan manusia. |
| Dukungan untuk identitas terkelola yang ditetapkan pengguna di Data Factory | Keamanan info masuk sangat penting untuk perusahaan mana pun. Tim Data Factory berkomitmen untuk membuat proses rekayasa data secara aman namun sederhana bagi para teknisi data. Identitas terkelola yang ditetapkan pengguna (pratinjau) sekarang didukung di semua konektor dan layanan tertaut yang mendukung autentikasi berbasis Azure AD. Pelajari lebih lanjut |
September 2021
| Kategori Layanan | Peningkatan layanan | Rincian |
| Integrasi berkelanjutan dan pengiriman berkelanjutan | Memperluas kemampuan CI/CD | Sekarang, Anda dapat membuat cabang Git baru berdasarkan cabang lain di Data Factory. Pelajari lebih lanjut |
| Pergerakan data | Sumber Amazon Relational Database Service (RDS) untuk Oracle | Konektor sumber Amazon RDS untuk Oracle sekarang tersedia di Data Factory dan Azure Synapse. Pelajari lebih lanjut |
| Sumber Amazon RDS untuk SQL Server | Konektor sumber Amazon RDS untuk SQL Server sekarang tersedia di Data Factory dan Azure Synapse. Pelajari lebih lanjut | |
| Mendukung salinan paralel dari Azure Database for PostgreSQL | Konektor Azure Database for PostgreSQL sekarang mendukung operasi salinan paralel. Pelajari lebih lanjut | |
| Aliran Data | Gunakan Data Lake Storage Gen2 untuk menjalankan perintah pra dan pasca-pemrosesan | Perintah pra dan pasca-pemrosesan Sistem File Terdistribusi Hadoop sekarang dapat dieksekusi dengan menggunakan sink Data Lake Storage Gen2 dalam aliran data. Pelajari lebih lanjut |
| Mengedit properti aliran data untuk instans runtime integrasi Azure yang ada | Runtime integrasi Azure telah diperbarui agar pengeditan properti aliran data untuk runtime integrasi yang ada dapat dilakukan. Sekarang Anda dapat memodifikasi properti komputasi aliran data tanpa perlu membuat Azure IR baru. Pelajari lebih lanjut | |
| Pengaturan TTL untuk Azure Synapse guna meningkatkan waktu mulai eksekusi aktivitas alur | Azure Synapse telah menambahkan TTL ke runtime integrasi Azure untuk memungkinkan aktivitas alur aliran data Anda untuk memulai eksekusi dalam hitungan detik, yang sangat meminimalkan runtime alur aliran data Anda. Pelajari lebih lanjut | |
| Runtime integrasi | GA untuk jaringan virtual terkelola Data Factory | Sekarang Anda dapat memprovisikan runtime integrasi Azure sebagai bagian dari jaringan virtual terkelola dan menggunakan titik akhir privat untuk membuat sambungan ke penyimpanan data yang didukung dengan aman. Lalu lintas data melewati Azure Private Links yang menyediakan konektivitas aman ke sumber data. Penyelundupan data ke internet publik juga dapat dicegah. Pelajari lebih lanjut |
| Orkestrasi | Mengoperasionalkan dan menyediakan SLA untuk alur data | Metrik Eksekusi Alur Waktu Berlalu yang baru, dipadukan dengan peringatan Data Factory, memberdayakan pengembang alur data untuk mengirimkan SLA dengan lebih baik kepada pelanggan mereka. Sekarang Anda dapat memberi tahu kami berapa lama alur harus berjalan, dan kami akan memberi tahu Anda secara proaktif apabila alur berjalan lebih lama dari yang diharapkan. Pelajari lebih lanjut |
| Aktivitas kesalahan (pratinjau umum) | Aktivitas Kesalahan yang baru memungkinkan Anda melempar kesalahan dalam alur dengan sengaja untuk alasan apa pun. Misalnya, Anda mungkin menggunakan aktivitas Kesalahan jika aktivitas Pencarian tidak mengembalikan data yang cocok atau aktivitas kustom selesai dengan kesalahan internal. Pelajari lebih lanjut |
Agustus 2021
| Kategori Layanan | Peningkatan layanan | Rincian |
| Integrasi berkelanjutan dan pengiriman berkelanjutan | Peningkatan CI/CD dengan dukungan GitHub di Azure Government dan Microsoft Azure yang dioperasikan oleh 21Vianet | Kami telah menambahkan dukungan untuk GitHub di Azure untuk Pemerintah AS dan Azure yang dioperasikan oleh 21Vianet. Pelajari lebih lanjut |
| Pergerakan data | Konektor API untuk MongoDB Azure Cosmos DB mendukung versi 3.6 dan 4.0 di Data Factory | Konektor API untuk MongoDB Azure Cosmos DB Data Factory sekarang mendukung server versi 3.6 dan 4.0. Pelajari lebih lanjut |
| Melakukan peningkatan menggunakan pernyataan COPY untuk memuat data ke Azure Synapse | Konektor Azure Synapse Data Factory kini mendukung penyalinan bertahap dan sumber penyalinan dengan *.* sebagai wildcardFilename untuk pernyataan COPY. Pelajari lebih lanjut | |
| Aliran Data | Titik akhir REST tersedia sebagai sumber dan sink dalam aliran data | Aliran data di Data Factory dan Azure Synapse sekarang mendukung titik akhir REST sebagai sumber dan sink dengan dukungan penuh untuk payload JSON dan XML. Pelajari lebih lanjut |
| Runtime integrasi | Alat diagnostik tersedia untuk IR yang dihost sendiri | Alat diagnostik untuk IR yang dihost sendiri dirancang untuk memberikan pengalaman pengguna yang lebih baik dan membantu pengguna menemukan masalah potensial. Alat ini menjalankan serangkaian skenario pengujian pada komputer IR yang dihost sendiri. Setiap skenario memiliki kasus pemeriksaan kesehatan yang khas untuk masalah yang bersifat umum. Pelajari lebih lanjut |
| Orkestrasi | GA untuk Pemicu kustom dengan opsi pemfilteran tingkat lanjut | Anda sekarang dapat membuat pemicu yang merespons topik kustom yang diposting ke Azure Event Grid. Anda juga dapat menggunakan pemfilteran tingkat lanjut untuk mendapatkan kontrol terperinci atas kejadian apa yang harus ditanggapi. Pelajari lebih lanjut |
Juli 2021
| Kategori Layanan | Peningkatan layanan | Rincian |
| Pergerakan data | Dapatkan alur penyerapan data berbasis metadata pada alat Data Factory Copy Data dalam 10 menit (pratinjau publik) | Kini Anda dapat membangun alur penyalinan data skala besar dengan pendekatan berbasis metadata pada alat Penyalin Data (pratinjau umum) dalam waktu 10 menit. Pelajari lebih lanjut |
| Aliran Data | Fungsi peta baru ditambahkan dalam fungsi transformasi aliran data | Satu set fungsi transformasi aliran data yang baru memungkinkan teknisi data dengan mudah menghasilkan, membaca, dan memperbarui jenis data peta dan struktur peta yang kompleks. Pelajari lebih lanjut |
| Runtime integrasi | Lima wilayah baru tersedia di jaringan virtual terkelola Data Factory (pratinjau publik) | Lima wilayah baru, Tiongkok Timur2, Tiongkok Utara2, US Government Arizona, US Government Texas, dan US Government Virginia, tersedia di jaringan virtual yang dikelola Data Factory (pratinjau publik). |
| Produktivitas pengembang | Penyempurnaan beranda Data Factory | Halaman beranda Data Factory telah didesain ulang dengan kemampuan kontras dan pengubahan alur yang lebih baik. Beberapa bagian diperkenalkan di beranda untuk membantu Anda meningkatkan produktivitas dalam perjalanan integrasi data Anda. Pelajari lebih lanjut |
| Halaman arahan baru untuk Data Factory Studio | Halaman arahan untuk panel Data Factory di portal Microsoft Azure. Pelajari lebih lanjut |
Juni 2021
| Kategori Layanan | Peningkatan layanan | Rincian |
| Pergerakan data | Pengalaman pengguna baru dengan alat Penyalinan Data untuk Data Factory | Alat Penyalin Data yang didesain ulang sekarang tersedia dengan pengalaman penyerapan data yang ditingkatkan. Pelajari lebih lanjut |
| MongoDB dan MongoDB Atlas didukung sebagai sumber dan sink | Peningkatan ini mendukung penyalinan data antara penyimpanan data yang didukung dan database MongoDB atau MongoDB Atlas. Pelajari lebih lanjut | |
| Always Encrypted didukung untuk konektor SQL Database, SQL Managed Instance, dan SQL Server sebagai sumber dan sink | Always Encrypted tersedia di konektor Data Factory untuk SQL Database, SQL Managed Instance, dan SQL Server untuk aktivitas Penyalinan. Pelajari lebih lanjut | |
| Pengaturan metadata kustom didukung dalam aktivitas Penyalinan saat masuk ke Data Lake Storage Gen2 atau Blob Storage | Saat Anda menulis ke Data Lake Storage Gen2 atau Blob Storage, aktivitas Penyalinan mendukung pengaturan metadata kustom atau penyimpanan modifikasi informasi terakhir dari file sumber sebagai metadata. Pelajari lebih lanjut | |
| Aliran Data | SQL Server sekarang didukung sebagai sumber dan sink dalam aliran data | SQL Server sekarang didukung sebagai sumber dan sink dalam aliran data. Ikuti tautan untuk instruksi tentang cara mengonfigurasi jaringan Anda dengan menggunakan fitur jaringan virtual terkelola runtime integrasi Azure untuk menghubungi instans berbasis VM lokal dan cloud SQL Server Anda. Pelajari lebih lanjut |
| Penggunaan kembali dengan cepat dari Kluster Aliran Data sekarang diaktifkan secara default untuk semua runtime integrasi Azure yang baru | Fitur penggunaan kembali startup cepat aliran data populer sekarang tersedia secara umum untuk Data Factory. Semua runtime integrasi Azure baru sekarang telah mengaktifkan penggunaan kembali cepat secara default. Pelajari lebih lanjut | |
| Aktivitas Power Query (pratinjau umum) | Sekarang Anda bisa menyusun pemetaan bidang yang kompleks ke sink Power Query Anda dengan menggunakan manipulasi data untuk Data Factory. Sink kini dikonfigurasi dalam alur pada aktivitas Power Query (pratinjau umum) untuk mengakomodasi pembaruan ini. Pelajari lebih lanjut | |
| Antarmuka Pengguna pemantauan aliran data yang diperbarui di Data Factory | Data Factory memiliki pembaruan yang baru bagi Antarmuka Pengguna pemantauan untuk mempermudah tampilan eksekusi pekerjaan ETL aliran data Anda dan mengidentifikasi area dengan cepat untuk penyetelan performa. Pelajari lebih lanjut | |
| SQL Server Integration Services | Jalankan pernyataan atau skrip SQL di mana saja dalam tiga langkah dengan SSIS di Data Factory | Posting ini menyediakan tiga langkah untuk menjalankan pernyataan atau skrip SQL di mana pun dengan SSIS di Data Factory.
|