Share via

Sambungkan ke Fivetran

  • Artikel

Integrasi data otomatis Fivetran beradaptasi saat skema dan API berubah, memastikan akses data yang andal dan analisis yang disederhanakan dengan skema siap kueri.

Anda dapat mengintegrasikan gudang Databricks SQL Anda (sebelumnya titik akhir Databricks SQL) serta kluster Azure Databricks dengan Fivetran. Integrasi Fivetran dengan Azure Databricks membantu Anda memusatkan data dari sumber data yang berbeda ke Delta Lake.

Menyambungkan ke Fivetran menggunakan Partner Connect

Bagian ini menjelaskan cara menyambungkan ke Fivetran menggunakan Koneksi Mitra. Setiap pengguna membuat koneksi mereka sendiri.

Catatan

Pengalaman koneksi per pengguna ada di Pratinjau Umum. Anda dapat menonaktifkan kemampuan untuk membuat koneksi per pengguna dengan menghubungi tim akun Azure Databricks Anda.

Sebelum Anda tersambung menggunakan Koneksi Mitra

Sebelum Anda tersambung ke Fivetran menggunakan Koneksi Mitra, pastikan Anda memiliki hal berikut:

  • Peran pengguna admin ruang kerja atau izin berikut:

  • Untuk data yang dikelola oleh Unity Catalog, hak istimewa objek metastore berikut untuk katalog yang ingin Anda tulis oleh Fivetran:

    -USE CATALOG danCREATE SCHEMA pada katalog.

    • (Opsional) Untuk menentukan lokasi tujuan, BUAT TABEL EKSTERNAL di lokasi eksternal dan akses ke data di penyimpanan objek cloud.

  • Untuk data yang dikelola oleh metastore Apache Hive warisan, hak istimewa objek metastore berikut untuk katalog yang ingin Anda tulis oleh Fivetran:

    • USAGE dan CREATE pada katalog
    • (Opsional) Untuk menentukan lokasi tujuan, akses ke data di penyimpanan objek cloud.

Hak istimewa untuk objek metastore Katalog Unity dapat diberikan oleh admin metastore, pemilik objek, atau pemilik katalog atau skema yang berisi objek. Untuk informasi selengkapnya, lihat Hak istimewa Katalog Unity dan objek yang dapat diamankan.

Hak istimewa untuk objek metastore Apache Hive warisan dapat diberikan oleh admin ruang kerja atau pemilik objek. Untuk informasi selengkapnya, lihat Hak istimewa metastore Apache Hive dan objek yang dapat diamankan (warisan).

Akses ke data dalam penyimpanan objek cloud harus dikonfigurasi oleh admin ruang kerja dengan izin yang memadai di akun penyimpanan objek cloud. Untuk informasi selengkapnya, lihat Mengaktifkan konfigurasi akses data.

Langkah-langkah Koneksi mitra

Untuk menyambungkan ruang kerja Azure Databricks Anda ke Fivetran menggunakan Koneksi Mitra, lakukan hal berikut:

  1. Di bilah samping, klik Mitra Koneksi.

  2. Klik petak peta Fivetran.

    Langkah-langkah di bagian ini membuat akun uji coba Fivetran tingkat pengguna. Untuk masuk ke akun uji coba Fivetran tingkat ruang kerja yang sudah ada, klik Gunakan koneksi yang ada, selesaikan instruksi di layar untuk masuk ke Fivetran, dan lewati langkah-langkah lainnya dalam artikel ini.

  3. Memilih gudang SQL. Jika gudang SQL dihentikan, klik Mulai.

  4. Jika ruang kerja Anda diaktifkan untuk Katalog Unity, pilih katalog untuk Fivetran untuk ditulis, lalu klik Berikutnya.

    Mitra Koneksi menghasilkan token akses pribadi Azure Databricks yang terkait dengan pengguna Anda.

  5. Klik Koneksi ke Fivetran.

    Tab baru terbuka di browser web Anda yang menampilkan situs web Fivetran.

  6. Selesaikan instruksi di layar di situs web Fivetran untuk membuat akun mitra uji coba Anda.

Menyambungkan ke Fivetran secara manual

Untuk gambaran umum prosedur koneksi manual, tonton video YouTube ini (2 menit).

Catatan

Untuk menyambungkan gudang SQL dengan Fivetran lebih cepat, gunakan Sambungkan Mitra.

Sebelum Anda tersambung secara manual

Sebelum menyambungkan ke Fivetran secara manual, Anda harus memiliki hal berikut:

  • Kluster atau gudang SQL di ruang kerja Azure Databricks Anda.

  • Detail koneksi untuk kluster atau gudang SQL Anda, khususnya nilai Nama Host Server, Port, dan Jalur HTTP.

  • Token akses pribadi Azure Databricks atau token ID Microsoft Entra (sebelumnya Azure Active Directory). Untuk membuat token akses pribadi, lakukan hal berikut:

    1. Di ruang kerja Azure Databricks Anda, klik nama pengguna Azure Databricks Anda di bilah atas, lalu pilih Pengaturan dari menu drop-down.
    2. Klik Pengembang.
    3. Di samping Token akses, klik Kelola.
    4. Klik Buat token baru.
    5. (Opsional) Masukkan komentar yang membantu Anda mengidentifikasi token ini di masa mendatang, dan mengubah masa pakai default token selama 90 hari. Untuk membuat token tanpa masa pakai (tidak disarankan), biarkan kotak Seumur Hidup (hari) kosong (kosong).
    6. Klik Buat.
    7. Salin token yang ditampilkan ke lokasi aman, lalu klik Selesai.

    Catatan

    Pastikan untuk menyimpan token yang disalin di lokasi yang aman. Jangan bagikan token yang Anda salin dengan orang lain. Jika Anda kehilangan token yang disalin, Anda tidak dapat meregenerasi token yang sama persis. Sebagai gantinya, Anda harus mengulangi prosedur ini untuk membuat token baru. Jika Anda kehilangan token yang disalin, atau Anda yakin bahwa token telah disusupi, Databricks sangat menyarankan agar Anda segera menghapus token tersebut dari ruang kerja Anda dengan mengklik ikon tempat sampah (Cabut) di samping token di halaman Token akses.

    Jika Anda tidak dapat membuat atau menggunakan token di ruang kerja, ini mungkin karena administrator ruang kerja Anda telah menonaktifkan token atau belum memberi Anda izin untuk membuat atau menggunakan token. Lihat administrator ruang kerja Anda atau berikut ini:

    Catatan

    Sebagai praktik terbaik keamanan, saat Anda mengautentikasi dengan alat, sistem, skrip, dan aplikasi otomatis, Databricks merekomendasikan agar Anda menggunakan token akses pribadi milik perwakilan layanan, bukan pengguna ruang kerja. Untuk membuat token untuk perwakilan layanan, lihat Mengelola token untuk perwakilan layanan.

Tip

Jika petak peta Fivetran di Koneksi Mitra di ruang kerja Anda memiliki ikon tanda centang di dalamnya, Anda bisa mendapatkan detail koneksi untuk gudang SQL yang terhubung dengan mengklik petak peta lalu memperluas detail Koneksi ion. Token akses pribadi disembunyikan; Anda harus membuat token akses pribadi pengganti dan memasukkan token baru tersebut sebagai gantinya ketika Fivetran meminta token akses.

Langkah-langkah Manual

Untuk menyambungkan ke Fivetran secara manual, lakukan hal berikut:

  1. Masuk ke akun Fivetran Anda, atau buat akun Fivetran baru, di https://fivetran.com/login.

    Penting

    Jika Anda masuk ke akun Fivetran organisasi Anda, halaman Pilih Tujuan dapat ditampilkan, mencantumkan satu atau lebih entri tujuan yang ada dengan logo Databricks. Entri ini mungkin berisi detail koneksi untuk titik akhir SQL di ruang kerja yang terpisah dari milik Anda. Jika Anda masih ingin menggunakan kembali salah satu koneksi ini, dan Anda mempercayai sumber daya komputasi dan memiliki akses ke koneksi tersebut, pilih tujuan tersebut lalu lewati ke langkah berikutnya. Jika tidak, pilih tujuan yang tersedia untuk melewati halaman ini.

  2. Di halaman Dasbor Anda di Fivetran, klik tab Tujuan.

  3. Klik Tambahkan Tujuan.

  4. Masukkan nama Tujuan dan klik Tambahkan.

  5. Pada halaman Fivetran adalah ELT modern, klik Siapkan konektor.

  6. Klik sumber data, lalu klik Berikutnya.

  7. Ikuti petunjuk di layar di Panduan Pengaturan di Fivetran untuk menyelesaikan pengaturan konektor.

  8. Klik Simpan & Uji.

  9. Setelah tes berhasil, klik Lanjutkan.

  10. Pada halaman Pilih tujuan data Anda, klik Databricks di Azure.

  11. Klik Lanjutkan Penyetelan.

  12. Selesaikan instruksi di layar di Fivetran untuk memasukkan detail koneksi untuk sumber daya komputasi Azure Databricks Anda yang ada, khususnya nilai bidang Server Hostname dan JALUR HTTP, dan token yang Anda buat sebelumnya.

  13. Klik Simpan & Uji.

  14. Setelah tes berhasil, klik Lanjutkan.

  15. Lanjutkan ke langkah berikutnya.

Sumber daya tambahan

Jelajahi satu atau beberapa sumber daya berikut di situs web Fivetran: