Bagikan melalui

Bagaimana cara mendaftarkan Sumber Data Eksternal (EDS) dengan Azure Data Manager for Energy?

  • Artikel

Artikel ini menjelaskan cara mendaftarkan Sumber Data Eksternal (EDS) dengan Azure Data Manager untuk energi. EDS memungkinkan Anda mengambil dan menyerap data (metadata) dari sumber data eksternal. Ini juga memungkinkan Anda untuk mengambil data massal sesuai permintaan.

Prasyarat

  • Unduh dan impor koleksi API dan file lingkungan ke klien uji API (seperti Postman). Buat modifikasi yang sesuai di lingkungan berdasarkan sumber data Anda.
  • Lihat Bagian 2.2 di osdu-eds-data-supplier-enablement-guide untuk detail tentang Pendaftaran sumber data.
  • Tinjau bagian Koneksi Ed Source Registry Entry (CSRE) dan Koneksi ion Source Data Job (CSDJ) di EDS_Documentation-1.0.docx untuk memahami berbagai parameter yang digunakan dalam pendaftaran sumber data.
  • Untuk menjalankan EDS, pengguna harus menjadi anggota service.eds.user grup pemberian izin. Selain itu, untuk mengakses layanan Rahasia, pengguna harus menjadi anggota hak berikut: service.secret.viewer, , service.secret.editorservice.secret.admin.

Alur kerja Pengambilan dan Penyerapan EDS

Jalankan API dalam koleksi berikut untuk mendaftarkan sumber data eksternal Anda yang menjalankan alur kerja Pengambilan dan Penyerapan EDS sesuai jadwal:

  1. 001: Pre-req: Validate Schema Registration
  2. 002: Pre-req: Validate Reference Data
  3. 003: Secret Service
  4. 004: Pre-req: Add Source Registry

Setelah pendaftaran data berhasil, data diambil secara teratur dari sumber eksternal dan ditambahkan ke Azure Data Manager for Energy Anda.

Anda dapat menggunakan layanan Pencarian untuk mencari data yang Anda serap.

Pemecahan Masalah

Anda dapat menjalankan kueri Kusto di bawah ini di ruang kerja Analitik Log Anda untuk mengidentifikasi masalah dengan pendaftaran Sumber Data.

OEPAirFlowTask 
| where DagName == "eds_ingest"        
| where LogLevel == "ERROR" // ERROR/DEBUG/INFO/WARNING

OEPAirFlowTask 
| where DagName == "eds_scheduler"        
| where LogLevel == "ERROR" // ERROR/DEBUG/INFO/WARNING

Mengambil data massal sesuai permintaan

Gunakan GETRetrievalInstructions API di 005: Dataset Service collection untuk mengambil data massal dari sumber data eksternal sesuai permintaan.

Referensi