Jak zaregistrovat externí zdroje dat (EDS) v Azure Data Manageru pro energii?

  • Článek

Tento článek vysvětluje, jak zaregistrovat externí zdroje dat (EDS) v Azure Data Manageru pro energii. EDS umožňuje načítat a ingestovat data (metadata) z externích zdrojů dat. Umožňuje také načíst hromadná data na vyžádání.

Požadavky

  • Stáhněte a naimportujte soubory kolekce rozhraní API a prostředí do testovacího klienta rozhraní API (například Postman). Proveďte odpovídající úpravy v prostředí na základě zdroje dat.
  • Podrobnosti o registraci zdroje dat najdete v části 2.2 v průvodci osdu-eds-data-supplier-enablement-guide.
  • Projděte si oddíly Připojení Ed Source Registry Entry (CSRE) a Připojení ion Source Data Job (CSDJ) v EDS_Documentation-1.0.docx a seznamte se s různými parametry použitými v registraci zdroje dat.
  • Aby bylo možné spustit EDS, musí být uživatel členem service.eds.user skupiny nároků. Kromě toho, aby uživatel měl přístup ke službě Secret Service, by měl být členem následujících nároků: service.secret.viewer, service.secret.editor, service.secret.admin.

Pracovní postup načítání a ingestování EDS

Spuštěním rozhraní API v následujících kolekcích zaregistrujte externí zdroj dat, na kterém běží pracovní postup načítání a ingestování EDS podle plánu:

  1. 001: Pre-req: Validate Schema Registration
  2. 002: Pre-req: Validate Reference Data
  3. 003: Secret Service
  4. 004: Pre-req: Add Source Registry

Po úspěšné registraci dat se data pravidelně načítají z externích zdrojů a přidají se do Azure Data Manageru pro energii.

K vyhledání přijatých dat můžete použít Search.

Řešení problému

V pracovním prostoru služby Log Analytics můžete spustit následující dotazy Kusto a identifikovat případné problémy s registrací zdroje dat.

OEPAirFlowTask 
| where DagName == "eds_ingest"        
| where LogLevel == "ERROR" // ERROR/DEBUG/INFO/WARNING

OEPAirFlowTask 
| where DagName == "eds_scheduler"        
| where LogLevel == "ERROR" // ERROR/DEBUG/INFO/WARNING

Načtení hromadných dat na vyžádání

K načtení hromadných dat z externích zdrojů dat na vyžádání použijte rozhraní API 005: Dataset Service collection getRetrievalInstructions.

Reference