Spouštění federovaných dotazů v Oracle

Důležitý

Tato funkce je ve verzi Public Preview.

Tato stránka popisuje, jak nastavit Lakehouse Federation pro spouštění federovaných dotazů na data Oracle, která nespravuje Azure Databricks. Další informace o federaci Lakehouse najdete v tématu Co je Federace Lakehouse?

Pokud se chcete připojit k databázi Oracle pomocí federace Lakehouse, musíte v metastoru katalogu Azure Databricks Unity vytvořit následující:

• Připojení k databázi Oracle.
• cs-CZ: cizí katalog, který zrcadlí vaši databázi Oracle v katalogu Unity, abyste mohli používat syntaxi dotazů a nástroje správy zásad katalogu Unity k řízení přístupu uživatelů Azure Databricks k databázi.

Licence

Ovladač Oracle spolu s dalšími potřebnými soubory JAR pro Oracle jsou řízeny licencí FDHUT, která nevyžaduje odsouhlasení uživatelem.

Než začnete

Než začnete, ujistěte se, že splňujete požadavky v této části.

Požadavky na Databricks

Požadavky na pracovní prostor:

• Pracovní prostor je aktivovaný pro katalog Unity.

Požadavky na výpočetní prostředky:

• Síťové připojení z vašeho výpočetního prostředku k cílovým databázovým systémům. Podívejte se na síťová doporučení pro Lakehouse Federation.
• Výpočetní prostředky Azure Databricks musí používat Databricks Runtime 16.1 nebo vyšší a standardní nebo vyhrazený režim přístupu.
• Sql Warehouse musí být pro nebo bezserverové a musí používat verzi 2024.50 nebo vyšší.

Požadovaná oprávnění:

• Pokud chcete vytvořit připojení, musíte být správcem metastoru nebo uživatelem s oprávněním CREATE CONNECTION k metastoru katalogu Unity připojenému k pracovnímu prostoru.
• Chcete-li vytvořit cizí katalog, musíte mít oprávnění CREATE CATALOG k metastoru a být buď vlastníkem připojení, nebo mít oprávnění CREATE FOREIGN CATALOG pro připojení.

Další požadavky na oprávnění jsou uvedeny v následující části založené na úlohách.

Požadavky Oracle

• Povolené nativní šifrování sítě na straně serveru (minimálně úroveňACCEPTED). Podívejte se na Konfiguraci šifrování síťových dat v dokumentaci Oracle.

Vytvoření připojení Azure Databricks

Připojení určuje cestu a přihlašovací údaje pro přístup k externímu databázovému systému. K vytvoření připojení můžete použít Průzkumníka katalogu nebo příkaz CREATE CONNECTION SQL v poznámkovém bloku Azure Databricks nebo editoru dotazů SQL Databricks.

Poznámka

K vytvoření připojení můžete použít také rozhraní REST API Databricks nebo rozhraní příkazového řádku Databricks. Viz POST /api/2.1/unity-catalog/connections a příkazy Unity Catalogu.

Požadovaná oprávnění : správce metastoru nebo uživatel s oprávněním CREATE CONNECTION.

Průzkumník katalogu

1. V pracovním prostoru Azure Databricks klikněte na Katalog.
2. V levém podokně rozbalte nabídku Externí data a vyberte Připojení.
3. Klikněte na Vytvořit připojení.
4. Na stránce Základní informace o připojení průvodce pro nastavení připojení zadejte uživatelsky přívětivý název připojení.
5. Vyberte typ připojeníOracle.
6. (Volitelné) Přidejte komentář.
7. Klikněte na Další.
8. Na stránce Ověřování zadejte pro instanci Oracle následující:
   • Hostitel: například oracle-demo.123456.rds.amazonaws.com
   • Port: Například 1521
   • Uživatel: Například oracle_user
   • heslo: Například password123
9. Klikněte na Vytvořit připojení.
10. Na stránce základy katalogu zadejte název cizího katalogu. Cizí katalog zrcadlí databázi v externím datovém systému, abyste mohli dotazovat a spravovat přístup k datům v této databázi pomocí Azure Databricks a Unity Catalog.
11. (Volitelné) Kliknutím na Test připojení potvrďte, že funguje.
12. Klikněte na vytvořit katalog.
13. Na stránce Access vyberte pracovní prostory, ve kterých mají uživatelé přístup k vytvořenému katalogu. Můžete vybrat Všechny pracovní prostory mají přístup, nebo klepněte na Přiřadit k pracovním prostorům, vyberte pracovní prostory a potom klikněte na Přiřadit.
14. Změňte vlastníka , který bude moct spravovat přístup ke všem objektům v katalogu. Začněte psát objekt zabezpečení do textového pole a poté klikněte na objekt zabezpečení ve vrácených výsledcích.
15. Udělte oprávnění na katalogu. Klikněte na Udělit:
    1. Zadejte hlavní uživatele , kteří budou mít přístup k objektům v katalogu. Začněte psát objekt zabezpečení do textového pole a poté klikněte na objekt zabezpečení ve vrácených výsledcích.
    2. Vyberte přednastavení oprávnění, které se mají každému subjektu udělit. Všichni uživatelé účtu mají ve výchozím nastavení udělené BROWSE.
       • Z rozevírací nabídky vyberte Čtečku dat, abyste udělili read oprávnění k objektům v katalogu.
       • V rozevírací nabídce vyberte Datový editor a udělte read a modify oprávnění k objektům v katalogu.
       • Ručně vyberte oprávnění, která chcete udělit.
    3. Klikněte na tlačítko Udělit.
16. Klikněte na Další.
17. Na stránce Metadata zadejte páry klíče a hodnoty pro značky. Další informace najdete v části Přidání značek k zabezpečitelným objektům v Katalogu Unity.
18. (Volitelné) Přidejte komentář.
19. Klikněte na Uložit.

SQL

V poznámkovém bloku nebo editoru dotazů SQL Databricks spusťte následující příkaz:

CREATE CONNECTION <connection-name> TYPE oracle
OPTIONS (
  host '<hostname>',
  port '<port>',
  user '<user>',
  password '<password>'
);

Databricks doporučuje používat Azure Databricks tajemství místo prostého textu pro citlivé hodnoty, jako jsou přihlašovací údaje. Například:

CREATE CONNECTION <connection-name> TYPE oracle
OPTIONS (
  host '<hostname>',
  port '<port>',
  user secret ('<secret-scope>','<secret-key-user>'),
  password secret ('<secret-scope>','<secret-key-password>')
)

Pokud je nutné použít řetězce prostého textu v příkazech SQL poznámkového bloku, vyhněte se zkrácení řetězce zrušením speciálních znaků, jako $, použitím \. Příklad: \$.

Informace o nastavení tajných kódů naleznete v tématu Správa tajných kódů.

Vytvoření zahraničního katalogu

Poznámka

Pokud k vytvoření připojení ke zdroji dat použijete uživatelské rozhraní, zahrne se vytvoření cizího katalogu a tento krok můžete přeskočit.

Cizí katalog zrcadlí databázi v externím datovém systému, abyste mohli dotazovat a spravovat přístup k datům v této databázi pomocí Azure Databricks a Unity Catalog. Chcete-li vytvořit cizí katalog, použijete připojení ke zdroji dat, který již byl definován.

K vytvoření cizího katalogu můžete použít Průzkumníka katalogu nebo příkaz CREATE FOREIGN CATALOG SQL v poznámkovém bloku Azure Databricks nebo v editoru dotazů SQL. K vytvoření katalogu můžete použít také rozhraní REST API Databricks nebo rozhraní příkazového řádku Databricks. Viz POST /api/2.1/unity-catalog/catalogs a příkazy katalogu Unity.

Požadovaná oprávnění :CREATE CATALOG oprávnění v rámci metastore a buď vlastnické právo připojení nebo oprávnění CREATE FOREIGN CATALOG pro připojení.

Průzkumník katalogu

1. V pracovním prostoru Azure Databricks klikněte na Otevřete katalog v Průzkumníku katalogu.

2. V horní části podokna Katalog klikněte na ikonu Přidat a v nabídce vyberte Přidat katalog.

   Případně na stránce Rychlý přístup klikněte na tlačítko Katalogy a potom klikněte na tlačítko Vytvořit katalog.

3. Postupujte podle pokynů pro vytváření cizích katalogů v Vytvořit katalogy.

SQL

V poznámkovém bloku nebo editoru dotazů SQL spusťte následující příkaz SQL. Položky v závorkách jsou volitelné. Nahraďte zástupné hodnoty:

• <catalog-name>: Název katalogu v Azure Databricks.
• <connection-name>: Objekt připojení , který určuje zdroj dat, cestu a přihlašovací údaje pro přístup.
• <service-name>: Název služby, který chcete zobrazit jako katalog v Azure Databricks.

CREATE FOREIGN CATALOG [IF NOT EXISTS] <catalog-name> USING CONNECTION <connection-name>
OPTIONS (service_name '<service-name>');

Podporované promítnutí

Podporovány jsou následující funkce:

• Filtruje
• Projekce
• Omezení
• Agregáty
• Ofset
• Obsazení
• Obsahuje, Začíná na, Končí na

Mapování datových typů

Při čtení z Oracle do Sparku se datové typy mapuje takto:

Typ Oracle	Typ Spark
ČASOVÉ RAZÍTKO S TIMEZONE, ČASOVÉ RAZÍTKO S MÍSTNÍM TIMEZONE	Typ časového razítka
DATUM, ČASOVÉ RAZÍTKO	TypČasovéhoRazítka/TypČasovéhoRazítkaNTZ*
ČÍSLO, plovoucí desetinná čárka	DesetinnýTyp
BINÁRNÍ FLOAT	Datový typ float
BINÁRNÍ DOUBLE	DoubleType
CHAR, NCHAR, VARCHAR2, NVARCHAR2	TypŘetězce

• Datum a časové razítko se mapují na Spark TimestampType, pokud spark.sql.timestampType = TIMESTAMP_LTZ (výchozí). Pokud spark.sql.timestampType = TIMESTAMP_NTZ, jsou mapovány na TimestampNTZType.