Upravit

Sdílet prostřednictvím

Migrace hlavních datových služeb do Azure pomocí služby CluedIn a Azure Purview

Microsoft Purview
Azure Data Factory
Azure SQL Database
Azure Synapse Analytics

Architektura zapouzdřuje mnoho pilířů správy hlavních dat (MDM) do uceleného, konzistentního komplexního řešení MDM. Společnost CluedIn zavedla přístup MDM s nulovým modelováním , který se ukázal jako zrychlení projektů MDM a zvýšení úspěšnosti iniciativ MDM.

Architektura

Následující diagram znázorňuje architekturovou strukturu a tok dat CluedIn.

Diagram znázorňující architekturovou strukturu CluedIn

Stáhněte si soubor aplikace Visio s touto architekturou.

Workflow

Funkce CluedIn používá virtuální privátní síť Azure (VPN), která vám umožní připojit se k migraci místních instancí MDS nebo se připojit přímo ke cloudovému hostovanému virtuálnímu počítači SQL s hostovanou instancí MDS. Veškerá potřeba Funkce CluedIn je odkazovat na službu MDS (Windows Communication Foundation) a automatizuje proces přesouvání dat, pravidel, pracovních postupů a všeho ostatního do služby CluedIn nebo příslušné služby Microsoftu.

Díky nativní integraci do Služby Microsoft Cost Management můžete snadno předpovídat úlohy MDM CluedIn při přechodu z MDS na CluedIn. Služba CluedIn využívá funkci automatického škálování Azure, aby bylo možné škálovat prostředí nahoru a dolů. Funkce CluedIn se také nativně integruje do rozpočtů v Azure, abyste mohli snadno řídit útratu v cloudu. Tato integrace eliminuje potřebu časově náročného prognózování a rozpočtování, protože náklady se projeví na platformě Azure.

Balíčky SSIS je možné migrovat do služby Azure Data Factory, aby se všechny vaše kanály extrakce, transformace, načítání (ETL) přesunuly do cloudového nativního řešení.

Komponenty

CluedIn poskytuje nativní integraci do 27 služeb Azure, včetně následujících komponent:

Alternativy

Platformu můžete také rozšířit na alternativní scénáře na základní funkce služby CluedIn.

V této verzi CluedIn se rozšíření platformy provádí s nativními službami Azure. Všechny události se zveřejňují v centru událostí, aby s nimi vaši vývojáři mohli interagovat jakýmkoli způsobem, který chtějí. Azure Data Factory se dá použít k nabízení dat do služby CluedIn, která nabízí podporu pro přenos dat napříč všemi různými službami Azure do služby CluedIn. Službu Azure Functions můžete použít k přihlášení k odběru služby Event Hubs, ve které můžete vytvořit vlastní nastavení v libovolném podporovaném jazyce ve službě Azure Functions.

Podrobnosti scénáře

Hlavní data mají úkol řešit kvalitu dat, zásady správného řízení dat a zvládnutí nejdůležitějších obchodních dat v rámci společnosti. Pokud aktuálně používáte místní instanci nebo instance MDS (Master Data Services) SQL hostované v cloudu, následující scénář zjednodušuje přechod na nativní řešení správy hlavních dat Azure od Společnosti CluedIn.

CluedIn poskytuje souběžnou paritu funkcí pro SQL MDS, která poskytuje uživatelům známé znalosti správců dat a týmům MDM, aby bylo snadné migrovat své každodenní úlohy z MDS do CluedIn. Kromě toho Společnost CluedIn poskytuje mnohem cennější funkce hlavního datového serveru, včetně základu připravených dat pro přehled o vaší firmě.

Funkce CluedIn

Hlavní datové služby tradičně obsahují následující hlavní funkce:

  • Podpora správy verzí modelu
  • Obchodní pravidla
  • Služby pro kvalitu dat
  • Workflow
  • Hierarchie
  • Modul plug-in Excelu

CluedIn poskytuje funkce pro všechny výše uvedené funkce. Kromě toho jsou povoleny také následující případy použití:

  • Hierarchie se teď dají nativně vizualizovat v Power BI.
  • Pracovní postupy se migrují a dají se sestavit a rozšířit přímo v Power Automate.
  • Obchodní pravidla a služby pro kvalitu dat se nativně migrují do modulu pravidel CluedIn.
  • CluedIn poskytuje integrované rozšiřování dat pro vaše záznamy MDS, automatické opravy a ověřování adres, informací o společnosti a další.
  • Umožňuje spravovat souhlas a spouštět žádosti o přístup subjektu údajů.
  • V případě potřeby se vraťte do instance MDS.

CluedIn také podporuje migraci historie změn dat a může automaticky vytvářet historii kvality dat z instancí MDS. Pokud nechcete, aby se instance MDS vypnuly hned po dokončení procesu migrace, můžete také spustit řešení MDS a in-sync.

Funkce CluedIn nativně podporuje Common Data Model / Dataverse. Jinými slovy, Power Apps, Power Automate, Power BI, virtuální chatboty a uživatelé Microsoft Dynamics můžou nativně využívat data z CluedIn bez nutnosti dalšího nastavení nebo integrace.

Funkce CluedIn se nativně integruje s Azure Purview.

Azure Purview přináší možnosti zásad správného řízení dat do cloudu Microsoft Azure a Společnost CluedIn poskytuje nativní integraci do svých funkcí.

  • Glosář Azure Purview je k dispozici přímo v CluedIn a naopak.
  • CluedIn může ingestovat prostředky, které byly zaregistrovány v Purview.
  • CluedIn prohledá osobní údaje z Azure Purview a může určit úroveň záznamu, kde jsou osobní údaje. Přidává také podporu pro osobní údaje v nestrukturovaných a částečně strukturovaných datech, nejen strukturovaných.
  • CluedIn použije sadu schématu v Purview k automatickému mapování datových sad na CluedIn.
  • CluedIn rozšiřuje rodokmen Purview o podrobné protokoly zpracování.
  • Funkce CluedIn může zahájit prohledávání Purview před naplánování nového příjmu dat.

Následující obrázek ukazuje sadu funkcí rodokmenu.

Snímek obrazovky znázorňující sadu funkcí rodokmenu CluedIn

Podpora služby Azure Data Factory

Azure Data Factory (ADF) přináší podporu pro připojení k více než 100 službám. Tato data je možné přímo doručit do služby CluedIn pomocí živých streamů nabízených dat z ADF. CluedIn umožňuje nejen připojení k instancím hlavní datové služby (MDS), ale také se připojuje ke stovkám zdrojů dat z celého softwaru jako služby (SaaS), databází, datových jezer a dalších.

Toto jsou klíčové funkce podpory ADF:

  • Můžete ho nastavit tak, aby naslouchal událostem z centra událostí, a pak je můžete přímo nasměrovat zpět do služby CluedIn.
  • Nativní podpora je dostupná přímo v aplikaci CluedIn pro nastavení koncových bodů specifických pro ADF.
  • Stávající kanály ADF můžete snadno využít s novou cílovou jímkou.

Důležité informace

Tyto aspekty implementují pilíře dobře architektuře Azure, což je sada hlavních principů, které je možné použít ke zlepšení kvality úlohy. Další informace naleznete v tématu Microsoft Azure Well-Architected Framework.

Modelování

Funkce CluedIn používá automatický proces modelování, takže není potřeba migrovat ani znovu vytvářet datové modely z hlavních datových služeb (MDS) nebo jiných zdrojů dat, jako je Například Microsoft Dynamics. Tato funkce využívá grafovou databázi k automatickému sestavení modelu založeného na datech odesílaných do systému. Pokud přecházíte z tradičního relačního modelu na graf, přinášíte obrovskou hodnotu a flexibilitu v hlavních datových iniciativách. Přístup k grafu se nijak neliší od relačního stylu modelování.

Nejdůležitějším aspektem tohoto modelování je, že relační styl vám a vašemu týmu poskytne flexibilní způsob, jak reprezentovat hlavní datové modely ve všech různých tvarech a velikostech. Tento styl vede k obrovské flexibilitě, když vaše firma vyžaduje, aby se hlavní datový model roztáhl tak, aby vyhovoval různým případům použití a obchodním požadavkům. Funkce CluedIn využívá počáteční přístup bez schématu k příjmu dat. Vaše data se při vstupu do platformy nemusí vejít do těsného a pevného schématu. Těsné a pevné schéma se ale dá použít na cestě dat z webu CluedIn, když se používá v různých případech použití dat z platformy CluedIn.

Následující obrázek znázorňuje sadu funkcí Relace.

Snímek obrazovky znázorňující sadu funkcí Vztahy s Nápovědou

Dostupnost

Toto řešení je hostované jako nabídka spravovaných aplikací a dá se použít ve vašem vlastním tenantovi, kde dodavatel bude spravovat upgrady, údržbu, zálohy a další služby vaším jménem.

Funkce CluedIn se nativně integruje do služby Azure Service Health a plánované údržby Azure, aby se upgrady a opravy cítily jako nativní oznámení Azure. V kombinaci s vysokou robustností v prostředí Azure může CluedIn vyhovět nejvyšším požadavkům na smlouvu o úrovni služeb (SLA).

Efektivita výkonu

Efektivita výkonu je schopnost úlohy škálovat se tak, aby efektivním způsobem splňovala požadavky, které na ni kladou uživatelé. Další informace najdete v tématu Přehled pilíře efektivity výkonu.

CluedIn odděluje úložiště od výpočetních prostředků, takže zpracování dat je zcela bezstavové. Vzhledem k tomu, že je podporován streamovanou sběrnicovou sběrnici, znamená to, že Služba CluedIn může vertikálně navýšit nebo snížit kapacitu, a to v závislosti na vašich úlohách. CluedIn podporuje funkce automatického škálování Azure ve službě Azure Kubernetes Service (AKS), aby bylo možné škálování automatizovat. Pokud chcete zvýšit výkon při zpracování dat, jednoduše přidělíte clusteru Kubernetes více podů pro zpracování, které je možné automatizovat.

Škálovatelnost

CluedIn podporuje integraci tolik instancí MDS, kolik potřebujete. Můžete například ingestovat a spravovat 50 instancí MDS v CluedIn. Můžete je spustit buď s více tenanty, nebo všechny kombinovat ve stejném účtu. Jakmile se řešení MDS migruje na CluedIn, existuje mnoho způsobů, jak připojit nové systémy a hlavní data s různými možnostmi načtení dat.

CluedIn běží v kontejnerech Dockeru a používá Kubernetes k hostování a orchestraci různých částí aplikace. Tato architektura znamená, že CluedIn funguje dobře v elastických prostředích a může se automaticky škálovat podle potřebných velikostí a infrastruktury.

Díky nativní podpoře automatického škálování používá Funkce Azure k zajištění škálovatelného prostředí pro největší datové úlohy. Není běžné, že účty CluedIn mají desítky milionů nebo stovky milionů záznamů na platformě.

Zabezpečení

Zabezpečení poskytuje záruky proti záměrným útokům a zneužití cenných dat a systémů. Další informace najdete v tématu Přehled pilíře zabezpečení.

Zabezpečení CluedIn uděluje oprávnění a řídí přístup k různým službám prostřednictvím řízení přístupu na základě role v Azure (RBAC) s řízením klíčů zabezpečení služby Azure Key Vault a sledováním a protokolováním přístupu ke službě Azure Monitor. Kromě ověřených uživatelskýchúčtůch Požadavky na aplikaci CluedIn používají šifrované přístupové tokeny, které nemají žádnou korelaci s identitou uživatele. S nativní podporou Microsoft Entra ID jednoduše přidejte informace SAML (Security Assertion Markup Language) 2.0 do služby CluedIn a můžete ho okamžitě použít ke správě přístupu uživatelů a rolí k novému řešení MDM.

Odolnost

Funkce CluedIn běží v režimu vysoké dostupnosti na úrovni úložiště dat a aplikace. Kvůli oddělení úložiště a zpracování má Společnost CluedIn integrovanou odolnost a odolnost proti chybám. Různé části aplikace CluedIn je možné vertikálně navýšit nebo snížit nezávisle, aby vyhovovaly nejrůznějším úlohám.

Provozní dokonalost

Služba CluedIn využívá kanály kontinuální integrace a průběžného doručování (CI/CD) azure Pipelines ke zpracování nasazení a kumulativních aktualizací prostředí AKS. Zákazníci můžou tuto infrastrukturu využít také k nasazení vlastních přizpůsobení do samotného nástroje CluedIn.

Optimalizace nákladů

Optimalizace nákladů se zabývá způsoby, jak snížit zbytečné výdaje a zlepšit efektivitu provozu. Další informace najdete v tématu Přehled pilíře optimalizace nákladů.

Náklady Pomůcek začínají nízké a na základě využití se vertikálně navýší ceny tak, aby odpovídaly využití. Rozpočty je možné nastavit přímo na webu Azure Portal, abyste mohli mít kontrolu nad provozními náklady.

Určení velikosti a spuštění zkušební verze Azure

Na svém webu můžete zahájit zkušební verzi služby CluedIn, která vám také pomůže určit rozsah nákladů na hostování Azure s předem připravenými odhady Azure pro různá prostředí.

Nasazení tohoto scénáře

Pokud chcete nasadit Aplikaci CluedIn pro účely vývoje a vyhodnocení pomocí Dockeru, přečtěte si průvodce místní instalací.

Pokud chcete nainstalovat CluedIn v produkčním prostředí, instance CluedIn se dají nainstalovat přímo z Azure Marketplace ve vašem vlastním tenantovi Azure.

Přispěvatelé

Tento článek spravuje Microsoft. Původně byla napsána následujícími přispěvateli.

Hlavní autor:

Pokud chcete zobrazit neveřejné profily LinkedIn, přihlaste se na LinkedIn.

Další kroky