Lue englanniksi

Jaa

Ota käyttöön mitaliarkkitehtuuri Real-Time Intelligencessä

  • Artikkeli

Tässä artikkelissa kerrotaan, miten voit ottaa käyttöön mitalilioarkkitehtuurin käyttämällä Real-Time Intelligence Microsoft Fabricissa. Mitaliarkkitehtuuri varmistaa atomiteetin, yhdenmukaisuuden, eristyksen ja kestävyyden (ACID) ominaisuudet tietojen edetessä vaiheidensa läpi. Raakadatasta alkaen siihen tehdään useita vahvistuksia ja muunnoksia, joista tulee optimoituja tehokasta analysointia varten. Arkkitehtuuri koostuu kolmesta vaiheesta: pronssikerros (raakadata), hopeakerros (validoidut tiedot) ja Kultakerros (täydennetty tieto).

Lisätietoja on kohdassa Mikä on mitaliarkkitehtuuri?.

Miten se toimii?

Real-Time Intelligence sisältää ominaisuuksia, jotka helpottavat mitaliarkkitehtuurin luomista KQL-tietokannassa, jotka eivät edellytä lisäinfrastruktuuria. Näitä ominaisuuksia ovat muun muassa seuraavat:

  • Päivitä käytännöt -

    Kun tiedot tulevat pronssitasolle, voit käyttää päivityskäytäntöjä niiden muuntamiseen ja täydentämiseen ja lisäämällä siihen liiketoiminta-arvoa, kuten parannettu tietojen laatu, johdonmukaisuus ja osuvuus jatkoanalytiikassa. Päivityskäytännöt helpottavat jatkuvien tietovirtojen käsittelyä yksinkertaistamalla suoratoistokonsepteja, kuten lisäävää käsittelyä, tarkistus tarkistusten laatimista ja vesileimoja. Tämän abstraktion ansiosta voit luoda virtautettavia sovelluksia ja putkia ilman lisätyökaluja. Real-Time Intelligencen mahdollisuus käyttää ja muuntaa suoratoistotietoja mahdollistaa sen, että tietoteknikot ja tietotutkijat voivat käsitellä reaaliaikaisia tietoja eri lähteistä.

    Lisätietoja on kohdassa Päivitä käytäntö.

  • Muodostettujen näkymien

    Muodostettavat näkymät poistavat arvojen kaksoiskappaleet niiden saapuessa, jolloin duplicoidut tietueet ovat heti käytettävissä kyselyissä. Ne käsittelevät koostenäkymiä reaaliaikaisesti, mikä varmistaa suorituskyvyn parantamisen, tietojen tuoreuden ja kustannusten pienentämisen. Tämä poistaa tarpeen ylimääräisille työkaluille tietojen koostamisen suorittamiseksi. Kun koostekysely näytetään lähdetaulukossa tai toisessa muodostettussa näkymässä, se antaa aina up-to-date-tulokset. Muodostamisnäkymän kyseleminen on tehokkaampaa kuin koostamisen suorittaminen suoraan lähdetaulukosta, mikä johtaa suorituskyvyn parannuksiin. Lisäksi muodostetut näkymät kuluttavat vähemmän resursseja, mikä voi johtaa kustannussäästöihin.

    Jos haluat lisätietoja, katso Muodostettavat näkymät.

Mitalistiarkkitehtuurin toteuttaminen

Real-Time Intelligencen avulla voit luoda mitaliarkkitehtuurin käsittelemällä tietoja niiden saapuessa. Tämän ansiosta voit luoda pronssi-, hopea- ja kultakerroksia säilyttäen samalla tietoidesi reaaliaikaisen näkökulman.

kaavio, joka näyttää Real-Time Intelligence -tietokannassa olevan mitaliarkkitehtuurin.

  • Pronssikerros

    Pronssikerros toimii kaikkien saapuvien raakatietojen ensimmäisenä laskeutumisalueena. Real-Time intelligence -toiminnossa pronssikerros voi käsitellä tietoja Eventstream-menetelmällä tai Eventhouse-taulukolla, mikä luo perustan silver- ja gold-tasojen myöhemmille täydennyksille ja analyyseille.

    Vihje

    Haluat ehkä säilyttää nämä tiedot muutosten sieppaustarkoituksia ja tietojen toistamista varten. Jos pronssikerroksessa käytetään tapahtumavirtaa, voit tulostaa tiedot OneLakeen ennen kuin tapahtuman käsittely suorittaa muunnoksia tai parannuksia. Jos pronssikerroksessa käytetään taulukkoa, voit peilata tiedot OneLakeen.

  • Hopeinen kerros

    Silver-kerros sisältää tietoja, jotka muunnetaan ja täydennetään liiketoiminta-arvon lisäämiseksi, mukaan lukien tietueiden lisääminen. Tämä kerros käsittelee tietoja pronssikerroksesta menetelmiä, kuten tapahtumien käsittely- ja päivityskäytäntöjä, seuraavasti:

    • Tapahtuman käsittely -: Eventstream-tietoja täydennetään käyttämällä tapahtumankäsittelyn lisäämään liiketoiminta-arvo ja lisäämään sitten tulokset Silver layer -taulukkoon Eventhousessa.
    • Päivityskäytännön: pronssitason taulukon tiedot käsitellään välittömästi päivityskäytännön. Tulokset lisätään Silver Layer -taulukkoon Eventhousessa. Deduplication tapahtuu käyttämällä muodostettu näkymä, varmistaen, että tiedot pysyvät up-to-päivämääränä ja säilyttäen ratkaisun reaaliaikaisen näkökulman.

    Vihje

    Yleensä tässä kerroksessa on kaksi taulukkoa: yksi muunnoksia ja parannuksia varten ja muodostettu näkymä deduplicaatiota varten. Ensimmäisessä taulukossa voit määrittää säilytyskäytännön nollaksi päiväksi. Tämä tarkoittaa sitä, että tietoja ei koskaan näy taulukossa, mutta ne on silti liitetty muodostettuun näkymän mukaan. Deduplicated materialized view -näkymää käytetään suuren askelvälin analyysiin. Voit optimoida kustannukset määrittämällä sekä säilytyskäytännön, kuinka kauan haluat säilyttää tiedot, että välimuistiin tallentamisen käytäntöä kyselymallien perusteella. Usein hopeakerrosta ei tarvita niin kauan kuin kultakerrosta.

  • Kultakerros

    Kultakerros sisältää tietoja, jotka on optimoitu visualisointitarpeisiin säilyttäen samalla tietojen reaaliaikaisen näkökulman. Tämä kerros koostaa ja laskee tiedot niiden saapuessa käyttämällä muodostettattua näkymää, jolloin pääset nopeasti uusimpaan vastaanotettuun arvoon tietojoukkosi perusteella. Kultakerros varmistaa, että tiedot ovat valmiita kehittyneeseen analysointi- ja visualisointityökaluihin ja tarjoaa up-to– päivämäärän ja laadukkaat merkitykselliset tiedot päätöksentekoa varten.

    Tämä kerros on optimoitu visualisointia varten kooste- ja uusimman arvon muodostamien näkymien avulla. Useimmissa tilanteissa nämä otokseen sisältyvät tiedot säilytetään ja niistä lähetetään kyselyjä pidemmän aikaa kuin Silver-kerros. Kun säilytyskäytäntöä määrittää, kuinka kauan tietoja ja välimuistiin tallentamisen käytäntöä kyselymallien perusteella, tämä prosessi käsitellään natiivisti.

visualisoi ja toimi

Real-Time Intelligencen suorituskykyominaisuuksien avulla voit visualisoida tietoja käyttämällä osia, kuten Power BI, Real-Time koontinäytöt tai KQL-kyselyjoukot. Voit noutaa tietoja sekä Kultakerroksesta koostenäkymiä varten että Silver-kerroksesta suuren askelvälin analytiikan vapauttamiseksi. Lisäksi voit käsitellä tietoja millä tahansa tasolla käyttämällä Activator, mikä vapauttaa mahdollisuuden käyttää tietoja niiden saapuessa Eventstreamiin, suuren askelvälin tiedot Silver-kerrokseen ja koostetut tiedot Kultatasosta.

Tärkeimmät edut

Real-Time Intelligencen mitaliarkkitehtuuri tarjoaa useita etuja, kuten:

  • Tarkoituksellisesti luotu reaaliaikaista tietojenkäsittelyä varten

    Real-Time Intelligence on luotu Microsoft Fabricissa käsittelemään jatkuvasti virtaavia tietoja sekä suuren rakeisuuden tietoja. Koko työnkulku pronssikerroksista kultakerroksiin on sisäänrakennettu tuotteeseen. Kun aikataulua ei ole, se voi käsitellä tiedot pronssista hopeaksi välittömästi niiden saapuessa. Tämän voivat tehdä:

  • Joustavuus

    Tyypillisessä mitaliarkkitehtuurissa tietoja kulutetaan vain Gold Layerista menettäen yksittäiset tietueet ja estäen suuren askelvälin analytiikan. Eventhousen avulla voit käyttää sekä Gold- että Silver-tasojen tietoja ja avata korkean askelvälin analytiikan. Eventhouse on rakennettu käsittelemään kyselyjä miljardeja tietueita vastaan sekunneissa.

  • Sisäinen tietojen hallinta

    Kunkin tason tiedoilla on eri säilytys- ja kyselyvaatimukset. Tämä prosessi toteutetaan helposti sisäänrakennettujen toimintojen avulla.

  • Alkuperäinen visualisointikerros

    Yhdellä toiminnolla voit kiinnittää minkä tahansa kyselyn Gold- tai Silver-tasolta uuteen tai olemassa olevaan Power BI -raporttiin tai Real-Time -koontinäyttöön.

  • OneLake-käytettävyys

    Ota tietosi Silver Layerista ja näytä ne OneLaken Delta Parquet -OneLake-käytettävyydenkautta. Organisaation eri sidosryhmät käyttävät eri työkaluja, esimerkiksi historiatietoja koneoppimismallin harjoittamiseen. Kun tiedot ovat käytettävissä OneLakessa, kukin sidosryhmä voi vaivattomasti käsitellä tietoja ilman lisäkustannuksia tallennustilaa.

Aiheeseen liittyvä sisältö