A betöltési ügynök áttekintése
A betöltési ügynök adatokat tölt fel az Azure Operator Elemzések Data Product szolgáltatásba. Biztosítunk egy Azure Operator Elemzések betöltési ügynök nevű betöltési ügynököt, amelyet linuxos virtuális gépre telepíthet, hogy adatokat töltsön fel a hálózatról. Ez a betöltési ügynök támogatja a feltöltést:
- A Mobile Content Cloud (MCC) eseményadat-rekordjai (Végponti észlelés és reagálás) adatfolyamai.
- SFTP-kiszolgálón tárolt fájlok.
A különböző típusú forrás egy ügynökpéldányban való kombinálása nem ajánlott éles környezetben, de a tesztkörnyezeti próbák és tesztelések esetében támogatott.
MCC Végponti észlelés és reagálás forrás áttekintése
Az MCC Végponti észlelés és reagálás-forrással konfigurált betöltési ügynököt az Affirmed Networks Mobile Content Cloud (MCC) használatára tervezték. Eseményadat-rekordokat (Végponti észlelés és reagálás) tölt be az MCC hálózati elemeiből, és feltölti őket az Azure Operator Elemzések. További információkért lásd : Élményminőség – Megerősített MCC-adattermék.
SFTP lekéréses forrás áttekintése
Az SFTP lekérési forrással konfigurált betöltési ügynök összegyűjti egy vagy több SFTP-kiszolgáló fájljait, és feltölti őket az Azure Operator Elemzések.
Fájlforrások
A betöltési ügynök fájlokat gyűjt a rajta konfigurált betöltési folyamatokból. A folyamatok tartalmazzák az SFTP-kiszolgáló részleteit, az abból begyűjtendő fájlokat és a fájlok kezelését.
Előfordulhat például, hogy egyetlen SFTP-kiszolgáló rendelkezik naplókkal, CSV-fájlokkal és szövegfájlokkal. Az egyes fájltípusokat külön betöltési folyamatként konfigurálhatja. Az egyes betöltési folyamatok esetében megadhatja, hogy milyen gyakran gyűjtsön fájlokat (opcionálisan beleértve vagy kizárva a fájlelérési útvonalakon alapuló fájlokat), hogy milyen gyakran gyűjtsön fájlokat és egyéb beállításokat. Az elérhető lehetőségek részletes leírását az Azure Operator Elemzések betöltési ügynök konfigurációs referenciájában találja.
A betöltési folyamatokra a következő korlátozások vonatkoznak:
- Nem lehetnek átfedésben, vagyis nem gyűjthetik ugyanazokat a fájlokat ugyanazon kiszolgálókról.
- Minden folyamatot pontosan egy ügynökön kell konfigurálnia. Ha több ügynökön konfigurál egy folyamatot, az Azure Operator Elemzések duplikált adatokat kap.
Fájlok feldolgozása
A betöltési ügynök fájlokat tölt fel az Azure Operator Elemzések az ütemezett feltöltési futtatások során. A futtatások gyakorisága a folyamat konfigurációjában van meghatározva. Minden feltöltés futtat fájlokat a folyamat konfigurációjának megfelelően:
- A fájl elérési útjai és a fájlok belefoglalására és kizárására szolgáló reguláris kifejezések határozzák meg a feltöltendő fájlokat.
- A rendezési idő kizárja az ezen időszakon belül utoljára módosított fájlokat minden feltöltésből. Ha például a feltöltési futtatás 05:30-kor kezdődik, és a rendezési idő 60 másodperc (egy perc), a feltöltési futtatás csak a 05:29 előtt módosított fájlokat tölti fel.
- Az idő előtti kizárás (ha be van állítva) kizárja a megadott dátum és idő előtt legutóbb módosított fájlokat.
A betöltési ügynök rögzíti, amikor legutóbb befejeződött egy fájlforrás feltöltési futtatása. Ezzel a rekorddal határozza meg, hogy mely fájlokat töltse fel a következő feltöltési futtatás során, az alábbi eljárással:
- Az ügynök ellenőrzi az utolsó rögzített időpontot.
- Az ügynök feltölti az azóta módosított fájlokat. Feltételezi, hogy egy korábbi feltöltési futtatás során feldolgozta a régebbi fájlokat.
- A feltöltési futtatás végén:
- Ha az ügynök feltöltötte az összes fájlt, vagy az egyetlen hiba nem sikerült, az ügynök frissíti a rekordot. Az új időpont a feltöltési futtatás kezdetének időpontjától függ, a rendezési idő levonásával.
- Ha a feltöltési futtatás újrapróbálkozási hibákba ütközött (például ha az Azure-hoz való kapcsolat megszakadt), az ügynök nem frissíti a rekordot. Ha nem frissíti a rekordot, az ügynök újrapróbálkozza a feltöltést a nem sikeresen feltöltött fájlok esetében. Az újrapróbálkozések nem duplikálják a korábban feltöltött adatokat.
A betöltési ügynök úgy lett kialakítva, hogy rendkívül megbízható és rugalmas legyen az alacsony hálózati zavarokkal szemben. Ha váratlan hiba történik, az ügynök újraindul, és amint fut, újra biztosítja a szolgáltatást. Újraindítás után az ügynök azonnali felzárkózási feltöltést hajt végre az összes konfigurált fájlforráshoz. Ezután visszatér a konfigurált ütemezéshez.
Hitelesítés
A betöltési ügynök két külön rendszeren hitelesít, külön hitelesítő adatokkal.
- Az Azure Operator Elemzések Data Product betöltési végpontjára való hitelesítéshez az ügynök egy SAS-jogkivonatot szerez be egy Azure Key Vaultból. Az ügynök az ügynök létrehozásakor beállított Microsoft Entra-azonosítójú felügyelt identitással vagy szolgáltatásnévvel és tanúsítvánnyal hitelesíti ezt a Key Vaultot.
- Az SFTP-kiszolgálón való hitelesítéshez az ügynök jelszó-hitelesítést vagy SSH-kulcs-hitelesítést használhat.
A konfigurációs utasításokért lásd: Az Azure-beli hitelesítés beállítása, a virtuális gépek előkészítése és az ügynökszoftver konfigurálása.