Migrace do Azure Data Explorer
Poznámka
Služba Time Series Insights (TSI) už nebude po březnu 2025 podporována. Zvažte migraci stávajících prostředí TSI na alternativní řešení co nejdříve. Další informace o vyřazení a migraci najdete v naší dokumentaci.
Přehled
Služba Time Series Insights (TSI) poskytuje přístup k historickým datům ingestovanému prostřednictvím center pro účely provozní analýzy a vytváření sestav. Funkce služby jsou:
- Ingestování dat prostřednictvím center nebo funkce hromadného nahrávání
- Úložiště dat na horkém, omezeném uchovávání a studeném, nekonečném uchovávání, cestách.
- Kontextování dat s použitím hierarchií prostřednictvím modelu časové řady
- Vytváření grafů dat a provozní analýza prostřednictvím Průzkumníka TSI.
- Dotaz na data pomocí TSQ prostřednictvím rozhraní API nebo Průzkumníka TSI.
- Konektory pro přístup k datům pomocí Databricks Sparku nebo PBI
Porovnání funkcí s Azure Data Explorer (ADX)
| Funkce | TSI | ADX |
|---|---|---|
| Přijímání dat | Event Hubs, IoT Hub omezené na 1 MB/s | Event Hubs, IoT Hub, Kafka, Spark, Azure Storage, Azure Stream Analytics, Azure Data Factory, Logstash, Power Automate, Logic Apps, Telegraf, Apache Nifi. Žádné omezení příjmu dat (škálovatelné), srovnávací test příjmu dat je 200 MB/s/uzel na 16jádrových počítačích v clusteru ADX. |
| Ukládání a uchovávání dat | Teplé úložiště – cluster ADX s více tenanty | Studené úložiště – Úložiště objektů blob Azure v předplatném zákazníka Distribuované sloupcové úložiště s vysoce optimalizovaným horkým úložištěm (na disku SSD výpočetních uzlů) a studeným úložištěm (v úložišti Azure). Zvolte libovolnou skladovou položku ADX tak, aby byla plně flexibilní. |
| Formáty dat | JSON | JSON, CSV, Avro, Parquet, ORC, TXT a různé další Formáty dat podporované službou Azure Data Explorer pro příjem dat. |
| Dotazování na data | WS2 | KQL, SQL |
| Vizualizace dat | PRŮZKUMNÍK TSI, PBI | PBI, ADX Dashboards, Grafana, Kibana a další vizualizační nástroje s využitím konektorů ODBC/JDBC |
| Machine Learning | NA | Podporuje R a Python k vytváření modelů ML nebo vyhodnocování dat exportem existujících modelů ML. Nativní funkce pro prognózování Detekce anomálií ve velkém. Možnosti clusteringu pro diagnostiku a analýzu RCA |
| Konektor PBI | Public Preview | Optimalizovaný nativní konektor PBI (GA), podporuje režim přímého dotazu nebo importu, podporuje parametry a filtry dotazů. |
| Export dat | Data jsou dostupná jako soubory Parquet ve službě BLOB Storage. | Podporuje automatický průběžný export do úložiště Azure, externí tabulky pro dotazování na exportovaná data |
| Ha/DR | Úložiště vlastní zákazník, takže závisí na vybrané konfiguraci. | Smlouva HA SLA s 99,9% dostupností, podporovaná az. Služba Storage je postavená na odolném úložišti objektů blob v Azure. |
| Zabezpečení | Private Link pro příchozí provoz, ale otevřený pro úložiště a centra | Injektáž virtuální sítě, Private Link, šifrování neaktivních uložených dat s podporovanými klíči spravovanými zákazníkem |
| Role RBAC a zabezpečení na úrovni řádků | Omezená role RBAC, bez zabezpečení na úrovni řádků | Podrobná role RBAC pro funkce a přístup k datům, zabezpečení na úrovni řádků a podporu maskování dat |
Postup migrace TSI na ADX
TSI má dvě nabídky, Gen1 a Gen2, které mají různé kroky migrace.
TSI Gen1
TSI Gen1 neobsahuje možnost pro úložiště málo používaných dat nebo hierarchii. Všechna data mají pevně stanovenou dobu uchovávání. Extrakce dat a jejich mapování na ADX by byla složitá a časově náročná úloha pro vývojáře TSI a zákazníka. Způsob migrace návrhu je nastavení paralelního příjmu dat do ADX. Po uplynutí pevné doby uchovávání dat je možné prostředí TSI odstranit, protože ADX bude obsahovat stejná data.
- Vytvoření clusteru ADX
- Nastavení paralelního příjmu dat z rozbočovačů do clusteru ADX
- Pokračující příjem dat po dobu pevného uchovávání
- Začínáme používat cluster ADX
- Odstranění prostředí TSI
Podrobné nejčastější dotazy a technické zkušenosti najdete v tématu Jak migrovat TSI Gen1 do ADX.
TSI Gen2
TSI Gen2 ukládá všechna data v studeném úložišti pomocí formátu Parquet jako objekt blob v předplatném zákazníka. Pokud chcete migrovat data zákazníka, měli byste objekt blob převzít a importovat ho do ADX pomocí funkce hromadného nahrávání Lightingest. Další informace o lightingestu můžete získat zde.
- Vytvoření clusteru ADX
- Přesměrování příjmu dat do clusteru ADX
- Import studených dat TSI pomocí funkce lightingest
- Začínáme používat cluster ADX
- Odstranit prostředí TSI
Podrobné nejčastější dotazy a technické zkušenosti najdete v tématu Migrace TSI Gen2 do ADX.
Poznámka
Pokud do 31. března 2025 nemůžete migrovat na Time Series Insights do Azure Data Explorer, vaše prostředky Time Series Insights se automaticky odstraní. Budete mít přístup k datům Gen2 ve vašem účtu úložiště. Budete ale moct provádět pouze operace správy (například aktualizaci nastavení účtu úložiště, získání vlastností nebo klíčů účtu úložiště a odstranění účtů úložiště) prostřednictvím Azure Resource Manager. Pokud máte plán podpory pro data Gen1, vytvořte lístek podpory pro načtení dat Gen1. Vaše data Gen1 budeme uchovávat do 30. dubna 2025.