JSON 壓平合併、逸出和陣列處理
注意
「時間序列深入解析」服務將於 2024 年 7 月 7 日淘汰。 請考慮盡快將現有的環境移轉至替代解決方案。 如需淘汰和移轉的詳細資訊,請造訪我們的文件。
您的 Azure 時間序列深入解析 Gen2 環境會依照一組特定的命名慣例,動態建立暖和冷存放區的資料行。 擷取事件時,會將一組規則套用至 JSON 承載和屬性名稱。 其中包括逸出特定特殊字元和壓平合併巢狀 JSON 物件。 請務必了解這些規則,以便您了解 JSON 的形狀如何影響事件儲存和查詢的方式。 有關規則的完整清單,請參閱下表。 範例 A 和 B 也會示範如何在陣列中有效率地批次處理多個時間序列。
重要
規則 | 範例 JSON | 時間序列運算式語法 | Parquet 中的屬性資料行名稱 |
---|---|---|---|
Azure 時間序列深入解析 Gen2 資料類型會附加至資料行名稱結尾,作為「_<dataType>」 | "type": "Accumulated Heat" |
$event.type.String |
type_string |
事件來源時間戳記屬性將會儲存在 Azure 時間序列深入解析 Gen2 中,作為儲存體中的「時間戳記」,以及儲存在 UTC 中的值。 您可以自訂事件來源時間戳記屬性,以符合解決方案的需求,但暖和冷儲存體中的資料行名稱是「timestamp」。 其他不是事件來源時間戳記的 datetime JSON 屬性將會以資料行名稱中的「_datetime」儲存,如上述規則所述。 | "ts": "2020-03-19 14:40:38.318" |
$event.$ts |
timestamp |
包含特殊字元的 JSON 屬性名稱。 [ \ 和 ' 是使用 [' 和 '] 逸出 | "id.wasp": "6A3090FD337DE6B" |
$event['id.wasp'].String |
['id.wasp']_string |
在 [' 和 '] 內,有額外的單引號和反斜線逸出。 單引號會寫入為 \',反斜線會寫入為 \\ | "Foo's Law Value": "17.139999389648" |
$event['Foo\'s Law Value'].Double |
['Foo\'s Law Value']_double |
巢狀 JSON 物件會以句點做為分隔符號來壓平合併。 支援最多 10 個層級的巢狀結構。 | "series": {"value" : 316 } |
$event.series.value.Long 、$event['series']['value'].Long 或 $event.series['value'].Long |
series.value_long |
基本類型的陣列會儲存為動態類型 | "values": [154, 149, 147] |
動態類型只能透過 GetEvents API 擷取 | values_dynamic |
包含物件的陣列有兩種行為,視物件內容而定:如果 TS 識別碼或時間戳記屬性位於陣列中的物件內,則會取消註冊陣列,以便初始 JSON 承載產生多個事件。 您可以藉此將多個事件批次處理成一個 JSON 結構。 與陣列對等互連的任何最上層屬性,都會與每個未註冊的物件一起儲存。 如果您的 TS 識別碼和時間戳記不在陣列內,則會將全部儲存為動態類型。 | 請參閱下列範例 A、B 和 C | ||
包含混合元素的陣列不會壓平合併。 | "values": ["foo", {"bar" : 149}, 147] |
動態類型只能透過 GetEvents API 擷取 | values_dynamic |
512 個字元是 JSON 屬性名稱限制。 如果名稱超過 512 個字元,則會將其截斷為 512,並附加 '_<'hashCode'>'。 請注意,這也適用於已從物件壓平合併串連的屬性名稱,表示巢狀物件路徑。 | "data.items.datapoints.values.telemetry<...continuing to over 512 chars>" : 12.3440495 |
"$event.data.items.datapoints.values.telemetry<...continuing to include all chars>.Double" |
data.items.datapoints.values.telemetry<...continuing to 512 chars>_912ec803b2ce49e4a541068d495ab570_double |
了解陣列的雙重行為
物件的陣列會儲存完整或分割成多個事件,視資料模型化的方式而定。 您可以藉此使用陣列來批次處理事件,並避免重複在根物件層級定義的遙測屬性。 批次處理可能會有好處,因為這會產生較少的事件中樞或傳送 IoT 中樞訊息。
不過,在某些情況下,包含物件的陣列只有在其他值的內容中才有意義。 建立多個事件會造成資料變得無意義。 若要確保物件的陣列以動態類型的形式儲存,請遵循下方的資料模型化指引,並查看範例 C
如何知道我的物件陣列是否會產生多個事件
如果您的時間序列識別碼有一或多個巢狀於陣列中的物件內,或您的事件來源時間戳記屬性為巢狀,則擷取引擎會將其分割成建立多個事件。 您為 TS 識別碼提供的屬性名稱和/或時間戳記應該遵循上述壓平合併規則,因此會指出 JSON 的形狀。 請參閱下列範例,並查看如何選取時間序列識別碼屬性的指南。
範例 A
物件根目錄和巢狀時間戳記的時間序列識別碼
環境時間序列識別碼:"id"
事件來源時間戳記:"values.time"
JSON 承載:
[
{
"id": "caaae533-1d6c-4f58-9b75-da102bcc2c8c",
"values": [
{
"time": "2020-05-01T00:59:59.000Z",
"value": 25.6073
},
{
"time": "2020-05-01T01:00:29.000Z",
"value": 43.9077
}
]
},
{
"id": "1ac87b74-0865-4a07-b512-56602a3a576f",
"values": [
{
"time": "2020-05-01T00:59:59.000Z",
"value": 0.337288
},
{
"time": "2020-05-01T01:00:29.000Z",
"value": 4.76562
}
]
}
]
Parquet 檔案的結果:
上述設定和承載會產生三個資料行和四個事件
timestamp | id_string | values.value_double |
---|---|---|
2020-05-01T00:59:59.000Z |
caaae533-1d6c-4f58-9b75-da102bcc2c8c |
25.6073 |
2020-05-01T01:00:29.000Z |
caaae533-1d6c-4f58-9b75-da102bcc2c8c |
43.9077 |
2020-05-01T00:59:59.000Z |
1ac87b74-0865-4a07-b512-56602a3a576f |
0.337288 |
2020-05-01T01:00:29.000Z |
1ac87b74-0865-4a07-b512-56602a3a576f |
4.76562 |
範例 B
具有一個巢狀屬性的複合時間序列識別碼
環境時間序列識別碼:"plantId"
和 "telemetry.tagId"
事件來源時間戳記:"timestamp"
JSON 承載:
[
{
"plantId": "9336971",
"timestamp": "2020-01-22T16:38:09Z",
"telemetry": [
{
"tagId": "100231-A-A6",
"tagValue": -31.149018
},
{
"tagId": "100231-A-A1",
"tagValue": 20.560796
},
{
"tagId": "100231-A-A9",
"tagValue": 177
},
{
"tagId": "100231-A-A8",
"tagValue": 420
},
]
},
{
"plantId": "9336971",
"timestamp": "2020-01-22T16:42:14Z",
"telemetry": [
{
"tagId": "103585-A-A7",
"value": -30.9918
},
{
"tagId": "103585-A-A4",
"value": 19.960796
}
]
}
]
Parquet 檔案的結果:
上述設定和承載會產生四個資料行和六個事件
timestamp | plantId_string | telemetry.tagId_string | telemetry.value_double |
---|---|---|---|
2020-01-22T16:38:09Z |
9336971 |
100231-A-A6 |
-31.149018 |
2020-01-22T16:38:09Z |
9336971 |
100231-A-A1 |
20.560796 |
2020-01-22T16:38:09Z |
9336971 |
100231-A-A9 |
177 |
2020-01-22T16:38:09Z |
9336971 |
100231-A-A8 |
420 |
2020-01-22T16:42:14Z |
9336971 |
100231-A-A7 |
-30.9918 |
2020-01-22T16:42:14Z |
9336971 |
100231-A-A4 |
19.960796 |
範例 C
時間序列識別碼和時間戳記位於物件根目錄
環境時間序列識別碼:"id"
事件來源時間戳記:"timestamp"
JSON 承載:
{
"id": "800500054755",
"timestamp": "2020-11-01T10:00:00.000Z",
"datapoints": [{
"value": 120
},
{
"value": 124
}
]
}
Parquet 檔案的結果:
上述設定和承載會產生三個資料行和一個事件
timestamp | id_string | datapoints_dynamic |
---|---|---|
2020-11-01T10:00:00.000Z |
800500054755 |
[{"value": 120},{"value":124}] |
下一步
- 了解環境的輸送量限制
意見反應
https://aka.ms/ContentUserFeedback。
即將登場:在 2024 年,我們將逐步淘汰 GitHub 問題作為內容的意見反應機制,並將它取代為新的意見反應系統。 如需詳細資訊,請參閱:提交並檢視相關的意見反應