Condividi tramite


Elaborazione e capacità di archiviazione nella piattaforma di strumenti analitici

I requisiti aziendali determinano il numero di unità di scala dati e le dimensioni dei dischi dei nodi di calcolo necessari nell'appliance di sistema di piattaforma di analisi (APS). Usare questi calcoli di elaborazione e archiviazione per guidare le decisioni relative all'acquisto e alla pianificazione della capacità.

Pianificazione della capacità di elaborazione

Le prestazioni delle query per Parallel Data Warehouse (PDW) di SQL Server dipendono in modo elevato dal numero di core CPU che lavorano sui dati in parallelo. Entro i limiti, l'aumento del parallelismo migliora le prestazioni delle query in elaborazione parallela (MPP). Anche se le dimensioni dei dati sono relativamente ridotte, la potenza del motore di query MPP viene migliorata grazie a un maggiore parallelismo.

Ad esempio, un'appliance con 12 nodi di calcolo ha 192 core CPU che elaborano i dati in parallelo. Questo è il parallelismo a 192 vie! Un'appliance con 56 nodi di calcolo ha 896 core che funzionano in parallelo. Questa grandezza del parallelismo non è raggiungibile senza l'elaborazione MPP.

Man mano che aumenta il numero di nodi di calcolo, l'aumento del numero di nodi di calcolo richiede l'aggiunta di più nodi di calcolo alla volta per ottenere un notevole vantaggio. I fornitori di hardware supportano solo configurazioni specifiche delle unità di scala dati per garantire che il vantaggio della scalabilità dell'appliance superi il costo della ridistribuzione dei dati in più nodi di calcolo.

Esempi di configurazione di unità di scala dati - HPE

Questi sono esempi delle configurazioni HPE supportate per unità di scalabilità dei dati. Possono variare rispetto alle configurazioni supportate più aggiornate, ma vengono fornite come esempio di come aumentare la capacità di circa il 20%.

L'aumento della capacità è il guadagno di capacità aumentando le unità di scala dei dati da una riga a quella successiva. Ad esempio, l'aumento delle unità di scala dati da 6 a 8 offre un aumento del 33% in core CPU e memoria. Aumenta anche lo spazio su disco che non viene visualizzato in questa tabella.

Unità di scala dati Nodi di calcolo Core CPU Memoria (GB) Aumento
1 2 32 512 -
2 4 64 1024 100%
3 6 96 1536 50%
4 8 128 2048 33%
5 10 160 2560 25%
6 12 192 3072 20%
8 16 256 4096 33%
10 20 320 5120 25%
12 24 384 6144 20%
16 32 512 8192 33%
20 40 640 10240 25%
24 48 768 12288 20%
28 56 896 14336 17%

Spiegazione:

Esempi di configurazione delle unità di scala dati - Dell, Quanta

Questi sono esempi delle configurazioni Dell e Quanta supportate per unità di scalabilità dei dati. Possono variare rispetto alle configurazioni supportate più aggiornate, ma vengono fornite come esempio di come aumentare la capacità di circa il 20%.

L'aumento della capacità è il guadagno di capacità aumentando le unità di scala dei dati da una riga a quella successiva. Ad esempio, l'aumento delle unità di scala dati da 6 a 8 offre un aumento del 33% in core CPU e memoria. Aumenta anche lo spazio su disco che non viene visualizzato in questa tabella.

Unità di scala dati Nodi di calcolo Core CPU Memoria (GB) Aumento
1 3 48 768 -
2 6 96 1536 100%
3 9 144 2.304 50%
4 12 192 3.072 33%
5 15 240 3.840 25%
6 18 288 4.608 20%
7 21 336 5.376 17%
8 24 384 6.144 14%
9 27 432 6.912 13%
12 36 576 9.216 33%
15 45 720 11.520 25%
18 54 864 13.824 20%

Pianificazione della capacità di archiviazione

Questa tabella stima che è possibile caricare e archiviare fino a 6 petabyte di dati non compressi in un'appliance di piattaforma di strumenti analitici completamente compilata.

Fornitore Dimensioni unità Archiviazione dati fisica per nodo di calcolo Numero massimo di nodi di calcolo per rack Archiviazione dati massima fisica per rack Quantità massima stimata di archiviazione dei dati utente per rack Rack massimi Quantità massima stimata di archiviazione dei dati utente per appliance
HPE 1 TB 16 TB 8 128 TB 320 TB 7 2.240 TB
HPE 2 TB 32 TB 8 256 TB 640 TB 7 4.480 TB
HPE 4 TB 64 TB 8 512 TB 1280 TB 7 8.960 TB
DELL 1 TB 16 TB 9 144 TB 360 TB 6 2.160 TB
DELL 2 TB 32 TB 9 288 TB 720 TB 6 4.320 TB
DELL 4 TB 64 TB 9 576 TB 1440 TB 6 8.640 TB

Spiegazione:

  • Le dimensioni dell'unità sono 1, 2 o 4 TB per ogni fornitore hardware.

  • Archiviazione dati fisica per nodo di calcolo = (dimensioni unità) * (16 dischi per nodo di calcolo). I dischi con mirroring non sono inclusi perché sono per la ridondanza.

  • Il numero massimo di nodi di calcolo per rack è specifico del fornitore di hardware.

  • Archiviazione massima fisica dei dati per rack = (archiviazione dati fisica per nodo di calcolo) * (numero massimo di nodi di calcolo per rack).

  • Quantità massima stimata di archiviazione dei dati utente per rack = (archiviazione dati massima fisica per rack) * (5 per un rapporto di compressione di 5:1) * (50% per i log e tempDB). Si tratta di una stima conservativa per i dati utente non compressi che possono essere caricati e archiviati nell'appliance. Si tratta di una stima e non viene applicata dal software. L'archivio dati utente effettivo dipende dai dati e dalla configurazione.

  • Il numero massimo di rack è specifico per ogni fornitore hardware.

  • Quantità massima stimata di archiviazione dei dati per appliance = (spazio di archiviazione massimo dei dati stimato per rack) * (numero massimo di rack). Si tratta di una stima conservativa delle dimensioni totali complessive dei dati utente che è possibile caricare e archiviare in un'appliance completamente compilata.