Tworzenie pamięci podręcznej Azure HPC Cache

Użyj witryny Azure Portal lub interfejsu wiersza polecenia platformy Azure, aby utworzyć pamięć podręczną.

Portal

Definiowanie podstawowych szczegółów

W obszarze Project Details wybierz subskrypcję i grupę zasobów, która będzie hostować pamięć podręczną.

W obszarze Szczegóły usługi ustaw nazwę pamięci podręcznej i następujące inne atrybuty:

• Lokalizacja — wybierz jeden z obsługiwanych regionów.

  Jeśli ten region obsługuje strefy dostępności, wybierz strefę, która będzie hostować zasoby pamięci podręcznej. Azure HPC Cache to usługa strefowa.

• Sieć wirtualna — możesz wybrać istniejącą lub utworzyć nową sieć wirtualną.

• Podsieć — wybierz lub utwórz podsieć z co najmniej 64 adresami IP (/24). Ta podsieć musi być używana tylko dla tego wystąpienia usługi Azure HPC Cache.

Wybieranie typu i pojemności pamięci podręcznej

Na stronie Pamięć podręczna określ typ i rozmiar pamięci podręcznej do utworzenia. Te wartości określają możliwości pamięci podręcznej, w tym:

• Jak szybko pamięć podręczna może obsługiwać żądania klientów
• Ile danych może przechowywać pamięć podręczna
• Określa, czy pamięć podręczna obsługuje tryb buforowania odczytu/zapisu
• Ile miejsc docelowych magazynu może mieć
• Koszt pamięci podręcznej

Przed wybraniem przepływności lub pojemności magazynu należy wybrać typ pamięci podręcznej. Dostępne opcje:

• Buforowanie standardowe odczytu i zapisu: elastyczna pamięć podręczna ogólnego przeznaczenia
• Buforowanie tylko do odczytu: pamięć podręczna o wysokiej przepływności zaprojektowana w celu zminimalizowania opóźnienia dostępu do plików; modyfikacje są obsługiwane za pomocą synchronicznych operacji zapisu
• Buforowanie w warstwie Premium do odczytu i zapisu (wersja zapoznawcza): zoptymalizowana pod kątem nvme pamięć podręczna o najniższym opóźnieniu i najwyższej przepływności

Przeczytaj więcej na temat tych typów pamięci podręcznej poniżej w temacie Wybierz typ pamięci podręcznej dla Twoich potrzeb.

Napiwek

Typy pamięci podręcznej "Odczyt-zapis" można skonfigurować z miejscami docelowymi magazynu przy użyciu buforowania odczytu lub buforowania zapisu w modelach użycia. Typy pamięci podręcznej "Tylko do odczytu" obsługują tylko typy obiektów docelowych magazynu NFS NFS i ADLS-NFS z tylko modelami użycia buforowania odczytu. Dowiedz się więcej o trybach buforowania w temacie Omówienie modeli użycia pamięci podręcznej.

Jednostka SKU pamięci podręcznej "Standardowa" umożliwia wybranie pojemności pamięci podręcznej dla danego wyboru przepływności, natomiast pamięci podręczne "Premium" i "tylko do odczytu" mają stałe pojemności dla każdego wyboru przepływności. Możliwości pamięci podręcznej są definiowane przez dwie opcje wdrażania:

• Maksymalna przepływność — szybkość transferu danych pamięci podręcznej w GB/sekundę
• Rozmiar pamięci podręcznej — ilość miejsca przydzielonego do buforowanych danych w TB

Opis przepływności i rozmiaru pamięci podręcznej

Kilka czynników może mieć wpływ na wydajność pamięci podręcznej HPC Cache, ale wybór odpowiedniej wartości przepływności i rozmiar magazynu pamięci podręcznej jest jednym z najważniejszych.

Podczas wybierania wartości przepływności należy pamiętać, że rzeczywista szybkość transferu danych zależy od obciążenia, szybkości sieci i typu obiektów docelowych magazynu.

Wybrane wartości umożliwiają ustawienie maksymalnej przepływności dla całego systemu pamięci podręcznej, ale niektóre z nich są używane do zadań narzutowych. Jeśli na przykład klient żąda pliku, który nie jest jeszcze przechowywany w pamięci podręcznej, lub jeśli plik jest oznaczony jako nieaktualny, pamięć podręczna używa części przepływności, aby pobrać go z magazynu zaplecza.

Usługa Azure HPC Cache zarządza plikami buforowanych i wstępnie załadowanych w celu zmaksymalizowania współczynników trafień pamięci podręcznej. Zawartość pamięci podręcznej jest stale oceniana, a pliki są przenoszone do długoterminowego magazynu, gdy są one rzadziej używane.

Wybierz rozmiar magazynu pamięci podręcznej, który może wygodnie przechowywać aktywny zestaw plików roboczych oraz dodatkowe miejsce na metadane i inne obciążenie.

Jeśli potrzebujesz pomocy przy prawidłowym określaniu rozmiaru pamięci podręcznej, skontaktuj się z pomocą techniczną firmy Microsoft.

Wybierz typ pamięci podręcznej dla Twoich potrzeb

Istnieją dwa podstawowe typy pamięci podręcznej: "Standardowa" i "Premium".

Pamięci podręczne w warstwie Standardowa są ogólnie używanymi systemami HPC Cache. Możesz wybrać spośród wielu rozmiarów magazynu po wybraniu wartości przepływności i dołączyć dowolny z obsługiwanych typów docelowych magazynu usługi HPC Cache.

Pamięci podręczne w warstwie Premium są przeznaczone dla usługi plików o najwyższej wydajności. Korzystają one z urządzeń magazynujących NVMe o wysokiej przepływności, co oznacza, że pamięci podręczne w warstwie Premium mają inną strukturę cenową, pojemności statycznej pamięci podręcznej i nie można ich tymczasowo zatrzymać.

Opcje pamięci podręcznej obejmują:

• Buforowanie standardowe odczytu i zapisu

  W przypadku standardowych pamięci podręcznych można wybrać jedną z kilku wartości rozmiaru pamięci podręcznej. Te pamięci podręczne można skonfigurować przy użyciu docelowych modeli użycia magazynu zarówno do odczytu (zapisu) jak i buforowania odczytu i zapisu.

• Buforowanie tylko do odczytu

  Ten typ pamięci podręcznej zapewnia większą przepływność i mniejsze opóźnienie niż standardowa pamięć podręczna, ale jest przeznaczony do optymalizacji dostępu tylko do odczytu plików i katalogów. Nie można skonfigurować pamięci podręcznej tylko do odczytu do użycia pamięci podręcznej do odczytu i zapisu, ale obciążenie odczytu po zapisie spowoduje trafienie w pamięci podręcznej, ponieważ zapisy są utrwalane synchronicznie do miejsca docelowego magazynu. Ten typ pamięci podręcznej ma tylko jedną opcję rozmiaru pamięci podręcznej dla każdego wyboru przepływności.

• Buforowanie w warstwie Premium do odczytu i zapisu (wersja zapoznawcza)

  Pamięć podręczna o wysokiej przepływności, którą można skonfigurować na potrzeby buforowania tylko do odczytu lub zapisu. Te pamięci podręczne mają tylko jedną opcję rozmiaru pamięci podręcznej dla każdej opcji przepływności.

W tej tabeli opisano ważne różnice między trzema typami pamięci podręcznej.

Atrybut	Buforowanie w warstwie Standardowa odczytu i zapisu	Buforowanie tylko do odczytu	Buforowanie w warstwie Premium do odczytu i zapisu
Rozmiary przepływności	2, 4 lub 8 GB/s	4,5, 9 lub 16 GB/s	5, 10 lub 20 GB/s
Rozmiary pamięci podręcznej	3, 6 lub 12 TB dla 2 GB/s 6, 12 lub 24 TB dla 4 GB/s 12, 24 lub 48 TB dla 8 GB/s	21 TB na 4,5 GB/s 42 TB dla 9 GB/s 84 TB dla 16 GB/s	21 TB dla 5 GB/s 42 TB dla 10 GB/s 84 TB dla 20 GB/s
Zgodne typy obiektów docelowych magazynu	Azure Blob System plików NFS (lokalny) ADLS-NFS (obiekt blob platformy Azure z obsługą systemu plików NFSv3)	System plików NFS (lokalny) ADLS-NFS (obiekt blob platformy Azure z obsługą systemu plików NFSv3)	Azure Blob System plików NFS (lokalny) ADLS-NFS (obiekt blob platformy Azure z obsługą systemu plików NFSv3)
Style buforowania	Buforowanie odczytu i zapisu	Tylko buforowanie odczytu	Buforowanie odczytu i zapisu
Pamięć podręczną można zatrzymać, aby zaoszczędzić koszt, gdy nie jest to konieczne	Tak	Nie.	Nie.

Wszystkie trzy opcje buforowania mają maksymalną liczbę docelową magazynu wynoszącą 20.

Dowiedz się więcej o tych opcjach:

• Tryby buforowania odczytu i zapisu

Włączanie szyfrowania usługi Azure Key Vault (opcjonalnie)

Jeśli chcesz zarządzać kluczami szyfrowania używanymi dla magazynu pamięci podręcznej, podaj informacje o usłudze Azure Key Vault na stronie Klucze szyfrowania dysków. Magazyn kluczy musi znajdować się w tym samym regionie i w tej samej subskrypcji co pamięć podręczna.

Jeśli nie potrzebujesz kluczy zarządzanych przez klienta, możesz pominąć tę sekcję. Platforma Azure domyślnie szyfruje dane przy użyciu kluczy zarządzanych przez firmę Microsoft. Przeczytaj artykuł Szyfrowanie usługi Azure Storage, aby dowiedzieć się więcej.

Uwaga

Po utworzeniu pamięci podręcznej nie można zmieniać kluczy zarządzanych przez firmę Microsoft i kluczy zarządzanych przez klienta.

Aby uzyskać pełne wyjaśnienie procesu szyfrowania kluczy zarządzanych przez klienta, przeczytaj Artykuł Use customer-managed encryption keys for Azure HPC Cache (Używanie kluczy szyfrowania zarządzanych przez klienta dla usługi Azure HPC Cache).

Wybierz pozycję Klient zarządzany , aby wybrać szyfrowanie kluczy zarządzanych przez klienta. Zostanie wyświetlone pola specyfikacji magazynu kluczy. Wybierz usługę Azure Key Vault do użycia, a następnie wybierz klucz i wersję do użycia dla tej pamięci podręcznej. Klucz musi być kluczem RSA 2048-bitowym. Na tej stronie możesz utworzyć nowy magazyn kluczy, klucz lub wersję klucza.

Zaznacz pole Zawsze używaj bieżącej wersji klucza, jeśli chcesz użyć automatycznego obracania kluczy.

Jeśli chcesz użyć określonej tożsamości zarządzanej dla tej pamięci podręcznej, skonfiguruj ją w sekcji Tożsamości zarządzane. Aby dowiedzieć się więcej, przeczytaj co to są tożsamości zarządzane dla zasobów platformy Azure?

Uwaga

Po utworzeniu pamięci podręcznej nie można zmienić przypisanej tożsamości.

Jeśli używasz tożsamości zarządzanej przypisanej przez system lub tożsamości przypisanej przez użytkownika, która nie ma jeszcze dostępu do magazynu kluczy, należy wykonać dodatkowy krok po utworzeniu pamięci podręcznej. Ten krok ręczny autoryzuje tożsamość zarządzaną pamięci podręcznej do korzystania z magazynu kluczy.

• Przeczytaj artykuł Wybierz opcję tożsamości zarządzanej dla pamięci podręcznej , aby zrozumieć różnice w ustawieniach tożsamości zarządzanej.
• Przeczytaj artykuł Autoryzowanie szyfrowania usługi Azure Key Vault z pamięci podręcznej , aby dowiedzieć się więcej na temat kroku ręcznego.

Dodawanie tagów zasobów (opcjonalnie)

Strona Tagi umożliwia dodawanie tagów zasobów do wystąpienia usługi Azure HPC Cache.

Kończenie tworzenia pamięci podręcznej

Po skonfigurowaniu nowej pamięci podręcznej kliknij kartę Przeglądanie i tworzenie . Portal weryfikuje wybrane opcje i umożliwia przeglądanie wybranych opcji. Jeśli wszystko jest poprawne, kliknij przycisk Utwórz.

Tworzenie pamięci podręcznej trwa około 10 minut. Postęp można śledzić w panelu powiadomień w witrynie Azure Portal.

Po zakończeniu tworzenia zostanie wyświetlone powiadomienie z linkiem do nowego wystąpienia usługi Azure HPC Cache, a pamięć podręczna zostanie wyświetlona na liście Zasobów subskrypcji.

Uwaga

Jeśli pamięć podręczna używa kluczy szyfrowania zarządzanych przez klienta i wymaga ręcznego kroku autoryzacji po utworzeniu, pamięć podręczna może pojawić się na liście zasobów, zanim jego stan wdrożenia ulegnie zmianie. Gdy tylko stan pamięci podręcznej to Oczekiwanie na klucz , możesz autoryzować go do korzystania z magazynu kluczy.

Interfejs wiersza polecenia platformy Azure

Tworzenie pamięci podręcznej za pomocą interfejsu wiersza polecenia platformy Azure

Konfigurowanie interfejsu wiersza polecenia platformy Azure dla usługi Azure HPC Cache.

Uwaga

Interfejs wiersza polecenia platformy Azure obecnie nie obsługuje tworzenia pamięci podręcznej przy użyciu kluczy szyfrowania zarządzanych przez klienta. Używanie witryny Azure Portal.

Użyj polecenia az hpc-cache create, aby utworzyć nową pamięć podręczną Azure HPC Cache.

Podaj następujące wartości:

• Nazwa grupy zasobów pamięci podręcznej

• Nazwa pamięci podręcznej

• Region platformy Azure

• Podsieć pamięci podręcznej w tym formacie:

  --subnet "/subscriptions/<subscription_id>/resourceGroups/<cache_resource_group>/providers/Microsoft.Network/virtualNetworks/<virtual_network_name>/subnets/<cache_subnet_name>"

  Podsieć pamięci podręcznej wymaga co najmniej 64 adresów IP (/24) i nie może pomieścić żadnych innych zasobów.

• Pojemność pamięci podręcznej. Dwie wartości ustawiają maksymalną przepływność usługi Azure HPC Cache:

  • Rozmiar pamięci podręcznej (w GB)
  • Jednostka SKU maszyn wirtualnych używanych w infrastrukturze pamięci podręcznej

  az hpc-cache skus list przedstawia dostępne jednostki SKU i prawidłowe opcje rozmiaru pamięci podręcznej dla każdego z nich. Opcje rozmiaru pamięci podręcznej wahają się od 3 TB do 48 TB, ale obsługiwane są tylko niektóre wartości.

  Ten wykres pokazuje, które kombinacje rozmiaru pamięci podręcznej i jednostki SKU są prawidłowe w momencie przygotowania tego dokumentu (lipiec 2020 r.).

  Rozmiar pamięci podręcznej	Standard_2G	Standard_4G	Standard_8G
  3072 GB	tak	nie	nie
  6144 GB	tak	tak	nie
  12288 GB	tak	tak	tak
  24576 GB	nie	tak	tak
  49152 GB	nie	nie	tak

  Przeczytaj sekcję Ustawianie pojemności pamięci podręcznej na karcie Instrukcje portalu, aby uzyskać ważne informacje o cenach, przepływności i sposobach odpowiedniego rozmiaru pamięci podręcznej dla przepływu pracy.

Przykład tworzenia pamięci podręcznej:

az hpc-cache create --resource-group doc-demo-rg --name my-cache-0619 \
    --location "eastus" --cache-size-gb "3072" \
    --subnet "/subscriptions/<subscription-ID>/resourceGroups/doc-demo-rg/providers/Microsoft.Network/virtualNetworks/vnet-doc0619/subnets/default" \
    --sku-name "Standard_2G"

Tworzenie pamięci podręcznej trwa kilka minut. Po pomyślnych działaniach polecenie create zwraca dane wyjściowe w następujący sposób:

{
  "cacheSizeGb": 3072,
  "health": {
    "state": "Healthy",
    "statusDescription": "The cache is in Running state"
  },
  "id": "/subscriptions/<subscription-ID>/resourceGroups/doc-demo-rg/providers/Microsoft.StorageCache/caches/my-cache-0619",
  "location": "eastus",
  "mountAddresses": [
    "10.3.0.17",
    "10.3.0.18",
    "10.3.0.19"
  ],
  "name": "my-cache-0619",
  "provisioningState": "Succeeded",
  "resourceGroup": "doc-demo-rg",
  "sku": {
    "name": "Standard_2G"
  },
  "subnet": "/subscriptions/<subscription-ID>/resourceGroups/doc-demo-rg/providers/Microsoft.Network/virtualNetworks/vnet-doc0619/subnets/default",
  "tags": null,
  "type": "Microsoft.StorageCache/caches",
  "upgradeStatus": {
    "currentFirmwareVersion": "5.3.42",
    "firmwareUpdateDeadline": "0001-01-01T00:00:00+00:00",
    "firmwareUpdateStatus": "unavailable",
    "lastFirmwareUpdate": "2020-04-01T15:19:54.068299+00:00",
    "pendingFirmwareVersion": null
  }
}

Komunikat zawiera kilka przydatnych informacji, w tym następujące elementy:

• Adresy instalacji klienta — użyj tych adresów IP, gdy wszystko będzie gotowe do połączenia klientów z pamięcią podręczną. Przeczytaj artykuł Instalowanie usługi Azure HPC Cache , aby dowiedzieć się więcej.
• Stan uaktualnienia — po wydaniu aktualizacji oprogramowania ta wiadomość ulegnie zmianie. Oprogramowanie pamięci podręcznej można uaktualnić ręcznie w dogodnym czasie lub zostanie zastosowane automatycznie po kilku dniach.

Azure PowerShell

Uwaga

Moduł Az.HPCCache programu PowerShell jest obecnie dostępny w publicznej wersji zapoznawczej. Ta wersja zapoznawcza jest dostępna bez umowy dotyczącej poziomu usług. Nie jest ona zalecana w przypadku obciążeń produkcyjnych. Niektóre funkcje mogą nie być obsługiwane lub mogą mieć ograniczone możliwości. Aby uzyskać więcej informacji, zobacz Uzupełniające warunki korzystania z wersji zapoznawczych platformy Microsoft Azure.

Wymagania

Jeśli zdecydujesz się używać programu PowerShell lokalnie, ten artykuł wymaga zainstalowania modułu Az programu PowerShell i nawiązania połączenia z kontem platformy Azure przy użyciu polecenia cmdlet Connect-AzAccount . Aby uzyskać więcej informacji na temat instalowania modułu Az programu PowerShell, zobacz Instalowanie programu Azure PowerShell. Jeśli zdecydujesz się używać usługi Cloud Shell, zobacz Omówienie usługi Azure Cloud Shell , aby uzyskać więcej informacji.

Ważne

Chociaż moduł Az.HPCCache programu PowerShell jest w wersji zapoznawczej, należy zainstalować go oddzielnie przy użyciu Install-Module polecenia cmdlet . Gdy ten moduł programu PowerShell stanie się ogólnie dostępny, będzie on częścią przyszłych wersji modułu Az programu PowerShell i będzie dostępny natywnie z poziomu usługi Azure Cloud Shell.

Install-Module -Name Az.HPCCache

Tworzenie pamięci podręcznej za pomocą programu Azure PowerShell

Uwaga

Program Azure PowerShell obecnie nie obsługuje tworzenia pamięci podręcznej przy użyciu kluczy szyfrowania zarządzanych przez klienta. Używanie witryny Azure Portal.

Użyj polecenia cmdlet New-AzHpcCache, aby utworzyć nową pamięć podręczną AZURE HPC Cache.

Podaj następujące wartości:

• Nazwa grupy zasobów pamięci podręcznej

• Nazwa pamięci podręcznej

• Region platformy Azure

• Podsieć pamięci podręcznej w tym formacie:

  -SubnetUri "/subscriptions/<subscription_id>/resourceGroups/<cache_resource_group>/providers/Microsoft.Network/virtualNetworks/<virtual_network_name>/subnets/<cache_subnet_name>"

  Podsieć pamięci podręcznej wymaga co najmniej 64 adresów IP (/24) i nie może pomieścić żadnych innych zasobów.

• Pojemność pamięci podręcznej. Dwie wartości ustawiają maksymalną przepływność usługi Azure HPC Cache:

  • Rozmiar pamięci podręcznej (w GB)
  • Jednostka SKU maszyn wirtualnych używanych w infrastrukturze pamięci podręcznej

  Polecenie Get-AzHpcCacheSku przedstawia dostępne jednostki SKU i prawidłowe opcje rozmiaru pamięci podręcznej dla każdego z nich. Opcje rozmiaru pamięci podręcznej wahają się od 3 TB do 48 TB, ale obsługiwane są tylko niektóre wartości.

  Ten wykres pokazuje, które kombinacje rozmiaru pamięci podręcznej i jednostki SKU są prawidłowe w momencie przygotowania tego dokumentu (lipiec 2020 r.).

  Rozmiar pamięci podręcznej	Standard_2G	Standard_4G	Standard_8G
  3072 GB	tak	nie	nie
  6144 GB	tak	tak	nie
  12 288 GB	tak	tak	tak
  24 576 GB	nie	tak	tak
  49 152 GB	nie	nie	tak

  Przeczytaj sekcję Ustawianie pojemności pamięci podręcznej na karcie Instrukcje portalu, aby uzyskać ważne informacje o cenach, przepływności i sposobach odpowiedniego rozmiaru pamięci podręcznej dla przepływu pracy.

Przykład tworzenia pamięci podręcznej:

$cacheParams = @{
  ResourceGroupName = 'doc-demo-rg'
  CacheName = 'my-cache-0619'
  Location = 'eastus'
  cacheSize = '3072'
  SubnetUri = "/subscriptions/<subscription-ID>/resourceGroups/doc-demo-rg/providers/Microsoft.Network/virtualNetworks/vnet-doc0619/subnets/default"
  Sku = 'Standard_2G'
}
New-AzHpcCache @cacheParams

Tworzenie pamięci podręcznej trwa kilka minut. Po powodzeniu polecenie create zwraca następujące dane wyjściowe:

cacheSizeGb       : 3072
health            : @{state=Healthy; statusDescription=The cache is in Running state}
id                : /subscriptions/<subscription-ID>/resourceGroups/doc-demo-rg/providers/Microsoft.StorageCache/caches/my-cache-0619
location          : eastus
mountAddresses    : {10.3.0.17, 10.3.0.18, 10.3.0.19}
name              : my-cache-0619
provisioningState : Succeeded
resourceGroup     : doc-demo-rg
sku               : @{name=Standard_2G}
subnet            : /subscriptions/<subscription-ID>/resourceGroups/doc-demo-rg/providers/Microsoft.Network/virtualNetworks/vnet-doc0619/subnets/default
tags              :
type              : Microsoft.StorageCache/caches
upgradeStatus     : @{currentFirmwareVersion=5.3.42; firmwareUpdateDeadline=1/1/0001 12:00:00 AM; firmwareUpdateStatus=unavailable; lastFirmwareUpdate=4/1/2020 10:19:54 AM; pendingFirmwareVersion=}

Komunikat zawiera kilka przydatnych informacji, w tym następujące elementy:

• Adresy instalacji klienta — użyj tych adresów IP, gdy wszystko będzie gotowe do połączenia klientów z pamięcią podręczną. Przeczytaj artykuł Instalowanie usługi Azure HPC Cache , aby dowiedzieć się więcej.
• Stan uaktualnienia — po wydaniu aktualizacji oprogramowania ten komunikat ulega zmianie. Oprogramowanie pamięci podręcznej można uaktualnić ręcznie w dogodnym czasie lub jest stosowane automatycznie po kilku dniach.

Następne kroki

Po wyświetleniu pamięci podręcznej na liście Zasoby możesz przejść do następnego kroku.

• Zdefiniuj obiekty docelowe magazynu, aby zapewnić pamięci podręcznej dostęp do źródeł danych.
• Jeśli używasz kluczy szyfrowania zarządzanych przez klienta i musisz autoryzować szyfrowanie usługi Azure Key Vault ze strony przeglądu pamięci podręcznej w celu ukończenia konfiguracji pamięci podręcznej, postępuj zgodnie ze wskazówkami w temacie Korzystanie z kluczy szyfrowania zarządzanych przez klienta. Przed dodaniem magazynu należy wykonać ten krok.