Add-AzureHDInsightConfigValues
Fügt einer HDInsight-Clusterkonfiguration eine Hadoop-Konfigurationswertanpassung oder eine Anpassung der gemeinsam genutzten Hive-Bibliothek hinzu.
Hinweis
Die Cmdlets, auf die in dieser Dokumentation verwiesen wird, dienen zum Verwalten von Azure-Legacyressourcen, die Dienstverwaltungs-APIs verwenden. Cmdlets zum Verwalten von Azure Ressource Manager-Ressourcen finden Sie im Az PowerShell-Modul.
Syntax
Add-AzureHDInsightConfigValues
-Config <AzureHDInsightConfig>
[-Core <Hashtable>]
[-Yarn <Hashtable>]
[-Hdfs <Hashtable>]
[-Hive <AzureHDInsightHiveConfiguration>]
[-MapReduce <AzureHDInsightMapReduceConfiguration>]
[-Oozie <AzureHDInsightOozieConfiguration>]
[-Storm <Hashtable>]
[-Spark <Hashtable>]
[-HBase <AzureHDInsightHBaseConfiguration>]
[-Profile <AzureSMProfile>]
[<CommonParameters>] Beschreibung
Diese Version von Azure PowerShell HDInsight ist veraltet. Diese Cmdlets werden bis zum 1. Januar 2017 entfernt. Verwenden Sie die neuere Version von Azure PowerShell HDInsight.
Informationen zur Verwendung des neuen HDInsight zum Erstellen eines Clusters finden Sie unter Erstellen linuxbasierter Cluster in HDInsight mithilfe von Azure PowerShell. Informationen zum Übermitteln von Aufträgen mithilfe von Azure PowerShell und anderen Ansätzen finden Sie unter Submit Hadoop jobs in HDInsight. Referenzinformationen zu Azure PowerShell HDInsight finden Sie unter Azure HDInsight-Cmdlets.
Das Cmdlet "Add-AzureHDInsightConfigValues " fügt eine Hadoop-Konfigurationswertanpassung hinzu, z. B. Core-site.xml oder Hive-site.xml oder eine Anpassung einer gemeinsam genutzten Hive-Bibliothek zu einer Azure HDInsight-Clusterkonfiguration.
Das Cmdlet fügt einem angegebenen Konfigurationsobjekt benutzerdefinierte Konfigurationswerte hinzu. Die benutzerdefinierten Einstellungen werden den Konfigurationsdateien der relevanten Hadoop-Dienste hinzugefügt, wenn der Cluster bereitgestellt wird.
Beispiele
Beispiel 1: Konfigurieren eines Clusters
PS C:\>$HiveConfigValues = New-Object 'Microsoft.WindowsAzure.Management.HDInsight.Cmdlet.DataObjects.AzureHDInsightHiveConfiguration'
PS C:\> $HiveConfigValues.Configuration = @{ hive.exec.compress.output = true }
PS C:\> $HiveConfigValues.AdditionalLibraries = New-Object 'Microsoft.WindowsAzure.Management.HDInsight.Cmdlet.DataObjects.AzureHDInsightDefaultStorageAccount'
PS C:\> $HiveConfigValues.AdditionalLibraries.StorageAccountName = "MyStorageAccount.blob.core.windows.net"
PS C:\> $HiveConfigValues.AdditionalLibraries.StorageAccountKey = (Get-AzureStorageKey -StorageAccountName "MyStorageAccount").Primary
PS C:\> $HiveConfigValues.AdditionalLibraries.StorageContainerName = "MySharedLibContainer"
PS C:\> $OozieConfigValues = New-Object 'Microsoft.WindowsAzure.Management.HDInsight.Cmdlet.DataObjects.AzureHDInsightOozieConfiguration'
PS C:\> $OozieConfigValues.Configuration = @{ hive.exec.compress.output = true }
PS C:\> $MapredConfigValues = New-Object 'Microsoft.WindowsAzure.Management.HDInsight.Cmdlet.DataObjects.AzureHDInsightMapReduceConfiguration'
PS C:\> $MapredConfigValues.Configuration = @{ mapred.map.max.attempts = 2 }
PS C:\> $MapredConfigValues.CapacitySchedulerConfiguration = @{ mapred.capacity-scheduler.init-poll-interval = 1000 }
PS C:\> $Config = New-AzureHDInsightClusterConfig -ClusterSizeInNodes 4
| Set-AzureHDInsightDefaultStorage -StorageAccountName MyStorageAccount.blob.core.windows.net -StorageAccountKey (Get-AzureStorageKey -StorageAccountName "MyStorageAccount").Primary -StorageContainerName "MyStorageContainer"
| Add-AzureHDInsightConfigValues -Core @{ io.file.buffer.size = 300000 } -MapReduce $MapredConfigValues -Hive $HiveConfigValues -Oozie $OozieConfigValues
PS C:\> $Config | New-AzureHDInsightCluster -Subscription $SubId -Credential $Creds -Name "MyCluster" -Location "North Europe"Der erste Befehl erstellt ein neues AzureHDInsightHiveConfiguration-Objekt und speichert es dann in der $HiveConfigValues Variablen.
Die nächsten fünf Befehle erstellen Konfigurationswerte für Hive und speichern diese Werte als Elemente von $HiveConfigValues.
Der siebte Befehl erstellt ein AzureHDInsightOozieConfiguration-Objekt und speichert es dann in der $OozieConfigValues Variablen. Der achte Befehl erstellt einen Konfigurationswert für Oozie und speichert diese Werte dann als Mitglied von $OozieConfigValues.
Der neunte Befehl erstellt ein AzureHDInsightMapReduceConfiguration-Objekt und speichert es dann in der $MapredConfigValues Variablen. Die nächsten beiden Befehle erstellen Konfigurationswerte für MapReduce und speichern diese Werte als Elemente von $MapredConfigValues.
Der zwölfte Befehl verwendet das Cmdlet New-AzureHDInsightClusterConfig zum Erstellen einer HDInsight-Clusterkonfiguration und speichert ihn dann in der $Config Variablen. Der Befehl verwendet den Pipelineoperator, um $Config an das Cmdlet Set-AzureHDInsightDefaultStorage zu übergeben, um die Standardspeichereinstellung und das Add-AzureHDInsightConfigValues-Cmdlet zu aktualisieren, um die neuen Konfigurationswerte zur Clusterkonfiguration hinzuzufügen.
Der letzte Befehl verwendet den Pipelineoperator, um $Config an das New-AzureHDInsightCluster-Cmdlet zu übergeben, um einen neuen HDInsight-Cluster mit den angepassten Einstellungen zu erstellen.
Parameter
-Config
Gibt das Konfigurationsobjekt an, dem eine Hadoop-Konfiguration hinzugefügt werden soll.
| Type: | AzureHDInsightConfig |
| Position: | Named |
| Default value: | None |
| Required: | True |
| Accept pipeline input: | True |
| Accept wildcard characters: | False |
-Core
Gibt einen Satz von Hadoop-Konfigurationswerten für Core-site.xml an.
| Type: | Hashtable |
| Position: | Named |
| Default value: | None |
| Required: | False |
| Accept pipeline input: | False |
| Accept wildcard characters: | False |
-HBase
Gibt einen Satz von HBase-Konfigurationswerten für Hbase-site.xml an.
| Type: | AzureHDInsightHBaseConfiguration |
| Position: | Named |
| Default value: | None |
| Required: | False |
| Accept pipeline input: | False |
| Accept wildcard characters: | False |
-Hdfs
Gibt einen Satz von Hadoop-Konfigurationswerten für Hdfs-site.xml an.
| Type: | Hashtable |
| Position: | Named |
| Default value: | None |
| Required: | False |
| Accept pipeline input: | False |
| Accept wildcard characters: | False |
-Hive
Gibt ein Anpassungsobjekt für hadoop Hive-Dienst an, einschließlich einer Reihe von Hadoop-Konfigurationswerten für hive-site.xml und hive freigegebene Bibliotheken.
| Type: | AzureHDInsightHiveConfiguration |
| Position: | Named |
| Default value: | None |
| Required: | False |
| Accept pipeline input: | False |
| Accept wildcard characters: | False |
-MapReduce
Gibt ein Anpassungsobjekt für MapReduce und den Kapazitätsplaner an.
| Type: | AzureHDInsightMapReduceConfiguration |
| Position: | Named |
| Default value: | None |
| Required: | False |
| Accept pipeline input: | False |
| Accept wildcard characters: | False |
-Oozie
Gibt ein Anpassungsobjekt für Hadoop Oozie-Dienst an, einschließlich einer Reihe von Hadoop-Konfigurationswerten für Oozie-site.xml.
| Type: | AzureHDInsightOozieConfiguration |
| Position: | Named |
| Default value: | None |
| Required: | False |
| Accept pipeline input: | False |
| Accept wildcard characters: | False |
-Profile
Gibt das Azure-Profil an, aus dem dieses Cmdlet liest. Wenn Sie kein Profil angeben, liest dieses Cmdlet aus dem lokalen Standardprofil.
| Type: | AzureSMProfile |
| Position: | Named |
| Default value: | None |
| Required: | False |
| Accept pipeline input: | False |
| Accept wildcard characters: | False |
-Spark
Gibt ein Anpassungsobjekt für Apache Spark an.
| Type: | Hashtable |
| Position: | Named |
| Default value: | None |
| Required: | False |
| Accept pipeline input: | False |
| Accept wildcard characters: | False |
-Storm
Gibt ein Anpassungsobjekt für Apache Storm an.
| Type: | Hashtable |
| Position: | Named |
| Default value: | None |
| Required: | False |
| Accept pipeline input: | False |
| Accept wildcard characters: | False |
-Yarn
Gibt ein Anpassungsobjekt für Hadoop YARN an und gibt einen Satz angepasster YARN-Konfigurationswerte für Yarn-site.xml an.
| Type: | Hashtable |
| Position: | Named |
| Default value: | None |
| Required: | False |
| Accept pipeline input: | False |
| Accept wildcard characters: | False |