Add-AzureHDInsightConfigValues
Fügt einer HDInsight-Clusterkonfiguration eine Hadoop-Konfigurationswertanpassung oder eine Anpassung der gemeinsam genutzten Hive-Bibliothek hinzu.
Hinweis
Die Cmdlets, auf die in dieser Dokumentation verwiesen wird, dienen zum Verwalten von Azure-Legacyressourcen, die Azure Dienst-Manager (ASM) APIs verwenden. Dieses ältere PowerShell-Modul wird beim Erstellen neuer Ressourcen nicht empfohlen, da ASM für den Ruhestand geplant ist. Weitere Informationen finden Sie unter Einstellung des Azure Service Manager.
Das Az PowerShell-Modul ist das empfohlene PowerShell-Modul zum Verwalten von Azure Resource Manager (ARM)-Ressourcen mit PowerShell.
Syntax
Add-AzureHDInsightConfigValues
-Config <AzureHDInsightConfig>
[-Core <Hashtable>]
[-Yarn <Hashtable>]
[-Hdfs <Hashtable>]
[-Hive <AzureHDInsightHiveConfiguration>]
[-MapReduce <AzureHDInsightMapReduceConfiguration>]
[-Oozie <AzureHDInsightOozieConfiguration>]
[-Storm <Hashtable>]
[-Spark <Hashtable>]
[-HBase <AzureHDInsightHBaseConfiguration>]
[-Profile <AzureSMProfile>]
[<CommonParameters>]
Beschreibung
Diese Version von Azure PowerShell HDInsight ist veraltet. Diese Cmdlets werden bis zum 1. Januar 2017 entfernt. Verwenden Sie die neuere Version von Azure PowerShell HDInsight.
Informationen zur Verwendung des neuen HDInsight zum Erstellen eines Clusters finden Sie unter Erstellen linuxbasierter Cluster in HDInsight mithilfe von Azure PowerShell. Informationen zum Übermitteln von Aufträgen mithilfe von Azure PowerShell und anderen Ansätzen finden Sie unter Submit Hadoop jobs in HDInsight. Referenzinformationen zu Azure PowerShell HDInsight finden Sie unter Azure HDInsight-Cmdlets.
Mit dem Cmdlet "Add-AzureHDInsightConfigValues " wird eine Hadoop-Konfigurationswertanpassung hinzugefügt, z. B. Core-site.xml oder Hive-site.xml, oder eine Anpassung einer gemeinsam genutzten Strukturbibliothek zu einer Azure HDInsight-Clusterkonfiguration.
Das Cmdlet fügt einem angegebenen Konfigurationsobjekt benutzerdefinierte Konfigurationswerte hinzu. Die benutzerdefinierten Einstellungen werden den Konfigurationsdateien der relevanten Hadoop-Dienste hinzugefügt, wenn der Cluster bereitgestellt wird.
Beispiele
Beispiel 1: Konfigurieren eines Clusters
PS C:\>$HiveConfigValues = New-Object 'Microsoft.WindowsAzure.Management.HDInsight.Cmdlet.DataObjects.AzureHDInsightHiveConfiguration'
PS C:\> $HiveConfigValues.Configuration = @{ hive.exec.compress.output = true }
PS C:\> $HiveConfigValues.AdditionalLibraries = New-Object 'Microsoft.WindowsAzure.Management.HDInsight.Cmdlet.DataObjects.AzureHDInsightDefaultStorageAccount'
PS C:\> $HiveConfigValues.AdditionalLibraries.StorageAccountName = "MyStorageAccount.blob.core.windows.net"
PS C:\> $HiveConfigValues.AdditionalLibraries.StorageAccountKey = (Get-AzureStorageKey -StorageAccountName "MyStorageAccount").Primary
PS C:\> $HiveConfigValues.AdditionalLibraries.StorageContainerName = "MySharedLibContainer"
PS C:\> $OozieConfigValues = New-Object 'Microsoft.WindowsAzure.Management.HDInsight.Cmdlet.DataObjects.AzureHDInsightOozieConfiguration'
PS C:\> $OozieConfigValues.Configuration = @{ hive.exec.compress.output = true }
PS C:\> $MapredConfigValues = New-Object 'Microsoft.WindowsAzure.Management.HDInsight.Cmdlet.DataObjects.AzureHDInsightMapReduceConfiguration'
PS C:\> $MapredConfigValues.Configuration = @{ mapred.map.max.attempts = 2 }
PS C:\> $MapredConfigValues.CapacitySchedulerConfiguration = @{ mapred.capacity-scheduler.init-poll-interval = 1000 }
PS C:\> $Config = New-AzureHDInsightClusterConfig -ClusterSizeInNodes 4
| Set-AzureHDInsightDefaultStorage -StorageAccountName MyStorageAccount.blob.core.windows.net -StorageAccountKey (Get-AzureStorageKey -StorageAccountName "MyStorageAccount").Primary -StorageContainerName "MyStorageContainer"
| Add-AzureHDInsightConfigValues -Core @{ io.file.buffer.size = 300000 } -MapReduce $MapredConfigValues -Hive $HiveConfigValues -Oozie $OozieConfigValues
PS C:\> $Config | New-AzureHDInsightCluster -Subscription $SubId -Credential $Creds -Name "MyCluster" -Location "North Europe"
Der erste Befehl erstellt ein neues AzureHDInsightHiveConfiguration-Objekt und speichert es dann in der $HiveConfigValues Variablen.
Die nächsten fünf Befehle erstellen Konfigurationswerte für Hive und speichern diese Werte als Elemente von $HiveConfigValues.
Der siebte Befehl erstellt ein AzureHDInsightOozieConfiguration-Objekt und speichert es dann in der $OozieConfigValues Variablen. Der achte Befehl erstellt einen Konfigurationswert für Oozie und speichert diese Werte dann als Mitglied von $OozieConfigValues.
Der neunte Befehl erstellt ein AzureHDInsightMapReduceConfiguration-Objekt und speichert es dann in der $MapredConfigValues Variablen. Die nächsten beiden Befehle erstellen Konfigurationswerte für MapReduce und speichern diese Werte als Elemente von $MapredConfigValues.
Der zwölfte Befehl verwendet das Cmdlet New-AzureHDInsightClusterConfig zum Erstellen einer HDInsight-Clusterkonfiguration und speichert ihn dann in der $Config Variablen. Der Befehl verwendet den Pipelineoperator, um $Config an das Cmdlet Set-AzureHDInsightDefaultStorage zu übergeben, um die Standardspeichereinstellung und das Add-AzureHDInsightConfigValues-Cmdlet zu aktualisieren, um die neuen Konfigurationswerte zur Clusterkonfiguration hinzuzufügen.
Der letzte Befehl verwendet den Pipelineoperator, um $Config an das New-AzureHDInsightCluster-Cmdlet zu übergeben, um einen neuen HDInsight-Cluster mit den angepassten Einstellungen zu erstellen.
Parameter
-Config
Gibt das Konfigurationsobjekt an, dem eine Hadoop-Konfiguration hinzugefügt werden soll.
Typ: | AzureHDInsightConfig |
Position: | Named |
Standardwert: | None |
Erforderlich: | True |
Pipelineeingabe akzeptieren: | True |
Platzhalterzeichen akzeptieren: | False |
-Core
Gibt einen Satz von Hadoop-Konfigurationswerten für Core-site.xml an.
Typ: | Hashtable |
Position: | Named |
Standardwert: | None |
Erforderlich: | False |
Pipelineeingabe akzeptieren: | False |
Platzhalterzeichen akzeptieren: | False |
-HBase
Gibt einen Satz von HBase-Konfigurationswerten für Hbase-site.xml an.
Typ: | AzureHDInsightHBaseConfiguration |
Position: | Named |
Standardwert: | None |
Erforderlich: | False |
Pipelineeingabe akzeptieren: | False |
Platzhalterzeichen akzeptieren: | False |
-Hdfs
Gibt einen Satz von Hadoop-Konfigurationswerten für Hdfs-site.xml an.
Typ: | Hashtable |
Position: | Named |
Standardwert: | None |
Erforderlich: | False |
Pipelineeingabe akzeptieren: | False |
Platzhalterzeichen akzeptieren: | False |
-Hive
Gibt ein Anpassungsobjekt für hadoop Hive-Dienst an, einschließlich einer Reihe von Hadoop-Konfigurationswerten für Hive-site.xml- und Hive-freigegebene Bibliotheken.
Typ: | AzureHDInsightHiveConfiguration |
Position: | Named |
Standardwert: | None |
Erforderlich: | False |
Pipelineeingabe akzeptieren: | False |
Platzhalterzeichen akzeptieren: | False |
-MapReduce
Gibt ein Anpassungsobjekt für MapReduce und den Kapazitätsplaner an.
Typ: | AzureHDInsightMapReduceConfiguration |
Position: | Named |
Standardwert: | None |
Erforderlich: | False |
Pipelineeingabe akzeptieren: | False |
Platzhalterzeichen akzeptieren: | False |
-Oozie
Gibt ein Anpassungsobjekt für Hadoop Oozie-Dienst an, einschließlich einer Reihe von Hadoop-Konfigurationswerten für Oozie-site.xml.
Typ: | AzureHDInsightOozieConfiguration |
Position: | Named |
Standardwert: | None |
Erforderlich: | False |
Pipelineeingabe akzeptieren: | False |
Platzhalterzeichen akzeptieren: | False |
-Profile
Gibt das Azure-Profil an, aus dem dieses Cmdlet liest. Wenn Sie kein Profil angeben, liest dieses Cmdlet aus dem lokalen Standardprofil.
Typ: | AzureSMProfile |
Position: | Named |
Standardwert: | None |
Erforderlich: | False |
Pipelineeingabe akzeptieren: | False |
Platzhalterzeichen akzeptieren: | False |
-Spark
Gibt ein Anpassungsobjekt für Apache Spark an.
Typ: | Hashtable |
Position: | Named |
Standardwert: | None |
Erforderlich: | False |
Pipelineeingabe akzeptieren: | False |
Platzhalterzeichen akzeptieren: | False |
-Storm
Gibt ein Anpassungsobjekt für Apache Storm an.
Typ: | Hashtable |
Position: | Named |
Standardwert: | None |
Erforderlich: | False |
Pipelineeingabe akzeptieren: | False |
Platzhalterzeichen akzeptieren: | False |
-Yarn
Gibt ein Anpassungsobjekt für Hadoop YARN an, wobei eine Reihe von benutzerdefinierten YARN-Konfigurationswerten für Yarn-site.xml angegeben wird.
Typ: | Hashtable |
Position: | Named |
Standardwert: | None |
Erforderlich: | False |
Pipelineeingabe akzeptieren: | False |
Platzhalterzeichen akzeptieren: | False |