Freigeben über


Add-AzureHDInsightConfigValues

Fügt einer HDInsight-Clusterkonfiguration eine Hadoop-Konfigurationswertanpassung oder eine Anpassung der gemeinsam genutzten Hive-Bibliothek hinzu.

Hinweis

Die Cmdlets, auf die in dieser Dokumentation verwiesen wird, dienen zum Verwalten von Azure-Legacyressourcen, die Azure Dienst-Manager (ASM) APIs verwenden. Dieses ältere PowerShell-Modul wird beim Erstellen neuer Ressourcen nicht empfohlen, da ASM für den Ruhestand geplant ist. Weitere Informationen finden Sie unter Einstellung des Azure Service Manager.

Das Az PowerShell-Modul ist das empfohlene PowerShell-Modul zum Verwalten von Azure Resource Manager (ARM)-Ressourcen mit PowerShell.

Syntax

Add-AzureHDInsightConfigValues
   -Config <AzureHDInsightConfig>
   [-Core <Hashtable>]
   [-Yarn <Hashtable>]
   [-Hdfs <Hashtable>]
   [-Hive <AzureHDInsightHiveConfiguration>]
   [-MapReduce <AzureHDInsightMapReduceConfiguration>]
   [-Oozie <AzureHDInsightOozieConfiguration>]
   [-Storm <Hashtable>]
   [-Spark <Hashtable>]
   [-HBase <AzureHDInsightHBaseConfiguration>]
   [-Profile <AzureSMProfile>]
   [<CommonParameters>]

Beschreibung

Diese Version von Azure PowerShell HDInsight ist veraltet. Diese Cmdlets werden bis zum 1. Januar 2017 entfernt. Verwenden Sie die neuere Version von Azure PowerShell HDInsight.

Informationen zur Verwendung des neuen HDInsight zum Erstellen eines Clusters finden Sie unter Erstellen linuxbasierter Cluster in HDInsight mithilfe von Azure PowerShell. Informationen zum Übermitteln von Aufträgen mithilfe von Azure PowerShell und anderen Ansätzen finden Sie unter Submit Hadoop jobs in HDInsight. Referenzinformationen zu Azure PowerShell HDInsight finden Sie unter Azure HDInsight-Cmdlets.

Mit dem Cmdlet "Add-AzureHDInsightConfigValues " wird eine Hadoop-Konfigurationswertanpassung hinzugefügt, z. B. Core-site.xml oder Hive-site.xml, oder eine Anpassung einer gemeinsam genutzten Strukturbibliothek zu einer Azure HDInsight-Clusterkonfiguration.

Das Cmdlet fügt einem angegebenen Konfigurationsobjekt benutzerdefinierte Konfigurationswerte hinzu. Die benutzerdefinierten Einstellungen werden den Konfigurationsdateien der relevanten Hadoop-Dienste hinzugefügt, wenn der Cluster bereitgestellt wird.

Beispiele

Beispiel 1: Konfigurieren eines Clusters

PS C:\>$HiveConfigValues = New-Object 'Microsoft.WindowsAzure.Management.HDInsight.Cmdlet.DataObjects.AzureHDInsightHiveConfiguration'
PS C:\> $HiveConfigValues.Configuration = @{ hive.exec.compress.output = true }
PS C:\> $HiveConfigValues.AdditionalLibraries = New-Object 'Microsoft.WindowsAzure.Management.HDInsight.Cmdlet.DataObjects.AzureHDInsightDefaultStorageAccount'
PS C:\> $HiveConfigValues.AdditionalLibraries.StorageAccountName = "MyStorageAccount.blob.core.windows.net"
PS C:\> $HiveConfigValues.AdditionalLibraries.StorageAccountKey = (Get-AzureStorageKey -StorageAccountName "MyStorageAccount").Primary
PS C:\> $HiveConfigValues.AdditionalLibraries.StorageContainerName = "MySharedLibContainer"
PS C:\> $OozieConfigValues = New-Object 'Microsoft.WindowsAzure.Management.HDInsight.Cmdlet.DataObjects.AzureHDInsightOozieConfiguration'
PS C:\> $OozieConfigValues.Configuration = @{ hive.exec.compress.output = true }
PS C:\> $MapredConfigValues = New-Object 'Microsoft.WindowsAzure.Management.HDInsight.Cmdlet.DataObjects.AzureHDInsightMapReduceConfiguration'
PS C:\> $MapredConfigValues.Configuration = @{ mapred.map.max.attempts = 2 }
PS C:\> $MapredConfigValues.CapacitySchedulerConfiguration = @{ mapred.capacity-scheduler.init-poll-interval = 1000 }
PS C:\> $Config = New-AzureHDInsightClusterConfig -ClusterSizeInNodes 4
    | Set-AzureHDInsightDefaultStorage -StorageAccountName MyStorageAccount.blob.core.windows.net -StorageAccountKey (Get-AzureStorageKey -StorageAccountName "MyStorageAccount").Primary -StorageContainerName "MyStorageContainer"
    | Add-AzureHDInsightConfigValues -Core @{ io.file.buffer.size = 300000 } -MapReduce $MapredConfigValues -Hive $HiveConfigValues -Oozie $OozieConfigValues
PS C:\> $Config | New-AzureHDInsightCluster -Subscription $SubId -Credential $Creds -Name "MyCluster" -Location "North Europe"

Der erste Befehl erstellt ein neues AzureHDInsightHiveConfiguration-Objekt und speichert es dann in der $HiveConfigValues Variablen.

Die nächsten fünf Befehle erstellen Konfigurationswerte für Hive und speichern diese Werte als Elemente von $HiveConfigValues.

Der siebte Befehl erstellt ein AzureHDInsightOozieConfiguration-Objekt und speichert es dann in der $OozieConfigValues Variablen. Der achte Befehl erstellt einen Konfigurationswert für Oozie und speichert diese Werte dann als Mitglied von $OozieConfigValues.

Der neunte Befehl erstellt ein AzureHDInsightMapReduceConfiguration-Objekt und speichert es dann in der $MapredConfigValues Variablen. Die nächsten beiden Befehle erstellen Konfigurationswerte für MapReduce und speichern diese Werte als Elemente von $MapredConfigValues.

Der zwölfte Befehl verwendet das Cmdlet New-AzureHDInsightClusterConfig zum Erstellen einer HDInsight-Clusterkonfiguration und speichert ihn dann in der $Config Variablen. Der Befehl verwendet den Pipelineoperator, um $Config an das Cmdlet Set-AzureHDInsightDefaultStorage zu übergeben, um die Standardspeichereinstellung und das Add-AzureHDInsightConfigValues-Cmdlet zu aktualisieren, um die neuen Konfigurationswerte zur Clusterkonfiguration hinzuzufügen.

Der letzte Befehl verwendet den Pipelineoperator, um $Config an das New-AzureHDInsightCluster-Cmdlet zu übergeben, um einen neuen HDInsight-Cluster mit den angepassten Einstellungen zu erstellen.

Parameter

-Config

Gibt das Konfigurationsobjekt an, dem eine Hadoop-Konfiguration hinzugefügt werden soll.

Typ:AzureHDInsightConfig
Position:Named
Standardwert:None
Erforderlich:True
Pipelineeingabe akzeptieren:True
Platzhalterzeichen akzeptieren:False

-Core

Gibt einen Satz von Hadoop-Konfigurationswerten für Core-site.xml an.

Typ:Hashtable
Position:Named
Standardwert:None
Erforderlich:False
Pipelineeingabe akzeptieren:False
Platzhalterzeichen akzeptieren:False

-HBase

Gibt einen Satz von HBase-Konfigurationswerten für Hbase-site.xml an.

Typ:AzureHDInsightHBaseConfiguration
Position:Named
Standardwert:None
Erforderlich:False
Pipelineeingabe akzeptieren:False
Platzhalterzeichen akzeptieren:False

-Hdfs

Gibt einen Satz von Hadoop-Konfigurationswerten für Hdfs-site.xml an.

Typ:Hashtable
Position:Named
Standardwert:None
Erforderlich:False
Pipelineeingabe akzeptieren:False
Platzhalterzeichen akzeptieren:False

-Hive

Gibt ein Anpassungsobjekt für hadoop Hive-Dienst an, einschließlich einer Reihe von Hadoop-Konfigurationswerten für Hive-site.xml- und Hive-freigegebene Bibliotheken.

Typ:AzureHDInsightHiveConfiguration
Position:Named
Standardwert:None
Erforderlich:False
Pipelineeingabe akzeptieren:False
Platzhalterzeichen akzeptieren:False

-MapReduce

Gibt ein Anpassungsobjekt für MapReduce und den Kapazitätsplaner an.

Typ:AzureHDInsightMapReduceConfiguration
Position:Named
Standardwert:None
Erforderlich:False
Pipelineeingabe akzeptieren:False
Platzhalterzeichen akzeptieren:False

-Oozie

Gibt ein Anpassungsobjekt für Hadoop Oozie-Dienst an, einschließlich einer Reihe von Hadoop-Konfigurationswerten für Oozie-site.xml.

Typ:AzureHDInsightOozieConfiguration
Position:Named
Standardwert:None
Erforderlich:False
Pipelineeingabe akzeptieren:False
Platzhalterzeichen akzeptieren:False

-Profile

Gibt das Azure-Profil an, aus dem dieses Cmdlet liest. Wenn Sie kein Profil angeben, liest dieses Cmdlet aus dem lokalen Standardprofil.

Typ:AzureSMProfile
Position:Named
Standardwert:None
Erforderlich:False
Pipelineeingabe akzeptieren:False
Platzhalterzeichen akzeptieren:False

-Spark

Gibt ein Anpassungsobjekt für Apache Spark an.

Typ:Hashtable
Position:Named
Standardwert:None
Erforderlich:False
Pipelineeingabe akzeptieren:False
Platzhalterzeichen akzeptieren:False

-Storm

Gibt ein Anpassungsobjekt für Apache Storm an.

Typ:Hashtable
Position:Named
Standardwert:None
Erforderlich:False
Pipelineeingabe akzeptieren:False
Platzhalterzeichen akzeptieren:False

-Yarn

Gibt ein Anpassungsobjekt für Hadoop YARN an, wobei eine Reihe von benutzerdefinierten YARN-Konfigurationswerten für Yarn-site.xml angegeben wird.

Typ:Hashtable
Position:Named
Standardwert:None
Erforderlich:False
Pipelineeingabe akzeptieren:False
Platzhalterzeichen akzeptieren:False