New-AzHDInsightStreamingMapReduceJobDefinition
Cria um objeto de trabalho Streaming MapReduce.
Sintaxe
Default (Predefinição)
New-AzHDInsightStreamingMapReduceJobDefinition
[-Arguments <String[]>]
[-File <String>]
[-Files <String[]>]
[-StatusFolder <String>]
[-CommandEnvironment <Hashtable>]
[-Defines <Hashtable>]
-InputPath <String>
[-Mapper <String>]
[-OutputPath <String>]
[-Reducer <String>]
[-DefaultProfile <IAzureContextContainer>]
[<CommonParameters>]
Descrição
O cmdlet New-AzHDInsightStreamingMapReduceJobDefinition define um objeto de trabalho Streaming MapReduce para utilização com um cluster Azure HDInsight.
Exemplos
Exemplo 1: Criar uma definição de tarefa Streaming MapReduce
# Cluster info
$clusterName = "your-hadoop-001"
$clusterCreds = Get-Credential
# Streaming MapReduce job details
$statusFolder = "tempStatusFolder/"
$query = "SHOW TABLES"
New-AzHDInsightStreamingMapReduceJobDefinition -StatusFolder $statusFolder -File $query `
| Start-AzHDInsightJob `
-ClusterName $clusterName `
-ClusterCredential $clusterCreds
Este comando cria uma definição de tarefa Streaming MapReduce.
Parâmetros
-Arguments
Especifica uma matriz de argumentos para o trabalho.
Os argumentos são passados como argumentos de linha de comando para cada tarefa.
Propriedades dos parâmetros
Tipo: String [ ]
Valor predefinido: None Suporta carateres universais: False NãoMostrar: False
Conjuntos de parâmetros
(All)
Posto: Named Obrigatório: False Valor do pipeline: False Valor do pipeline por nome de propriedade: False Valor dos restantes argumentos: False
-CommandEnvironment
Especifica uma matriz de variáveis de ambiente de linha de comando para definir quando um trabalho é executado em nós de trabalho.
Propriedades dos parâmetros
Tipo: Hashtable
Valor predefinido: None Suporta carateres universais: False NãoMostrar: False
Conjuntos de parâmetros
(All)
Posto: Named Obrigatório: False Valor do pipeline: False Valor do pipeline por nome de propriedade: False Valor dos restantes argumentos: False
-DefaultProfile
As credenciais, a conta, o locatário e a assinatura usados para comunicação com o azure
Propriedades dos parâmetros
Tipo: IAzureContextContainer
Valor predefinido: None Suporta carateres universais: False NãoMostrar: False Aliases: AzContext, AzureRmContext, AzureCredential
Conjuntos de parâmetros
(All)
Posto: Named Obrigatório: False Valor do pipeline: False Valor do pipeline por nome de propriedade: False Valor dos restantes argumentos: False
-Defines
Especifica os valores de configuração do Hadoop a serem definidos para quando o trabalho for executado.
Propriedades dos parâmetros
Tipo: Hashtable
Valor predefinido: None Suporta carateres universais: False NãoMostrar: False
Conjuntos de parâmetros
(All)
Posto: Named Obrigatório: False Valor do pipeline: False Valor do pipeline por nome de propriedade: False Valor dos restantes argumentos: False
-File
Especifica o caminho para um arquivo que contém uma consulta a ser executada.
Você pode usar esse parâmetro em vez do parâmetro Query .
Propriedades dos parâmetros
Tipo: String
Valor predefinido: None Suporta carateres universais: False NãoMostrar: False
Conjuntos de parâmetros
(All)
Posto: Named Obrigatório: False Valor do pipeline: False Valor do pipeline por nome de propriedade: False Valor dos restantes argumentos: False
-Files
Especifica uma coleção de arquivos associados a um trabalho do Hive.
Propriedades dos parâmetros
Tipo: String [ ]
Valor predefinido: None Suporta carateres universais: False NãoMostrar: False
Conjuntos de parâmetros
(All)
Posto: Named Obrigatório: False Valor do pipeline: False Valor do pipeline por nome de propriedade: False Valor dos restantes argumentos: False
Especifica o caminho para os arquivos de entrada.
Tipo: String
Valor predefinido: None Suporta carateres universais: False NãoMostrar: False
(All)
Posto: Named Obrigatório: True Valor do pipeline: False Valor do pipeline por nome de propriedade: False Valor dos restantes argumentos: False
-Mapper
Especifica um nome de arquivo do Mapeador.
Propriedades dos parâmetros
Tipo: String
Valor predefinido: None Suporta carateres universais: False NãoMostrar: False
Conjuntos de parâmetros
(All)
Posto: Named Obrigatório: False Valor do pipeline: False Valor do pipeline por nome de propriedade: False Valor dos restantes argumentos: False
-OutputPath
Especifica o caminho para a saída do trabalho.
Propriedades dos parâmetros
Tipo: String
Valor predefinido: None Suporta carateres universais: False NãoMostrar: False
Conjuntos de parâmetros
(All)
Posto: Named Obrigatório: False Valor do pipeline: False Valor do pipeline por nome de propriedade: False Valor dos restantes argumentos: False
-Reducer
Especifica um nome de arquivo Reducer.
Propriedades dos parâmetros
Tipo: String
Valor predefinido: None Suporta carateres universais: False NãoMostrar: False
Conjuntos de parâmetros
(All)
Posto: Named Obrigatório: False Valor do pipeline: False Valor do pipeline por nome de propriedade: False Valor dos restantes argumentos: False
-StatusFolder
Especifica o local da pasta que contém saídas padrão e saídas de erro para um trabalho.
Propriedades dos parâmetros
Tipo: String
Valor predefinido: None Suporta carateres universais: False NãoMostrar: False
Conjuntos de parâmetros
(All)
Posto: Named Obrigatório: False Valor do pipeline: False Valor do pipeline por nome de propriedade: False Valor dos restantes argumentos: False
CommonParameters
Este cmdlet suporta os parâmetros comuns: -Debug, -ErrorAction, -ErrorVariable, -InformationAction, -InformationVariable, -OutBuffer, -OutVariable, -PipelineVariable, -ProgressAction, -Verbose, -WarningAction e -WarningVariable. Para obter mais informações, consulte about_CommonParameters .
None
Saídas
