config (SparkSession.Builder)

Define uma opção de configuração. Opções definidas usando esse método são automaticamente propagadas para a própria configuração de e SparkConfSparkSession.

Syntax

config(key=None, value=None, conf=None, *, map=None)

Parameters

Parâmetro Tipo Descrição
key str, opcional Uma cadeia de nomes de chave para uma propriedade de configuração.
value str, opcional Um valor para a propriedade de configuração.
conf SparkConf, opcional Uma instância de SparkConf.
map ditado, opcional Um dicionário de configurações a serem definidas.

Returns

SparkSession.Builder

Examples

# For an existing SparkConf, use the conf parameter.
from pyspark.conf import SparkConf
conf = SparkConf().setAppName("example").setMaster("local")
SparkSession.builder.config(conf=conf)

# For a (key, value) pair, you can omit the parameter names.
SparkSession.builder.config("spark.some.config.option", "some-value")

# Set multiple configurations.
SparkSession.builder.config(
    "spark.some.config.number", 123).config("spark.some.config.float", 0.123)

# Set multiple configurations using a dictionary.
SparkSession.builder.config(
    map={"spark.some.config.number": 123, "spark.some.config.float": 0.123})
  • Last updated on