condition d'erreur INVALID_SPARK_CONFIG

SQLSTATE : 42616

Configuration Spark non valide :

INVALID_EXECUTOR_HEARTBEAT_INTERVAL

La valeur de <networkTimeoutKey>=<networkTimeoutValue>ms doit être supérieure à la valeur de <executorHeartbeatIntervalKey>=<executorHeartbeatIntervalValue>ms.

INVALID_EXECUTOR_MEMORY_OPTIONS

<executorOptsKey> n'est pas autorisé à spécifier le nombre maximal de paramètres de mémoire du tas (auparavant « <javaOpts> »). Utilisez spark.executor.memory à la place.

INVALID_EXECUTOR_SPARK_OPTIONS

<executorOptsKey> n'est pas autorisé à définir les options Spark (auparavant « <javaOpts> »). Définissez-les directement dans SparkConf ou dans un fichier de propriétés lorsque vous utilisez ./bin/spark-submit.

INVALID_MEMORY_FRACTION

<memoryFractionKey> doit être entre 0 et 1 (était « <memoryFractionValue> »).

INVALID_PYTHON_WORKER_ENV_VAR_NAME

Le nom de la variable d’environnement <name>, défini sous <prefix>, n’est pas valide. Les noms doivent correspondre au motif <pattern> et contenir au maximum <maxLength> caractères.

INVALID_PYTHON_WORKER_ENV_VAR_VALUE

La valeur de la variable d’environnement <name>, définie sous <prefix>, contient un caractère NUL, qu’un environnement de processus ne peut pas contenir.

INVALID_SPARK_SUBMIT_DEPLOY_MODE_KEY

<sparkSubmitDeployModeKey> ne peut être que « cluster » ou « client ».

NETWORK_AUTH_MUST_BE_ENABLED

<networkAuthEnabledConf> doit être activé quand le chiffrement est activé.

PYTHON_WORKER_ENV_TOO_LARGE

Les variables d’environnement définies sous <prefix> totalisent <size> octets, ce qui est supérieur au maximum de <maxSize> octets.

PYTHON_WORKER_ENV_TOO_MANY_VARIABLES

<count> Les variables d’environnement sont définies dans <prefix>, soit plus que le maximum de <maxCount>.

RESERVED_PYTHON_WORKER_ENV_VAR_NAME

Le nom de la variable d’environnement <name>, défini sous <prefix>, est réservé à Spark. Les noms commençant par <reservedPrefixes>, et les noms <reservedNames>, sont définis par Spark pour ses propres travailleurs Python et ne peuvent pas être définis par une session.