INVALID_SPARK_CONFIG錯誤狀態

SQLSTATE:42616

無效的 Spark 設定:

無效執行器心跳間隔

<networkTimeoutKey>=<networkTimeoutValue>ms 的值必須大於 <executorHeartbeatIntervalKey>=<executorHeartbeatIntervalValue>ms 的值。

執行者記憶體選項無效

<executorOptsKey> 不允許指定最大堆積記憶體設定 (是'<javaOpts>)。 請改用spark.executor.memory。

INVALID_EXECUTOR_SPARK_OPTIONS

<executorOptsKey> 不允許設定 Spark 選項 (是 '<javaOpts>)。 使用 ./bin/spark-submit 時,直接在SparkConf或屬性檔案中設定它們。

INVALID_MEMORY_FRACTION無效的記憶體比例

<memoryFractionKey> 應介於 0 到 1 之間(是 '<memoryFractionValue>)。

INVALID_PYTHON_WORKER_ENV_VAR_NAME

環境變數名稱 <name>, 設定在 <prefix>下 並不有效。 名稱必須符合模式 <pattern> ,且最多 <maxLength> 包含字元。

INVALID_PYTHON_WORKER_ENV_VAR_VALUE

環境變數 <name>的值 在 下設定 <prefix>,包含一個 NUL 字元,程序環境無法承載此字元。

INVALID_SPARK_SUBMIT_DEPLOY_MODE_KEY(無效的Spark提交部署模式鍵)

<sparkSubmitDeployModeKey> 只能是「叢集」或「用戶端」。

必須啟用網路驗證

啟用加密時,必須啟用 <networkAuthEnabledConf>。

PYTHON_WORKER_ENV_TOO_LARGE

環境變數設在總<prefix><size>位元組,超過最大<maxSize>位元組數。

PYTHON_WORKER_ENV_TOO_MANY_VARIABLES

<count> 環境變數設定在 <prefix>,超過最大值 <maxCount>。

RESERVED_PYTHON_WORKER_ENV_VAR_NAME

環境變數名稱 <name>, 在 下設定 <prefix>為 ,保留給 Spark。 以 開頭<reservedPrefixes>的名稱以及名稱 <reservedNames>是由 Spark 為其自身的 Python 工作者設定,且無法由 session 設定。