無效的 Spark 設定:
無效執行器心跳間隔
<networkTimeoutKey>=<networkTimeoutValue>ms 的值必須大於 <executorHeartbeatIntervalKey>=<executorHeartbeatIntervalValue>ms 的值。
執行者記憶體選項無效
<executorOptsKey> 不允許指定最大堆積記憶體設定 (是'<javaOpts>)。 請改用spark.executor.memory。
INVALID_EXECUTOR_SPARK_OPTIONS
<executorOptsKey> 不允許設定 Spark 選項 (是 '<javaOpts>)。 使用 ./bin/spark-submit 時,直接在SparkConf或屬性檔案中設定它們。
INVALID_MEMORY_FRACTION無效的記憶體比例
<memoryFractionKey> 應介於 0 到 1 之間(是 '<memoryFractionValue>)。
INVALID_PYTHON_WORKER_ENV_VAR_NAME
環境變數名稱 <name>, 設定在 <prefix>下 並不有效。 名稱必須符合模式 <pattern> ,且最多 <maxLength> 包含字元。
INVALID_PYTHON_WORKER_ENV_VAR_VALUE
環境變數 <name>的值 在 下設定 <prefix>,包含一個 NUL 字元,程序環境無法承載此字元。
INVALID_SPARK_SUBMIT_DEPLOY_MODE_KEY(無效的Spark提交部署模式鍵)
<sparkSubmitDeployModeKey> 只能是「叢集」或「用戶端」。
必須啟用網路驗證
啟用加密時,必須啟用 <networkAuthEnabledConf>。
PYTHON_WORKER_ENV_TOO_LARGE
環境變數設在總<prefix><size>位元組,超過最大<maxSize>位元組數。
PYTHON_WORKER_ENV_TOO_MANY_VARIABLES
<count> 環境變數設定在 <prefix>,超過最大值 <maxCount>。
RESERVED_PYTHON_WORKER_ENV_VAR_NAME
環境變數名稱 <name>, 在 下設定 <prefix>為 ,保留給 Spark。 以 開頭<reservedPrefixes>的名稱以及名稱 <reservedNames>是由 Spark 為其自身的 Python 工作者設定,且無法由 session 設定。