Есть ли недостатки в размещении кода в пользовательские формы вместо модулей?

Я столкнулся с тем же сообщением об ошибке, и я попробовал три способа, упомянутые выше. Я перечислил результаты как дополнительную ссылку на другие.

1. Измените значение PYTHON_SPARK и PYTHON_DRIVER_SPARK в spark-env.sh для меня не работает.
2. Измените значение внутри скрипта python с использованием os.environ["PYSPARK_PYTHON"]="/usr/bin/python3.5" os.environ["PYSPARK_DRIVER_PYTHON"]="/usr/bin/python3.5" не работает для меня.
3. Изменить значение в ~/.bashrc работает как заклинание ~