Поскольку у меня есть эта проблема в моем ноутбуке ipython3, я думаю, что мне нужно как-то изменить «spark-env.sh.template».

Исключение: Python в рабочем имеет версию 2.7, отличную от той, что в драйвере 3.4, PySpark не может работать с другими второстепенными версиями.