2019년

pyspark 에러

위지원 2019. 2. 22. 14:48

Please check environment variables PYSPARK_PYTHON and PYSPARK_DRIVER_PYTHON are correctly set.


export PYSPARK_PYTHON=/usr/bin/python
export PYSPARK_DRIVER_PYTHON=/usr/bin/python

이 두가지를 spark-env.sh에 추가해준다.