Error
- pyspark를 jupyter notebook으로 사용을 하기 위해 환경변수 설정을 해주었고 다시 되돌리기 위해 환경변수를 제거 했지만 그대로 jupyter notebook으로 돌아감
결국 고치려다 다음과 같이 환경변수를 설정해줬지만 에러가 발생
1 2 3 4
#export PYSPARK_DRIVER_PYTHON=jupyter #export PYSPARK_DRIVER_PYTHON_OPTS=notebook export PYSPARK_DRIVER_PYTHON=python3 export PYSPARK_DRIVER_PYTHON_OPTS=python3
Error 해결
.bashrc
에서 두 줄을 주석처리 하였지만 env 명령어로 환경변수를 확인했을 때 그대로 남아 있었다.1 2
#export PYSPARK_DRIVER_PYTHON=jupyter #export PYSPARK_DRIVER_PYTHON_OPTS=notebook
- 계정을 나갔다 들어오거나 재부팅을 하면 환경변수가 사라진 것을 볼 수 있다.
- 위에서 난 에러는 쓸데 없이 python3를 붙여줘서 난 에러이다.