[Trouble Shooting] ERROR yarn.Client Application diagnostics message User application exited with status 1
에러 내용
> spark-submit --master yarn --deploy-mode cluster --num-executors 4 *.py
...
ERROR yarn.Client: Application diagnostics message: User application exited with status 1
Solution
해당 에러가 발생했을 시는 파이썬 코드를 한 번 더 확인해본다.
zepplin 이나 pyspark 에서 단위 모듈을 한 번씩 돌려 보며 에러를 확인하는 방법을 취한다.
본인은 python 파일에서 개행 시 함수 내부에 \ 붙여서 에러를 해결하였다.