[Trouble Shooting] output.properties data exceeds its limit

에러 내용


output.properties data exceeds its limit



Solution


해당 에러 메시지는 하기 URL 과 같이 조치 하였다.

https://community.cloudera.com/t5/Support-Questions/Oozie-Shell-action-Output-data-exceeds-its-limit-2048/m-p/235817


그러나 1024*32 까지 줘도 동일한 문제가 발생하여 다른 부분에 문제가 없는지 확인하였다.


원인은 tee 구문이었다.

tee 명령어는, 명령어의 출력 결과를 파일과 화면에 동시에 출력할 수 있도록 해주는 명령어이며, 해당 Sqoop 작업의 출력들이 화면에 동시에 나오므로 나오는 에러였다.