Log4J (1) 썸네일형 리스트형 [log4j2] log4j2 설정법 및 spark operator 연동 (feat. datahub 로깅) 데이터허브를 spark에 연동하면 데이터허브 로그가 추가로 발생하게 되는데 이 로그의 양이 spark로그 보다 많게 느껴지는 경우가 많다.로깅 레벨에 대해서 데이터허브를 찾아보면 log4j.properties 파일에 log4j.logger.datahub.spark=DEBUGlog4j.logger.datahub.client.rest=DEBUG 를 추가해서 디버깅하는 법이 나와있다. 근데 현재 사용하는 스파크 버전에서는 log4j 가 아니고 log4j2를 사용하고 있어서 뭔가 애매한 상황이었다. 여러가지 시도를 하다가 위 구문을 log4j2 형식에 맞게 변형하면 사용이 가능하고, 그 외에도 원하는 패키지의 로그 레벨을 자유롭게 지정이 가능하다는 걸 알게 됐다. * log4j2.properties 생성 .. 이전 1 다음