목록2019/07/05 (1)
khstar
pysqark실행중 psutil 메세지 처리(Mac OSX에 psutil 설치하기)
빅데이터 분석을 위한 스파크2 프로그래밍 책으로 Spark를 공부중입니다. 예제를 따라하던중 pyspark로 wordcount 테스트 중에 UserWarning: Please install psutil to have better support with spilling 이라는 메시지가 나옵니다. 뭐 내용상 psutil을 설치해 달라는 얘기입니다. 저는 우선 Mac OSX에서 테스트 중이라 Mac에 설치하는 방법을 알아봤습니다. https://pypi.org/project/psutil/#files 에서 가장 아래있는 psutil-5.6.3.tar.gz 파일을 다운로드 받았습니다. 다운로드 받고 압축을 해제한 폴더를 응용프로그램(/Applications)하위로 이동시키고 /Applications/psutil-..
빅데이터
2019. 7. 5. 17:25