목록2019/07/31 (1)
khstar
Yarn Cluster로 Spark-submit 실행시 --deploy-mode 실행 확인
빅데이터 Spark 공부중입니다. Spark 애플레케이션(jar)을 만들어서 spark-submit으로 실행하는 것을 확인 중이었는데요. 우선 코드는 아래와 같습니다. 코드 출처는 빅데이터 분석을 위한 스파크2 프로그래밍 예제입니다. https://book.naver.com/bookdb/book_detail.nhn?bid=13483878 package com.wikibooks.spark.ch6; import kafka.serializer.StringDecoder; import org.apache.spark.SparkConf; import org.apache.spark.api.java.JavaSparkContext; import org.apache.spark.streaming.Durations; impor..
빅데이터
2019. 7. 31. 18:02