본문 바로가기

IT/Spark

spark docker 에 설치하기(작성중)


https://github.com/P7h/docker-spark


디폴트는 /bin/bash 까지만 실행되는 예제만 있다. 터미널 형태이기에, 지속적으로 사용할 수 없다.




docker run -td --restart=always -p 4040:4040 -p 8888:8080 -p 8081:8081 --name=spark spark_master:latest
/usr/local/spark-2.2.0-bin-hadoop2.7/sbin


docker run -td --restart=always -p 4040:4040 -p 8888:8080 -p 8081:8081 --name=spark spark_master:latest



docker run -d -p 4040:4040 -p 8888:8080 -p 8081:8081 -h spark --name=spark p7hb/docker-spark /usr/local/spark-2.2.0-bin-hadoop2.7/sbin/start-master.sh
start


docker build --tag spark_master .




'IT > Spark' 카테고리의 다른 글

RDD Transformation #2  (0) 2017.12.15
RDD Transformation #1  (0) 2017.12.14
RDD 정리  (0) 2017.12.08
Practice using the results "jar" in Spark  (0) 2017.11.28
Reading before learning Spark  (0) 2017.11.22