Versions Compared

Key

  • This line was added.
  • This line was removed.
  • Formatting was changed.

...

  • allon 이 제대로 실행되었다면, http://master-node-ip:8080http://master-node-ip:9870 에서 Spark와 Hadoop의 WebUI를 볼 수 있음.
    여기까지 설정이 끝났으면, spark-submit 을 이용한 script 실행이 가능함. Jupyter Notebook을 이용한 interacitve shell mode를 이용하려면, 아래 설명한 추가 설정이 필요함. 

    SparkUI


    HadoopUI



  • 여기까지 설정이 끝났으면, spark-submit 을 이용한 script 실행이 가능함. 



...


Introduction to Apache Spark

...