본문 바로가기

Data_Analysis/Spark, Zeppelin9

[Zeppelin] Zepplelin 설치 및 실행 스파크로 데이터 분석할 때 유용한 툴인 Zepplin을 소개하고자 합니다. 이번 포스팅에서는 설치와 실행 관하여 다루고 이후 제플린 사용에 대해 이어서 쓸 예정입니다. 제플린에 대한 설명은 잘 정리된 글이 있어 참고하고, 본 포스팅에서는 설치 방법에 포커스를 둡니다. https://medium.com/apache-zeppelin-stories/%EC%98%A4%ED%94%88%EC%86%8C%EC%8A%A4-%EC%9D%BC%EA%B8%B0-2-apache-zeppelin-%EC%9D%B4%EB%9E%80-%EB%AC%B4%EC%97%87%EC%9D%B8%EA%B0%80-f3a520297938 오픈소스 일기 2: Apache Zeppelin 이란 무엇인가? 이번시간엔 필자가 Contribute하고 있는 .. 2020. 12. 20.
[Spark] Window 10에 Spark설치 인터넷을 찾아보면 가상 환경에 Spark 설치한 예시는 많은데 로컬에 설치한 예시는 많지 않아서 포스팅해봅니다. Spark설치를 위해서 python, java, scala, Winunit 등을 함께 설치해야 합니다. 또한, 하둡 없이 설치했습니다. 1. 프로그램 설치 1) Java, Python, Scala - 저는 Python과 Java가 미리 설치되어 있었습니다. java와 Python은 아래 경로로 접속하여 다운로드할 수 있습니다. 자세한 내용은 이미 다른 블로그에 잘 정리되어있어 생략합니다. - 다만 python 2 버전은 spark 지원하지 않는다고 하니, python은 버전 3 이상으로 받는 것이 좋습니다. - Spark의 메인 언어인 scala도 함께 설치합니다. 저는 Scala2.11버전으.. 2020. 12. 18.