zeppelin

📊 Data/Engineering

[Zeppelin / Spark] ubuntu 환경에서 Apache Zeppelin / Spark 설치하기

2023.06.20 (Mon) 학습정리 #Zeppelin #Spark 이전글에서 spark, zeppelin을 docker로 설치하여 간단히 활용해봤는데, 이번에는 hdfs와의 연동을 위해 로컬 (ubuntu) 환경에서 설치하고자 함 1. Zeppelin 설치 🔗 공식 설치 문서 설치 파일 다운 및 압축 해제 cd tmp # 임시파일로 이동 후 설치파일 다운로드 wget https://dlcdn.apache.org/zeppelin/zeppelin-0.10.1/zeppelin-0.10.1-bin-all.tgz tar zxvf zeppelin-0.10.1-bin-all.tgz # 압축 해제 및 설치 진행 mv zeppelin-0.10.1-bin-al /home/app/ # 경로 이동 (참고) path 설정 ..

📊 Data/Engineering

[Spark] Spark, Zeppelin Notebook 사용하기

2023-06-05 (MON) 학습정리 #Hadoop #Hive #Zeppelin #Spark 1. Spark 정의 데이터 분석 작업의 개발을 단순화하여 효율성을 높이는 오픈소스 프레임워크 Spark SQL, 실시간 데이터 처리를 지원하는 Spark Streaming, ML 기법을 지원하는 Spark MLib 등의 라이브러리 지원 2. Spark 개요 2-1. spark 설치 (with. docker) 8080 port는 중복되어 18080으로 변경 후 설치 진행함 docker run -p 18080:8080 --name zeppelin apache/zeppelin:0.10.0 2-2. zeppelin notebook 파일 업로드 및 이동 docker cp 로컬경로/파일명 zeppelin:/opt/zep..

subeen_byul
'zeppelin' 태그의 글 목록