Notice
Recent Posts
Recent Comments
Link
| 일 | 월 | 화 | 수 | 목 | 금 | 토 |
|---|---|---|---|---|---|---|
| 1 | 2 | 3 | 4 | |||
| 5 | 6 | 7 | 8 | 9 | 10 | 11 |
| 12 | 13 | 14 | 15 | 16 | 17 | 18 |
| 19 | 20 | 21 | 22 | 23 | 24 | 25 |
| 26 | 27 | 28 | 29 | 30 | 31 |
Tags
- BFS
- 의사결정나무
- 알고리즘
- 데이터분석
- 오라클 데이터 처리방식
- Collaborative filtering
- CF
- Linux
- Spark Data Read
- airflow 정리
- 배깅
- 리눅스 환경변수
- eda
- Oracle 논리적 저장 구조
- Decision Tree
- Python
- git init
- SQL
- 추천시스템
- 네트워크
- git stash
- 앙상블
- Oracle ASSM
- 데이터 분석
- Spark jdbc parallel read
- 통계분석
- enq: FB - contention
- 랜덤포레스트
- Spark 튜닝
- git 기본명령어
Archives
- Today
- Total
목록스파크 로컬 (1)
[Alex] 데이터 장인의 블로그
Spark 프로그래밍 환경 구성 - 1. 로컬모드 설치
환경 OS: Ubuntu 18.04 Python: 3.6.9 사전 설치 필요 Java 설치 Spark JVM 기반인 Scala 로 만들어져 있음. JAVA 설치가 되어있어야함. Spark 설치 http://spark.apache.org/downloads Downloads | Apache Spark Download Apache Spark™ Choose a Spark release: Choose a package type: Download Spark: Verify this release using the and project release KEYS. Note that, Spark 2.x is pre-built with Scala 2.11 except version 2.4.2, which is pre-buil..
Hadoop & Spark
2021. 4. 22. 14:31