| 일 | 월 | 화 | 수 | 목 | 금 | 토 |
|---|---|---|---|---|---|---|
| 1 | 2 | 3 | 4 | |||
| 5 | 6 | 7 | 8 | 9 | 10 | 11 |
| 12 | 13 | 14 | 15 | 16 | 17 | 18 |
| 19 | 20 | 21 | 22 | 23 | 24 | 25 |
| 26 | 27 | 28 | 29 | 30 | 31 |
- 카카오
- JavaScript
- Sort
- 스프링 핵심원리
- 오블완
- 카카오 면접
- 클린아키텍처
- 스프링핵심원리
- ElasticSearch
- 티스토리챌린지
- effectivejava
- 알고리즘정렬
- 김영한
- Effective Java 3
- 이차전지관련주
- java
- 알고리즘
- Effective Java
- 엘라스틱서치
- 스프링부트
- 자바
- Spring
- 예제로 배우는 스프링 입문
- 이펙티브 자바
- 코딩테스트
- 이펙티브자바
- kubernetes
- 스프링
- k8s
- 자바스크립트
- Today
- Total
목록개발/Spark (2)
Kim-Baek 개발자 이야기
Spark 란? Spark 구조 & 동작 과정
오늘 Apach Spark 에 대해서 공부해보려고 합니다. Apach Spark 는 In memory 방식의 대용량 데이처 처리 엔진입니다 Java, Scala, Python, R 과 같은 high level API 를 제공하고 있고, 특히 Spark SQL 같은 SQL을 위한 다양한 라이브러리를 제공하고 있습니다. 분산 클러스터 컴퓨팅 프레임워크로 Standalone 환경 뿐만 아니라 Cluster mode를 통해 대용량 데이터 처리가 가능합니다 특징 스파크는 인메모리 (In Memory) 기반 처리로 빠른 처리가 가능하며 Cluster Manger를 활용해 분산환경에서도 처리가 가능합니다. YARN, Mesos, Kubernetes 등 다양한 클러스터에서 동작이 가능합니다 기존 대용량 처리 프레임워크..
[Spark] Spark 3.0 공식 버전 Release
2020-06-10 spark 3.0.0 이 정식 Release 됐다. https://spark.apache.org/releases/spark-release-3-0-0.html Spark Release 3.0.0 | Apache Spark Spark Release 3.0.0 Apache Spark 3.0.0 is the first release of the 3.x line. The vote passed on the 10th of June, 2020. This release is based on git tag v3.0.0 which includes all commits up to June 10. Apache Spark 3.0 builds on many of the innovations fro spark.a..