[Kafka] Apache Kafka Consumer Group
컨슈머 그룹을 사용하는 이유와 파티션 수의 관계
Posted by
Wonyong Jang
on July 10, 2021 ·
9 mins read
[Spark] Broadcast, Accumulator 공유변수
broadcast, accumulator, closure
Posted by
Wonyong Jang
on July 08, 2021 ·
4 mins read
[Spark] How to override a spark dependency in cluster mode(AWS EMR)
라이브러리 버전 충돌이 발생할 때 shadowJar를 사용하여 package relocate
Posted by
Wonyong Jang
on July 08, 2021 ·
5 mins read
[Scala] 동시성을 위한 Future
Concurrency / Await.ready 와 Await.result 차이
Posted by
Wonyong Jang
on July 07, 2021 ·
9 mins read
[ELK] ElasticSearch에서 text 타입과 keyword 타입 차이
fielddata, doc_values 에 대한 이해와 주의사항 / keyword 필드 검색시 주의사항 및 normalizer 적용
Posted by
Wonyong Jang
on July 06, 2021 ·
8 mins read
[Spark] Persistence 와 Data Locality
RDD Persistence / memory, disk cache / locality level(PROCESS LOCAL, NODE LOCAL, RACK LOCAL)
Posted by
Wonyong Jang
on June 23, 2021 ·
11 mins read
[ELK] ElasticSearch에서 한글 형태소 분석 실습
공공데이터를 이용한 대시보드 만들기 / Logstash, Elasticsearch, Kibana
Posted by
Wonyong Jang
on June 19, 2021 ·
9 mins read
[ELK] ElasticSearch 에서 한글 형태소 개념
한글 형태소 분석기 nori 사용법
Posted by
Wonyong Jang
on June 18, 2021 ·
14 mins read