| 일 | 월 | 화 | 수 | 목 | 금 | 토 |
|---|---|---|---|---|---|---|
| 1 | 2 | 3 | 4 | 5 | ||
| 6 | 7 | 8 | 9 | 10 | 11 | 12 |
| 13 | 14 | 15 | 16 | 17 | 18 | 19 |
| 20 | 21 | 22 | 23 | 24 | 25 | 26 |
| 27 | 28 | 29 | 30 |
- 용인맛집
- dfs
- 삼성역맛집
- 코딩테스트
- BigData
- 코엑스맛집
- java
- 코엑스
- 백준
- apache iceberg
- Trino
- 알고리즘
- bigdata engineering
- 영어
- Data Engineer
- hadoop
- Iceberg
- 자바
- 개발
- 여행
- HIVE
- bigdata engineer
- 프로그래머스
- 코딩
- 맛집
- 코테
- 파이썬
- Data Engineering
- 양평
- BFS
- Today
- Total
목록Data Engineering (6)
지구정복
[Iceberg] Iceberg Guide Book Summary | CHAPTER 3. Lifecycle of Write and Read Queries
apache iceberg guidebook에서 가져온 내용입니다. CHAPTER 3Lifecycle of Write and Read Queries Writing Queries in Apache Iceberg Create the TableSend the query to the engineWrite the metadata fileUpdate the catalog file to commit changes Insert the Query Send the query to the engineCheck the catalogWrite the datafiles and metadata filesUpdate the catalog file to commit changes Merge QuerySend the quer..
[Hadoop & Hive & Presto] 일일 Twitter 데이터 배치 처리하기 | 빅데이터를 지탱하는 기술
* 참고: 빅데이터를 지탱하는 기술(책) * 환경 윈도우10 버추얼박스 5.2.44 리눅스 CentOS 7.9.2009 자바 버전: openjdk version "1.8.0_292" Embulk 버전: Hadoop 버전: Hive 버전:Presto 버전:MongoDB 버전: 4.4 자바는 아래 블로거님 글 참고 https://bamdule.tistory.com/57 [Linux] CentOS 7에 OpenJDK 1.8 설치 1. open-jdk 1.8 설치 # yum install java-1.8.0-openjdk # yum install java-1.8.0-openjdk-devel 설치가 완료되면 /usr/bin/경로에 java가 생성됩니다. 2. 환경변수 등록 /usr/bin/java 경로에 심볼릭링..