| 일 | 월 | 화 | 수 | 목 | 금 | 토 |
|---|---|---|---|---|---|---|
| 1 | 2 | 3 | 4 | 5 | ||
| 6 | 7 | 8 | 9 | 10 | 11 | 12 |
| 13 | 14 | 15 | 16 | 17 | 18 | 19 |
| 20 | 21 | 22 | 23 | 24 | 25 | 26 |
| 27 | 28 | 29 | 30 |
- bigdata engineering
- 여행
- hadoop
- dfs
- Data Engineer
- bigdata engineer
- 코엑스
- HIVE
- java
- 프로그래머스
- 코딩테스트
- 백준
- BigData
- 양평
- 파이썬
- 알고리즘
- apache iceberg
- Trino
- Iceberg
- 코테
- 자바
- 코엑스맛집
- 코딩
- 개발
- 삼성역맛집
- 영어
- 맛집
- Data Engineering
- BFS
- 용인맛집
- Today
- Total
목록Trino (7)
지구정복
[Iceberg] Iceberg Guide Book Summary | CHAPTER 3. Lifecycle of Write and Read Queries
apache iceberg guidebook에서 가져온 내용입니다. CHAPTER 3Lifecycle of Write and Read Queries Writing Queries in Apache Iceberg Create the TableSend the query to the engineWrite the metadata fileUpdate the catalog file to commit changes Insert the Query Send the query to the engineCheck the catalogWrite the datafiles and metadata filesUpdate the catalog file to commit changes Merge QuerySend the quer..
[Trino] Query exceeded per-node memory limit of 1GB | Trino Memory Tunning
Hue에서 트리노 사용중 아래 에러가 발생. {'message': 'Query exceeded per-node memory limit of 1GB [Allocated: 1015.31MB, Delta: 11.74MB, Top Consumers: {TableScanOperator=588.89MB, OrderByOperator=379.89MB, LazyOutputBuffer=46.53MB}]', 'errorCode': 131079, 'errorName': 'EXCEEDED_LOCAL_MEMORY_LIMIT', 'errorType': 'INSUFFICIENT_RESOURCES', 'failureInfo': {'type': 'io.trino.ExceededMemoryLimitException', 'message'..
현재 trino를 password인증 방식을 사용중이고 ssl/tls 설정을 하여 https로 trino를 사용중인데 아래와 같은 에러가 발생했다.HTTPSConnectionPool(host='mycluster00', port=9998): Max retries exceeded with url: /v1/statement (Caused by SSLError(SSLCertVerificationError(1, '[SSL: CERTIFICATE_VERIFY_FAILED] certificate verify failed: certificate has expired (_ssl.c:1091)'))) 인증서가 만료됐다는 에러이다. 다시 개인키와 자체 서명 인증서를 생성하여 배포한다. 0. 개념정리진행하기 전에 개념을 ..