일 | 월 | 화 | 수 | 목 | 금 | 토 |
---|---|---|---|---|---|---|
1 | 2 | 3 | 4 | 5 | ||
6 | 7 | 8 | 9 | 10 | 11 | 12 |
13 | 14 | 15 | 16 | 17 | 18 | 19 |
20 | 21 | 22 | 23 | 24 | 25 | 26 |
27 | 28 | 29 | 30 |
- Data Engineering
- hadoop
- bigdata engineering
- 백준
- java
- Trino
- dfs
- Data Engineer
- apache iceberg
- 코딩테스트
- 삼성역맛집
- 맛집
- 자바
- 알고리즘
- 양평
- 코엑스맛집
- 여행
- 코엑스
- bigdata engineer
- BigData
- 용인맛집
- Iceberg
- BFS
- 코테
- 코딩
- 영어
- 파이썬
- 프로그래머스
- HIVE
- 개발
- Today
- Total
목록데이터 엔지니어링 정복 (390)
지구정복

Hue에서 트리노 사용중 아래 에러가 발생. {'message': 'Query exceeded per-node memory limit of 1GB [Allocated: 1015.31MB, Delta: 11.74MB, Top Consumers: {TableScanOperator=588.89MB, OrderByOperator=379.89MB, LazyOutputBuffer=46.53MB}]', 'errorCode': 131079, 'errorName': 'EXCEEDED_LOCAL_MEMORY_LIMIT', 'errorType': 'INSUFFICIENT_RESOURCES', 'failureInfo': {'type': 'io.trino.ExceededMemoryLimitException', 'message'..
현재 trino를 password인증 방식을 사용중이고 ssl/tls 설정을 하여 https로 trino를 사용중인데 아래와 같은 에러가 발생했다.HTTPSConnectionPool(host='mycluster00', port=9998): Max retries exceeded with url: /v1/statement (Caused by SSLError(SSLCertVerificationError(1, '[SSL: CERTIFICATE_VERIFY_FAILED] certificate verify failed: certificate has expired (_ssl.c:1091)'))) 인증서가 만료됐다는 에러이다. 다시 개인키와 자체 서명 인증서를 생성하여 배포한다. 0. 개념정리진행하기 전에 개념을 ..
참고: https://docs.ansible.com/ansible/latest/playbook_guide/playbooks_vars_facts.html 1. 배경Ansible에서 변수는 두 가지가 있다.fact, magic variable Ansible에서는 Ansible 자체나 다른 원격 서버에 대한 정보를 사용할 수 있다.이때 원격 서버에 대한 정보와 관련된 변수는 fact라고 한다.예를 들면 A서버의 IP주소를 B서버에서 사용할 수 있다. 그리고 Ansible자체와 관련된 정보는 magic variable이라고 한다. 2. Ansible factsfacts는 ansible 원격 호스트와 관련된 정보를 의미하는데 보통 IP주소, filesystem, OS종류 등등을 의미한다. 'ansible_f..

환경centos7 서버awx docker-compose로 실행중 목표: 서버에 유저를 생성한 뒤 생성된 유저목록을 출력하고, 생성된 유저들을 지우는 workflow template을 만들기 현재 awx-gitlab 프로젝트 연동된 상태 깃랩 프로젝트 클론한 뒤 새로운 브랜치로 가서 아래 파일들을 만들어준다. * create_users.yaml---- name: Create Users Playbook hosts: localhost vars: users_list: - alice - bob - charlie tasks: - name: Create users user: name: "{{ item }}" state: present..