반응형
Notice
Recent Posts
Recent Comments
Link
| 일 | 월 | 화 | 수 | 목 | 금 | 토 |
|---|---|---|---|---|---|---|
| 1 | 2 | 3 | ||||
| 4 | 5 | 6 | 7 | 8 | 9 | 10 |
| 11 | 12 | 13 | 14 | 15 | 16 | 17 |
| 18 | 19 | 20 | 21 | 22 | 23 | 24 |
| 25 | 26 | 27 | 28 | 29 | 30 | 31 |
Tags
- 맛집
- 백준
- 영어
- Trino
- 삼성역맛집
- Kafka
- 코딩
- 코테
- 프로그래머스
- pyspark
- 알고리즘
- 개발
- hadoop
- Linux
- Iceberg
- HIVE
- bigdata engineer
- 여행
- BigData
- 자바
- Apache Kafka
- Data Engineering
- bigdata engineering
- java
- 코엑스맛집
- 코딩테스트
- Spark
- HDFS
- Data Engineer
- apache iceberg
Archives
- Today
- Total
728x90
반응형
목록asset.multi (1)
지구정복
[Airflow] Airflow Assets
airflow 3버전 이상부터 사용할 수 있는 기능 아래와 같이 두 개의 dag가 있다.a dag: task11 -> task12b dag: task21 -> task22 이때 a dag가 끝나자마자 b dag를 실행시키고 싶을 경우a dag의 최종 결과물(특정 디렉터리에 파일 생성)이 생성되면 b dag가 트리거되도록 실행하는 기능이다. 아래는 예제 코드from airflow.sdk import asset# 1️⃣ First asset DAG@asset( schedule="@daily", # runs every day)def first_asset(): """ This asset returns some data. This return value is stored..
데이터 엔지니어링 정복/Airflow
2025. 11. 30. 21:21
반응형