터칭 데이터

Airflow DB 살펴보기 본문

Airflow 고급 기능, dbt, Data Catalog

Airflow DB 살펴보기

터칭 데이터 2024. 1. 3. 17:53

 

 

팁: Airflow 메타데이터 DB 내용 살펴보기

 

airflow:airflow로 Postgres에 로그인 가능

docker exec -it learn-airflow-airflow-webserver-1 sh

혹은 learn-airflow-airflow-scheduler-1로 로그인

그 다음에 아래 명령 수행

psql -h postgres

docker-compose로 연결된 컨테이너들끼리는 서비스 이름을 host이름 처럼 연동할 수 있다고 했었습니다.

psql shell에서 아래 명령 수행

\dt
select * FROM dag_run LIMIT 10;
DELETE FROM dag_run WHERE dag_id = '기록을삭제하고싶은DAG’;

 

참고로 psql shell에서는 ctrl + l로 창을 clear할 수 있습니다.

 

 

 

 

 

'Airflow 고급 기능, dbt, Data Catalog' 카테고리의 다른 글

Dynamic Dags  (0) 2024.01.03
Task Groups  (0) 2024.01.03
Dag-Dependencies 데모  (0) 2024.01.03
Dag Dependencies - 나머지  (0) 2024.01.03
Dag Dependencies - TriggerDagRunOperator & Jinja Template  (0) 2024.01.03