일 | 월 | 화 | 수 | 목 | 금 | 토 |
---|---|---|---|---|---|---|
1 | 2 | 3 | 4 | |||
5 | 6 | 7 | 8 | 9 | 10 | 11 |
12 | 13 | 14 | 15 | 16 | 17 | 18 |
19 | 20 | 21 | 22 | 23 | 24 | 25 |
26 | 27 | 28 | 29 | 30 | 31 |
Tags
- 람다 아키텍처
- 빅데이터
- Kafka
- jupyter
- HDFS
- hadoop
- SlackWebhookOperator
- HIVE
- Namenode
- NoSQL
- Service
- java
- re
- slack app
- Example DAG
- LDAP
- yarn
- execution_date
- Lambda architecture
- docker
- MapReduce
- ambari
- airflow
- HBase
- 정규표현식
- HDP
- Windows
- slack
- Scala
- python
Archives
- Today
- Total
목록variable (1)
IT 삽질기
Airflow Variables
Airflow Variables란? Variables은 Airflow 전역에서 사용할 수 있는 값을 미리 저장해두고 DAG에서 공통적으로 사용할 수 변수를 말한다. WebServer UI에서 쉽게 설정이 가능하다. Variables는 key-value 형식으로 구성되며, key값을 이용해 value를 사용하는 방식이다. 공식 문서는 아래와 같이 2개의 문서로 정리되어 있다. https://airflow.apache.org/docs/apache-airflow/stable/concepts/variables.html https://airflow.apache.org/docs/apache-airflow/stable/howto/variable.html Airflow Varialbes 설정하기 Webserver에서 ..
BigData/Airflow
2021. 5. 27. 23:43