일 | 월 | 화 | 수 | 목 | 금 | 토 |
---|---|---|---|---|---|---|
1 | 2 | 3 | 4 | |||
5 | 6 | 7 | 8 | 9 | 10 | 11 |
12 | 13 | 14 | 15 | 16 | 17 | 18 |
19 | 20 | 21 | 22 | 23 | 24 | 25 |
26 | 27 | 28 | 29 | 30 | 31 |
Tags
- NoSQL
- HIVE
- SlackWebhookOperator
- hadoop
- 정규표현식
- Kafka
- HDFS
- LDAP
- Windows
- Namenode
- jupyter
- yarn
- HDP
- airflow
- HBase
- Service
- Lambda architecture
- slack app
- Example DAG
- MapReduce
- 람다 아키텍처
- python
- Scala
- ambari
- slack
- java
- docker
- 빅데이터
- re
- execution_date
Archives
- Today
- Total
목록scheduler (1)
IT 삽질기
Airflow 서비스 등록하기
이번 글에서는 CentOS에서 Airflow webserver, scheduler을 서비스로 등록하여 사용하는 방법을 알아보도록 하자. Serviced 관련 내용은 지난 글을 참고하기 바란다. 이번 글에서도 지난 글과 마찬가지로 CentOS에서 동작하는 서비스에 대해서 설명한다. 2021.05.17 - [개발] - CentOS 7 serviced 등록 및 실행 Airflow Serviced 등록하기 Serviced에 등록하기 위한 파일은 Airflow의 공식 github에서 확인이 가능하다. https://github.com/apache/airflow/tree/main/scripts/systemd 이 글에서는 webserver를 service로 등록하는 방법에 대해서만 이야기하며 scheduler이나 w..
BigData/Airflow
2021. 9. 4. 22:44