일 | 월 | 화 | 수 | 목 | 금 | 토 |
---|---|---|---|---|---|---|
1 | 2 | 3 | 4 | |||
5 | 6 | 7 | 8 | 9 | 10 | 11 |
12 | 13 | 14 | 15 | 16 | 17 | 18 |
19 | 20 | 21 | 22 | 23 | 24 | 25 |
26 | 27 | 28 | 29 | 30 | 31 |
Tags
- yarn
- 빅데이터
- ambari
- MapReduce
- Scala
- re
- Example DAG
- jupyter
- python
- slack
- Lambda architecture
- Service
- docker
- hadoop
- 정규표현식
- airflow
- 람다 아키텍처
- HDFS
- java
- execution_date
- HBase
- slack app
- NoSQL
- Windows
- HDP
- Namenode
- SlackWebhookOperator
- HIVE
- Kafka
- LDAP
Archives
- Today
- Total
목록ResourceManager (1)
IT 삽질기
Resource Manager Active Standby 전환 이슈
하둡 클러스터 운영중 Active Resource Manager가 내려간 후 Standby RM이 Active상태로 전환되지 않는 이슈 발생 이후 Active로 동작하고 있던 RM도 올라왔지만 역시 StandBy 상태로 Active상태로 전환되지 않음 리서치 결과 community.cloudera.com/t5/Community-Articles/Resource-Managers-are-starting-up-both-in-standby/ta-p/246250 Zookeeper 관련 이슈로 판단 yarn-leader-election 이슈로 RM이 정상적으로 전환되지 않는 것 zkcli에 접근하여 직접 데이터를 삭제 #hdp zookeeper 경로 ex) /usr/hdp/current/zookeeper/bin/zk..
BigData/Hadoop
2021. 3. 9. 01:27