일 | 월 | 화 | 수 | 목 | 금 | 토 |
---|---|---|---|---|---|---|
1 | 2 | 3 | 4 | 5 | 6 | 7 |
8 | 9 | 10 | 11 | 12 | 13 | 14 |
15 | 16 | 17 | 18 | 19 | 20 | 21 |
22 | 23 | 24 | 25 | 26 | 27 | 28 |
29 | 30 | 31 |
Tags
- Kafka
- python
- 빅데이터
- SlackWebhookOperator
- re
- HBase
- MapReduce
- Scala
- airflow
- jupyter
- 정규표현식
- ambari
- Windows
- HDP
- HDFS
- Service
- java
- 람다 아키텍처
- Lambda architecture
- HIVE
- NoSQL
- docker
- LDAP
- Example DAG
- Namenode
- slack app
- slack
- yarn
- execution_date
- hadoop
Archives
- Today
- Total
IT 삽질기
HDP 3.1.4 Hive LLAP error(UnicodeDecodeError) 본문
HDP 3.1.4 환경에서 Hive 설정을 진행하던 중 아래와 같은 에러가 발생했다
UnicodeDecodeError
인코딩 관련 문제로 생각하여 python 파일에 한글 인코딩 관련 코드를 추가해 보았다
파일의 경로는 에러메세지에 명시된 파일을 우선으로 작업했다
/usr/hdp/3.1.4.0-315/hive/scripts/llap/yarn/package.py
#-*-coding:utf8-*-
해당 코드를 추가하여 테스트를 진행한 결과는 달라진 것은 없었다
이후로 추가로 리서치를 진행했다
동일하진 않지만 비슷한 상황을 발견
아래의 코드를 추가해 테스트를 진행했다
reload(sys)
sys.setdefaultencoding('utf8')
결과는 성공 위의 코드를 추가하여
더 이상 UnicodeDecodeError 관련 에러는 나타나지 않았으며,
원인은 추가적으로 파악할 예정이다
'BigData > Hadoop' 카테고리의 다른 글
Hadoop2 NameNode HA QJM(Quorum Journal Manager) (0) | 2021.04.08 |
---|---|
Hive 테이블 복사하기 (0) | 2021.04.07 |
HDP(Ambari) Node Groups (0) | 2021.03.22 |
HDP 인증 이슈(HDP repo 403 error) (0) | 2021.03.13 |
Resource Manager Active Standby 전환 이슈 (0) | 2021.03.09 |
Comments