이야기박스

[Flume] No configuration found for this host:** 본문

Computer & Data/Big Data

[Flume] No configuration found for this host:**

박스님 2020. 6. 19. 18:32
반응형

 

Flume 실행 과정에서 다음과 같은 Warn 로그가 발생하여서 기록을 남겨둡니다.

No configuration found for this host:a1

 

# 원인

문제의 원인은 Flume은 아래와 같은 커맨드를 통하여 실행하게 되는데, 실행 시 지정하는 agent와 configuration에 설정된 agent 이름이 다른 경우 위와 같은 Warn 메시지가 출력 되게 됩니다. 

/usr/lib/flume/bin/flume-ng a1 -n a1
# config file
agent.sources=exec-source
agent.sinks=hdfs-sink
agent.channels=ch1

 

# 조치

위 같은 케이스에서 네이밍 규칙으로 Agent 이름을 맞추어 주면 해결됩니다.

/usr/lib/flume/bin/flume-ng agent -n agent

 

 

# 참조

 

 

Flume NG not writing to HDFS

I'm new at using Flume and Hadoop so I'm trying to setup the simplest (but somewhat helpful/realistic) example I can. I'm using the HortonWorks Sandbox in a VM client. After following one tutorial ...

stackoverflow.com

 

반응형

'Computer & Data > Big Data' 카테고리의 다른 글

Chapter 2. Architecture and flow  (0) 2020.07.16
Spark in action, 2nd edition study  (0) 2020.07.16
Kafka ; linger time callback  (0) 2020.06.08
(작성중) 쿠버네티스 & 부하 테스트  (0) 2019.11.28
[MSSQL] Deadlock  (0) 2019.08.13