flume采集hive日志写到hdfs问题

解决flume采集hive日志写到hdfs问题

在配置flume写日志到hdfs发现写不进去,很苦恼,查了很多资料,终于找到了原因!

原来

用Flume监听目录,在自己建的.conf文件中需要配置hdfs的路径

hdfs://node1.itcast.cn:8020/flume/%Y%m%d/%H

这里的端口号应该和hadoop下的core-site.xml里面的配置必须一样,否则就会出现写不进去的情况

更改之后,再重试,就成功了。

你可能感兴趣的:(flume,hive)