运行 flume 代理获取推特数据

Question

我一直在尝试运行我的 windows 系统上的 flume 代理来获取 Twitter 数据。我正在关注这个博客 https://acadgild.com/blog/streaming-twitter-data-using-flume

但是，每当我尝试运行 flume 代理时，我都会收到以下错误 -

flume-ng agent -n TwitterAgent -f ./conf/flume.conf

E:\apache-flume-1.7.0-bin\apache-flume-1.7.0-bin\bin>powershell.exe -NoProfile -InputFormat none -ExecutionPolicy unrestricted -File E:\apache-flume-1.7.0-bin\apache-flume-1.7.0-bin\bin\flume-ng.ps1 agent -n TwitterAgent -f ./conf/flume.conf

Resolve-Path : Cannot find path 'E:\apache-flume-1.7.0-bin\apache-flume-1.7.0-bin\bin\conf\flume.conf' because it does not exist.
At E:\apache-flume-1.7.0-bin\apache-flume-1.7.0-bin\bin\flume-ng.ps1:217 char:24 +     $confFile = '"' + (Resolve-Path $confFile).Path + '"' +                        ~~~~~~~~~~~~~~~~~~~~~~
+ CategoryInfo          : ObjectNotFound: (E:\apache-flume...conf\flume.conf:String) [Resolve-Path], ItemNotFoundException
+ FullyQualifiedErrorId : PathNotFound,Microsoft.PowerShell.Commands.ResolvePathCommand

我试过自己调试，没成功。我试图寻找这个特定的错误，但无法在任何地方找到它。

Answer 1

那个地方有E:\apache-flume-1.7.0-bin\apache-flume-1.7.0-bin\bin\conf\flume.conf吗？您确定它在 \bin\conf\flume.conf 而不是 \conf\flume.conf 中吗？在这种情况下使用：

flume-ng agent -n TwitterAgent -f ./../conf/flume.conf

或者（更常见），使用以下命令从 E:\apache-flume-1.7.0-bin\apache-flume-1.7.0-bin 文件夹中运行：

bin/flume-ng agent -n TwitterAgent -f ./conf/flume.conf

运行 flume 代理获取推特数据

Running flume agent to get Twitter data

apache

hadoop

flume

flume-ng

flume-twitter