将 Pig 0.16.0 UDF 与 Eclipse 集成
Integrating Pig 0.16.0 UDF with Eclipse
我是 Pig 的新手。
谁能告诉我如何将 Pig UDF 与 Eclipse 集成以及从哪里下载 UDF jar 文件?
map reduce 代码在 Eclipse 中对我来说工作正常。
Eclipse > 新建 Maven 项目。
编辑 pom.xml
。
添加到依赖项
<dependency>
<groupId>org.apache.pig</groupId>
<artifactId>pig</artifactId>
<version>0.16.0</version>
</dependency>
使用Eclipse或者终端运行mvn clean package
将 JAR 文件复制到 Hadoop 节点或 HDFS。
运行REGISTER
猪命令
使用UDF
我是 Pig 的新手。
谁能告诉我如何将 Pig UDF 与 Eclipse 集成以及从哪里下载 UDF jar 文件?
map reduce 代码在 Eclipse 中对我来说工作正常。
Eclipse > 新建 Maven 项目。
编辑
pom.xml
。 添加到依赖项<dependency> <groupId>org.apache.pig</groupId> <artifactId>pig</artifactId> <version>0.16.0</version> </dependency>
使用Eclipse或者终端运行
mvn clean package
将 JAR 文件复制到 Hadoop 节点或 HDFS。
运行
REGISTER
猪命令使用UDF