将 Pig 0.16.0 UDF 与 Eclipse 集成

Integrating Pig 0.16.0 UDF with Eclipse

我是 Pig 的新手。

谁能告诉我如何将 Pig UDF 与 Eclipse 集成以及从哪里下载 UDF jar 文件?

map reduce 代码在 Eclipse 中对我来说工作正常。

  1. Eclipse > 新建 Maven 项目。

  2. 编辑 pom.xml。 添加到依赖项

    <dependency>
        <groupId>org.apache.pig</groupId>
        <artifactId>pig</artifactId>
        <version>0.16.0</version>
    </dependency>
    
  3. Write code for a UDF

  4. 使用Eclipse或者终端运行mvn clean package

  5. 将 JAR 文件复制到 Hadoop 节点或 HDFS。

  6. 运行REGISTER猪命令

  7. 使用UDF