使用 Pig 分析日志文件

Question

我是 Pig Latin 的新手，我需要分析一个日志文件以检查错误日志和警告日志。

怎么做？查找错误和警告的脚本是什么？

Answer 1

您将从 LOAD 将文件的每一行作为字符串开始，然后从每一行应用和提取正则表达式模式，然后是 FILTER 用于错误和警告。

不过，Elasticsearch 比 Hadoop 工具更常用于日志分析。