运行 使用 Web 应用程序的 Scala Map Reduce 代码

Question

我有一个特定的要求，我必须在 scala 中编写一些 hadoop MR 代码，然后使用网络应用程序触发这些代码，最后在网页中显示结果。

这可能吗？

如果是，有没有我可以使用的框架？

此致，

拉胡尔

Answer 1

你的问题不清楚。如果您指的是 Hadoop MR 作业，那么您应该查看 Scalding and Spark。

你的数据有多大？如果您的数据量不大，您应该能够在普通或并行 Scala 集合上执行 MR。