Sqoop - 绑定到 YARN 队列
Sqoop - Binding to YARN queues
因此,借助 mapreduce v2,您可以使用绑定到某些 YARN 队列来管理资源和确定优先级。
基本上通过使用
"hadoop jar /xyz.jar -D mapreduce.job.queuename=QUEUE1 /input /output" 效果很好。
当您 运行 一个 sqoop 查询时,如何将 Yarn 队列绑定与 Sqoop 集成?
即。 sqoop import \ --connect 'jdbc://server' \ --target-dir \ 什么?
对 Sqoop 也使用相同的方法,即
sqoop import -Dmapreduce.job.queuename=NameOfTheQueue\ --connect 'jdbc://server' \ --target-dir \
请注意,mapreduce.job.queuename 参数应在导入之后但在连接或其他选项之前使用。
因此,借助 mapreduce v2,您可以使用绑定到某些 YARN 队列来管理资源和确定优先级。 基本上通过使用
"hadoop jar /xyz.jar -D mapreduce.job.queuename=QUEUE1 /input /output" 效果很好。
当您 运行 一个 sqoop 查询时,如何将 Yarn 队列绑定与 Sqoop 集成?
即。 sqoop import \ --connect 'jdbc://server' \ --target-dir \ 什么?
对 Sqoop 也使用相同的方法,即
sqoop import -Dmapreduce.job.queuename=NameOfTheQueue\ --connect 'jdbc://server' \ --target-dir \
请注意,mapreduce.job.queuename 参数应在导入之后但在连接或其他选项之前使用。