hadoop 的一些配置。

时间:2014-04-02 17:38:12   收藏:0   阅读:394

1、queue的设置

  hadoop2.0支持了queue,在hadoop程序里面进行queue的配置: 

  job.getConfiguration().set("mapred.job.queue.name", "your-queue-name");

2、reduce key-value中间的分隔符。

  首先得保证outputformart是Textoutputformat,默认的分割符是‘\t‘,用以下语句在程序中进行配置:

  job.getConfiguration().set("mapred.textoutputformat.separator", "some-separator");

hadoop 的一些配置。,布布扣,bubuko.com

原文:http://www.cnblogs.com/fbiswt/p/3640868.html

评论(0
© 2014 bubuko.com 版权所有 - 联系我们:wmxa8@hotmail.com
打开技术之扣,分享程序人生!