使sqoop能够启用压缩的一些配置

时间:2017-12-07 12:23:32   收藏:0   阅读:653

 

在使用sqoop 将数据库表中数据导入至hdfs时 配置启用压缩

 

 hadoop 的命令    检查本地库支持哪些  bin/hadoop checknative  

技术分享图片

 

需要配置native    要编译版本 技术分享图片

删除hadoop安装目录 lib 下的native文件夹

技术分享图片

 将解压好的native文件 拷贝到hadoop  lib目录下

 技术分享图片

技术分享图片

 

 

然后在执行 bin/hadoop checknative   就会发现有了很多东西

技术分享图片

 

然后在执行导入语句

技术分享图片

 

技术分享图片

 

原文:http://www.cnblogs.com/xuyou551/p/7998350.html

评论(0
© 2014 bubuko.com 版权所有 - 联系我们:wmxa8@hotmail.com
打开技术之扣,分享程序人生!