如何为Sqoop输出文件提供自定义名称 [英] How to give custom name to Sqoop output files

查看:149
本文介绍了如何为Sqoop输出文件提供自定义名称的处理方法,对大家解决问题具有一定的参考价值,需要的朋友们下面随着小编来一起学习吧!

问题描述

当我使用sqoop通过默认方式将数据导入配置单元时,它将在HDFS上创建文件名作为part-m-0000,part-m-0001等。

重命名这些文件?



如果我想给一些有意义的名字,比如带日期的文件名加上日期以表示负载,我该怎么做?



请提出建议

解决方案

是的,我们可以!请参阅此处

  sqoop import -D mapreduce.output.basename =`date +%y-%m-%d` 


When I import data to hive using sqoop bydefault it creates file name as part-m-0000, part-m-0001 etc on HDFS.

Is it possible to rename these files?

If i wish to give some meaningfull name like suffxing file name with date to indicate load how can I do it?

Please suggest

解决方案

Yes we can ! see here

sqoop import -D mapreduce.output.basename=`date +%Y-%m-%d`

这篇关于如何为Sqoop输出文件提供自定义名称的文章就介绍到这了,希望我们推荐的答案对大家有所帮助,也希望大家多多支持IT屋!

查看全文
登录 关闭
扫码关注1秒登录
发送“验证码”获取 | 15天全站免登陆