使用Sqoop将数据从MySQL导入Hive

我使用Sqoop(版本1.4.4)将数据从MySQL导入Hive.数据将是一个表的子集,即表中的几列.是否有必要事先在Hive中创建表.或者,如果数据不在Hive中,则导入数据将创建命令中指定的名称?最佳答案如sqoop documentation中所述,如果在命令中使用–hive-import参数,则不

我使用Sqoop(版本1.4.4)将数据从MySQL导入Hive.数据将是一个表的子集,即表中的几列.是否有必要事先在Hive中创建表.或者,如果数据不在Hive中,则导入数据将创建命令中指定的名称?
最佳答案
如sqoop documentation中所述,如果在命令中使用–hive-import参数,则不必创建任何配置单元表

例:

sqoop import --connect jdbc:mysql://mysql_server:3306/db_name --username mysql_user --password mysql_pass --table table_name --hive-import

另外……如果要在每日基础上安排完整数据导入,请考虑使用–hive-overwrite参数

作者: dawei

【声明】:永州站长网内容转载自互联网,其相关言论仅代表作者个人观点绝非权威,不代表本站立场。如您发现内容存在版权问题,请提交相关链接至邮箱:bqsm@foxmail.com,我们将及时予以处理。

为您推荐

联系我们

联系我们

0577-28828765

在线咨询: QQ交谈

邮箱: xwei067@foxmail.com

工作时间:周一至周五,9:00-17:30,节假日休息

返回顶部