sqoop2从hdfs中导入到mysql

数据准备:hive数据库文件     例路径为:/user/hadoop/hive/test

在mysql创建与hive中数据库结构一样的数据库。

启动sqoop2服务  $ sqoop2-server start

登录客户端  $ sqoop2-shell

创建数据库对象:

创建hdfs的link对象:

创建一个job作业:

启动这个job作业:start job -j 1 -s

扫描二维码关注公众号,回复: 14704817 查看本文章

以此启动完成。

 

这里有几个小细节要注意的:

1.hive中数据库的制表符要指定为',',不然mysql识别不了他的数据。

2.mysql中数据库要与hive中的字段顺序、名称、类型要一直,不然也会执行job失败。

3.mysql中的数据库不可有主键,不然也会导致失败,如果你可以保证你设置的那个列的值唯一的话也可以有。

4.如果想要删除已有的job或者link的话指令为delete job -j job的id号,delete link -l link的id号。例:delete link -l link 1

5.要修改的话就把delete换成update就可。

 

猜你喜欢

转载自blog.csdn.net/luxiangyan1923/article/details/81448996