使用sqoop将hdfs数据导出到mysql

最新推荐文章于 2025-05-29 08:42:27 发布

honconM

最新推荐文章于 2025-05-29 08:42:27 发布

阅读量1.2k

点赞数 2

CC 4.0 BY-SA版权

文章标签： hdfs sqoop mysql

本文链接：https://blog.csdn.net/qq_51903852/article/details/121597809

该博客介绍了如何使用Sqoop工具将数据从HDFS导出到MySQL数据库，并进行了两次修改，分别是更新指定键值的数据以及允许插入新数据的操作。通过`--update-key`和`--update-mode`参数， Sqoop实现了对数据库表teacher的精准更新和插入。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

--------------------export	导出---------------------------------
[root@mihaoyu151 tmp]# sqoop export \
> --connect jdbc:mysql://mihaoyu151:3306/mybatisdb \
> --username root \
> --password root \
> --table teacher \
> --export-dir /sqoop/exportdata/
-------------------------修改----------------------------
[root@mihaoyu151 tmp]# sqoop export \
> --connect jdbc:mysql://mihaoyu151:3306/mybatisdb \
> --username root \
> --password root \
> --table teacher \
> --export-dir /sqoop/exportdata2/ \
> --update-key id \
> --update-mode updateonly
------------------------修改，添加-----------------------------
[root@mihaoyu151 tmp]# sqoop export \
> --connect jdbc:mysql://mihaoyu151:3306/mybatisdb \
> --username root \
> --password root \
> --table teacher \
> --export-dir /sqoop/exportdata3/ \
> --update-key id \
> --update-mode allowinsert