sqoop安装教程

最新推荐文章于 2025-05-08 14:50:27 发布

编程界的周某人

最新推荐文章于 2025-05-08 14:50:27 发布

阅读量266

点赞数

CC 4.0 BY-SA版权

本文链接：https://blog.csdn.net/weixin_45737883/article/details/111149828

标题本篇文章仅是sqoop安装

一:首先需要到官网下载安装包
http://mirrors.hust.edu.cn/apache/sqoop/1.4.6/

二：将下载的安装包拉倒linux中我的目录是softwares,然后将
文件解压到，安装的存储位置我的是modules
解压命令
tar -zxvf sqoop-1.4.6.bin__hadoop-2.0.4-alpha.tar.gz -C …/modules

三:修改配置文件
Sqoop的配置文件与大多数大数据框架类似，在sqoop根目录下的conf目录中
在这里插入图片描述

1）重命名配置文件
mv sqoop-env-template.sh sqoop-env.sh
2)
mv sqoop-site-template.xml sqoop-site.xml
3)修改配置文件sqoop-env.sh

export HADOOP_COMMON_HOME=/home/admin/modules/hadoop-2.7.2
export HADOOP_MAPRED_HOME=/home/admin/modules/hadoop-2.7.2
export HIVE_HOME=/home/admin/modules/apache-hive-1.2.2-bin
export ZOOKEEPER_HOME=/home/admin/modules/zookeeper-3.4.5
export ZOOCFGDIR=/home/admin/modules/zookeeper-3.4.5

第四步:下载一个jdbc的驱动包，放到sqoop的lib目录下面

$ cp -a mysql-connector-java-5.1.27-bin.jar ~/modules/sqoop-1.4.6.bin__hadoop-2.0.4-alpha/lib/

第五步:验证Sqoop

命令:bin/sqoop help

会出来如下所示


Available commands:
  codegen            Generate code to interact with database records
  create-hive-table  Import a table definition into Hive
  eval               Evaluate a SQL statement and display the results
  export             Export an HDFS directory to a database table
  help               List available commands
  import             Import a table from a database to HDFS
  import-all-tables  Import tables from a database to HDFS
  import-mainframe   Import datasets from a mainframe server to HDFS
  job                Work with saved jobs
  list-databases     List available databases on a server
  list-tables        List available tables in a database
  merge              Merge results of incremental imports
  metastore          Run a standalone Sqoop metastore
  version            Display version information

第六步:测试Sqoop是否能够成功连接数据库

bin/sqoop list-databases --connect jdbc:mysql://master:3306/ --username root --password 123456

会出现如下所示:

information_schema
hive
mysql
performance_schema
test