Sqoop 的安装与配置

下载地址

1 下载并解压


(1)上传安装包 sqoop-1.4.6.bin__hadoop-2.0.4-alpha.tar.gz 到 hadoop101 的 /opt/software 路径中

(2)解压sqoop安装包到指定目录,并对其重命名

[huwei@hadoop101 software]$ tar -zxf sqoop-1.4.6.bin__hadoop-2.0.4-alpha.tar.gz -C /opt/module/
[huwei@hadoop101 software]$ cd /opt/module/
[huwei@hadoop101 module]$ mv sqoop-1.4.6.bin__hadoop-2.0.4-alpha/ sqoop-1.4.6

2 修改配置文件


进入到/opt/module/sqoop/conf目录,重命名配置文件

[huwei@hadoop101 module]$ cd sqoop-1.4.6/conf/
[huwei@hadoop101 conf]$ mv sqoop-env-template.sh sqoop-env.sh

修改配置文件

[huwei@hadoop101 conf]$ vim sqoop-env.sh

增加如下内容

export HADOOP_COMMON_HOME=/opt/module/hadoop-3.1.3
export HADOOP_MAPRED_HOME=/opt/module/hadoop-3.1.3
export HIVE_HOME=/opt/module/hive-3.1.2
export ZOOKEEPER_HOME=/opt/module/zookeeper-3.5.7
export ZOOCFGDIR=/opt/module/zookeeper-3.5.7/conf

3 添加环境变量


[huwei@hadoop101 sqoop-1.4.6]$ sudo vim /etc/profile.d/my_env.sh
# SQOOP_HOME
export SQOOP_HOME=/opt/module/sqoop-1.4.6
export PATH=$PATH:$SQOOP_HOME/bin

使得环境变量生效

[huwei@hadoop101 sqoop-1.4.6]$ source /etc/profile

4 拷贝 JDBC 驱动


(1)将 mysql-connector-java-5.1.48.jar 上传到 /opt/software 路径

(2)进入到/opt/software/路径,拷贝 jdbc 驱动到 sqoop 的 lib 目录下。

5 测试Sqoop是否能够成功连接数据库


[huwei@hadoop101 bin]$ sqoop list-databases --connect jdbc:mysql://hadoop101:3306/ --username root --password root

出现已有的数据库名称

在这里插入图片描述

相关推荐

  1. sqoop安装使用

    2024-03-29 12:04:02       23 阅读
  2. Redis安装配置

    2024-03-29 12:04:02       32 阅读

最近更新

  1. TCP协议是安全的吗?

    2024-03-29 12:04:02       18 阅读
  2. 阿里云服务器执行yum,一直下载docker-ce-stable失败

    2024-03-29 12:04:02       19 阅读
  3. 【Python教程】压缩PDF文件大小

    2024-03-29 12:04:02       18 阅读
  4. 通过文章id递归查询所有评论(xml)

    2024-03-29 12:04:02       20 阅读

热门阅读

  1. [OpenAI]继ChatGPT后发布的Sora模型原理与体验通道

    2024-03-29 12:04:02       18 阅读
  2. Leetcode字符串专项

    2024-03-29 12:04:02       16 阅读
  3. 记web项目的一个大文件上传排查笔记

    2024-03-29 12:04:02       18 阅读
  4. 查看docker中mysql是否开启

    2024-03-29 12:04:02       15 阅读
  5. skywalking

    2024-03-29 12:04:02       20 阅读
  6. C#WPF控件TextBlock详解

    2024-03-29 12:04:02       15 阅读
  7. 循环神经网络

    2024-03-29 12:04:02       10 阅读
  8. 项目 npm run dev报错

    2024-03-29 12:04:02       18 阅读
  9. 数字孪生之数据

    2024-03-29 12:04:02       17 阅读
  10. 亚远景科技-浅谈ASPICE标准和ASPICE认证/评估

    2024-03-29 12:04:02       23 阅读
  11. 图片文件格式的文件头标识

    2024-03-29 12:04:02       20 阅读
  12. 【PyTorch Tensor】PyTorch Tensor编程教学:基础与实战

    2024-03-29 12:04:02       21 阅读