ICode9

精准搜索请尝试: 精确搜索
首页 > 其他分享> 文章详细

apache 大数据平台搭建(sqoop)

2021-12-16 14:33:51  阅读:200  来源: 互联网

标签:opt 1.4 sqoop hadoop module export apache 搭建


1.官网下载安装包:

http://mirrors.hust.edu.cn/apache/sqoop/1.4.6/

2.安装sqoop

  1. 上传安装包并解压
    上传安装包 sqoop-1.4.6.bin__hadoop-2.0.4-alpha.tar.gz 到服务器上,进入安装包所在的路径执行解压命令:
tar -zxf sqoop-1.4.6.bin__hadoop-2.0.4-alpha.tar.gz -C /opt/module/

mv sqoop-1.4.6.bin__hadoop-2.0.4-alpha sqoop-1.4.6
  1. 修改配置文件
    进入到/opt/module/sqoop-1.4.6/conf 目录,重命名配置文件
mv sqoop-env-template.sh sqoop-env.sh

vim sqoop-env.sh
export HADOOP_COMMON_HOME=/opt/module/hadoop-3.1.3
export HADOOP_MAPRED_HOME=/opt/module/hadoop-3.1.3
export HIVE_HOME=/opt/module/hive-3.1.2
export ZOOKEEPER_HOME=/opt/module/zookeeper-3.5.7
export ZOOCFGDIR=/opt/module/zookeeper-3.5.7/conf

  1. 拷贝驱动
    将jdbc驱动jar包拷贝到sqooplib目录中去

  2. 测试

sqoop list-databases --connect jdbc:mysql://hadoop101:3306/ --username root --password yourpassword

image

标签:opt,1.4,sqoop,hadoop,module,export,apache,搭建
来源: https://www.cnblogs.com/lebaishi/p/15693777.html

本站声明: 1. iCode9 技术分享网(下文简称本站)提供的所有内容,仅供技术学习、探讨和分享;
2. 关于本站的所有留言、评论、转载及引用,纯属内容发起人的个人观点,与本站观点和立场无关;
3. 关于本站的所有言论和文字,纯属内容发起人的个人观点,与本站观点和立场无关;
4. 本站文章均是网友提供,不完全保证技术分享内容的完整性、准确性、时效性、风险性和版权归属;如您发现该文章侵犯了您的权益,可联系我们第一时间进行删除;
5. 本站为非盈利性的个人网站,所有内容不会用来进行牟利,也不会利用任何形式的广告来间接获益,纯粹是为了广大技术爱好者提供技术内容和技术思想的分享性交流网站。

专注分享技术,共同学习,共同进步。侵权联系[81616952@qq.com]

Copyright (C)ICode9.com, All Rights Reserved.

ICode9版权所有