这篇文章主要为大家展示了“linux系统如何安装Sqoop”,内容简而易懂,条理清晰,希望能够帮助大家解决疑惑,下面让小编带领大家一起研究并学习一下“Linux系统如何安装Sqoop”这篇文章吧。Sqoop简介:Sqoop : SQL-to
这篇文章主要为大家展示了“linux系统如何安装Sqoop”,内容简而易懂,条理清晰,希望能够帮助大家解决疑惑,下面让小编带领大家一起研究并学习一下“Linux系统如何安装Sqoop”这篇文章吧。
Sqoop : SQL-to-Hadoop 用途:把关系型数据库的数据转移到hdfs(Hive、HBase)(重点使用的场景);hadoop中的数据转移到关系型数据库中。Sqoop是java语言开发的,底层使用mapReduce。
安装约定
安装目录为/opt/
1) 解压
tar -zxvf sqoop-1.4.6.bin__hadoop-2.0.4-alpha.tar.gz -C /opt/
2) 重命名:
mv sqoop-1.4.6.bin__hadoop-2.0.4-alpha sqoop
3) 配置SQOOP_HOME到环境变量中
vim /etc/profile.d/hadoop-etc.sh
export SQOOP_HOME=/opt/sqoop
export PATH=SQOOP_HOME/bin
4) 让配置生效: source /etc/profile.d/hadoop-etc.sh
5) 复制并重命名配置文件$SQOOP_HOME/conf/ sqoop-env-template.sh
cp sqoop-env-template.sh sqoop-env.sh
6) 配置$SQOOP_HOME/conf/sqoop-env.sh
export HADOOP_COMMON_HOME=/opt/hadoop
export HBASE_HOME=/opt/hbase
export HIVE_HOME=/opt/hive
export ZOOCFGDIR=/opt/ZooKeeper/conf
注意:因为SQOOP要连接rdbms,所以需要将该数据的驱动jar包添加进sqoop的classpath中,所以将mysql的jar包上传至$SQOOP_HONE/lib,
7) SQOOP安装验证
执行命令sqoop list-databases –connect jdbc:Mysql://ip:3306/test –username root –passWord 123456 ,显示mysql数据库中所有库名称。
以上是“Linux系统如何安装Sqoop”这篇文章的所有内容,感谢各位的阅读!相信大家都有了一定的了解,希望分享的内容对大家有所帮助,如果还想学习更多知识,欢迎关注编程网操作系统频道!
--结束END--
本文标题: Linux系统如何安装Sqoop
本文链接: https://lsjlt.com/news/320019.html(转载时请注明来源链接)
有问题或投稿请发送至: 邮箱/279061341@qq.com QQ/279061341
2024-03-01
2024-03-01
2024-03-01
2024-03-01
2024-03-01
2024-02-29
2024-02-29
2024-02-29
2024-02-29
2024-02-29
回答
回答
回答
回答
回答
回答
回答
回答
回答
回答
0