返回顶部
首页 > 资讯 > 服务器 >Docker安装Presto连接Hive的详细过程
  • 894
分享到

Docker安装Presto连接Hive的详细过程

2024-04-02 19:04:59 894人浏览 薄情痞子
摘要

1、简介 Presto 是一个开源分布式 sql 查询引擎,用于针对从千兆字节到 PB 级的各种规模的数据源运行交互式分析查询。Presto 允许查询数据所在的位置,包括 Hive、

1、简介

Presto 是一个开源分布式 sql 查询引擎,用于针对从千兆字节到 PB 级的各种规模的数据源运行交互式分析查询。Presto 允许查询数据所在的位置,包括 Hive、Cassandra、关系数据库甚至专有数据存储。单个 Presto 查询可以组合来自多个来源的数据,从而允许对整个组织进行分析。

2、下载安装

1)下载镜像


Docker pull starburstdata/presto

2)下载客户端jar

因为pull下来的镜像是server,是没有presto-cli命令的,所以需要下载presto-cli-0.260.1-executable.jar,然后将下载好的jar包拉入linux系统中。

下载完成后,run容器


#端口号为8080,请自行修改,名字为presto
docker run -d -p 8080:8080  --name presto starburstdata/presto

将客户端jar包拷贝到容器中的bin目录下:


docker cp [客户端jar包所在的linux路径] [容器名]:/bin

进入到hadoop配置文件目录,将core-site.xml和hdfs-site.xml复制到容器中


cd ${HADOOP_HOME}/etc/hadoop
docker cp core-site.xml presto:/usr/lib/presto/etc/
docker cp core-site.xml presto:/usr/lib/presto/etc/

进入容器(以下不标注都是在容器中进行的操作):


#以root用户进入容器,防止没有权限操作文件
docker exec --user=root -it presto /bin/bash

将客户端jar包改名并赋予可执行权限:


cd bin
mv presto-cli-0.260.1-executable.jar presto-cli
chmod a+x presto-cli

3、配置文件

进入配置文件目录,创建hive配置文件:


cd /usr/lib/presto/etc/catalog
vi hive.properties

hive.properties:


#连接名,固定
connector.name=hive-hadoop2
#hive元数据uri,在hive-site.xml里能够找到,请自行修改ip和端口
hive.metastore.uri=thrift://192.168.10.51:9083
#hive配置的资源 core-site.xml和hdfs-site.xml,请根据自己集群中的配置文件路径进行修改,中间用逗号隔开
hive.config.resources=/usr/lib/presto/etc/core-site.xml,/usr/lib/presto/etc/hdfs-site.xml

wq保存退出

重启容器(在linux命令行下):


docker restart presto

4、测试连接

进入容器:


#以root用户进入容器,防止没有权限操作文件
docker exec --user=root -it presto /bin/bash
#进入bin目录
cd bin
#执行命令行脚本并测试hive连接,连接到hive配置文件,数据库是default
./presto-cli --server localhost:8080 --catalog hive --schema default
presto>show tables;

到此这篇关于Docker安装Presto连接Hive的详细过程的文章就介绍到这了,更多相关Docker安装Presto内容请搜索编程网以前的文章或继续浏览下面的相关文章希望大家以后多多支持编程网!

--结束END--

本文标题: Docker安装Presto连接Hive的详细过程

本文链接: https://lsjlt.com/news/134740.html(转载时请注明来源链接)

有问题或投稿请发送至: 邮箱/279061341@qq.com    QQ/279061341

猜你喜欢
  • Docker安装Presto连接Hive的详细过程
    1、简介 Presto 是一个开源分布式 SQL 查询引擎,用于针对从千兆字节到 PB 级的各种规模的数据源运行交互式分析查询。Presto 允许查询数据所在的位置,包括 Hive、...
    99+
    2024-04-02
  • Docker安装logstash的详细过程
    编辑docker-compose.yml,内容如下: version: '3' services: logstash02: image: logstash:6.4.1...
    99+
    2024-04-02
  • docker安装elastic search的详细过程
    1. ELASTICSEARCH 1、安装elastic search dokcer中安装elastic search (1)下载ealastic search和kibana do...
    99+
    2024-04-02
  • docker安装部署 onlyoffice的详细过程
    0. 系统要求 中央处理器 I5-10400F以上 内存 16 GB,最佳32G内存 硬盘 至少40 GB的可用空间 1:安装Docker Desktop 2:进入BIOS设置CPU...
    99+
    2024-04-02
  • Docker安装Jenkins-2.249.3-1.1的详细过程
    目录一、安装Docker二、拉取Jenkins镜像文件三、创建挂载目录并授权四、创建并启动Jenkins容器五、查看jenkins是否启动成功六、查看docker容器日志七、访问Je...
    99+
    2024-04-02
  • Ubuntu20.04上安装和使用Docker的详细过程(安装包)
    目录一、解压文件二、拷贝解压后的文件到/usr/bin/下面三、加入系统文件四、启动Docker五、Docker配置文件六、重启Docker七、检查Docker是否安装成功八、总结安...
    99+
    2024-04-02
  • docker安装RabbitMQ及安装延迟插件的详细过程
    目录1.首先说一下什么是MQ1.1为什么要用MQ/MQ有什么用1.1.1流量消峰1.1.2应用解耦1.1.3异步处理2.安装RabbitMq2.1首先拉取镜像2.2启动镜像2.3启动...
    99+
    2024-04-02
  • 使用Dbeaver远程连接Hive的详细方法
    目录0. Linux上Hive1. 下载DBeaver2. 驱动包3. 建立链接,测试0. Linux上Hive 启动Hadoop 启动Hive sh hive --service ...
    99+
    2024-04-02
  • Windows下Docker安装各种软件的详细过程
    一 安装Mysql # docker 中下载 mysql docker pull mysql #启动 docker run --name mysql -p 3306:3306...
    99+
    2024-04-02
  • 亲手教你Docker Compose安装DOClever的详细过程
    目录一、Docker Compose是什么以及Docker Compose安装和使用二、DOClever是什么三、使用Docker Compose安装DOClever步骤一、Dock...
    99+
    2024-04-02
  • IntelliJ IDEA(2018版)安装docker插件的详细过程
    目录一、开发环境二、安装docker插件1、Idea内安装2、下载安装包安装三、Spring Boot 服务docker部署1、新建一个Spring Boot工程2、配置Docker...
    99+
    2024-04-02
  • docker安装nacos的详细教程
    目录拉取nacos创建文件夹日志文件夹配置文件夹mysql新建nacos的数据库,并执行脚本 sql脚本地址如下:运行nacos解读拉取nacos docker pull nacos...
    99+
    2022-11-13
    docker安装nacos docker nacos
  • Linux安装Docker详细教程
    目录介绍安装条件卸载旧版本安装方法常用命令卸载docker Compose编排安装卸载docker compose介绍 Docker利用linux核心中的资源分脱机制,例如cgroups,以及Linux核心名字空间(na...
    99+
    2022-07-06
    Linux 安装Docker
  • 安装MySQL的详细过程
    本篇内容主要讲解“安装MySQL的详细过程”,感兴趣的朋友不妨来看看。本文介绍的方法操作简单快捷,实用性强。下面就让小编来带大家学习“安装MySQL的详细过程”吧!在日常开发学习中不可或少的需要用到MySQ...
    99+
    2024-04-02
  • Apache安装的详细过程
    这篇文章主要讲解了“Apache安装的详细过程”,文中的讲解内容简单清晰,易于学习与理解,下面请大家跟着小编的思路慢慢深入,一起来研究和学习“Apache安装的详细过程”吧!第一步:安装openssl1、解压软件:# tar xvfz op...
    99+
    2023-06-10
  • Nagios的详细安装过程
    这篇文章主要讲解了“Nagios的详细安装过程”,文中的讲解内容简单清晰,易于学习与理解,下面请大家跟着小编的思路慢慢深入,一起来研究和学习“Nagios的详细安装过程”吧!Nagios是一款企业级网络监控系统,它功能之强大,管理之简单,使...
    99+
    2023-06-16
  • zabbix2.4详细安装过程
    zabbix是现在比较主流的监控软件,有着较为普遍的使用 官网  www.zabbix.com 配置阿里云yum源http://repo.zabbix.com/zab...
    99+
    2024-04-02
  • PHPStorm2023详细安装过程
    文章目录 前言准备安装汉化解释器安装解释器配置预览查看(补充) 前言 PHPStorm是一款功能强大的PHP集成开发环境(IDE),具有众多优点: 1、强大的代码编辑功能:PHPS...
    99+
    2023-10-04
    php 网络安全 windows ide
  • Anaconda安装(过程详细)
    在本文开始之前,祝大家新年快乐,心想事成,事事顺利! 一、前言 Anaconda是一个开源的Python发行版本,用来管理Python相关的包,安装Anaconda可以很方便的切换不同的环境,使用不同的深度学习框架开发项目,本文将详细介绍A...
    99+
    2023-08-31
    python anaconda
  • CentOS 8安装Docker的详细教程
    1、御载以前的版本 yum remove docker docker-client docker-client-latest docker-common docker-lates...
    99+
    2024-04-02
软考高级职称资格查询
编程网,编程工程师的家园,是目前国内优秀的开源技术社区之一,形成了由开源软件库、代码分享、资讯、协作翻译、讨论区和博客等几大频道内容,为IT开发者提供了一个发现、使用、并交流开源技术的平台。
  • 官方手机版

  • 微信公众号

  • 商务合作