community-release-el7-8.noarch.rpm 3.安装 mysql57-community-release-el7-8.noarch.rpm： rpm -ivh mysql57-...community-release-el7-8.noarch.rpm 安装完后，cd /etc/yum.repos.d/ mysql-community.repo mysql-community-source.repo...4.安装mysql service yum install mysql-server 执行y 安装完毕删除 rm -rf mysql57-community-release-el7-8.noarch.rpm...'; Hive安装 1.官网下载安装包，上传到服务器，解压 2.配置环境变量 vim /etc/profile export HIVE_HOME=/root/hd/apache-hive-2.3.3...hive安装完毕！
Hive基础01、安装MySQL 目录 1、安装需要的包 2、卸载不需要的包 3、安装MySQL服务端 4、安装MySQL客户端 5、登录MySQL 6、修改密码 7、分配master权限 8、刷新权限...登录测试 ---- 1、安装需要的包 前置位置有【MySQL-server-5.1.73-1.glibc23.x86_64.rpm】和【MySQL-client-5.1.73-1.glibc23.x86..._64.rpm】 cd /opt/soft 通过yum安装Net-tools 包含如下程序，构成了 Linux 网络的基础。...ypdomainname同domainname. 2、卸载不需要的包 yum remove mysql-libs -y 3、安装MySQL服务端 rpm -ivh MySQL-server-5.1.73...-1.glibc23.x86_64.rpm 4、安装MySQL客户端 rpm -ivh MySQL-client-5.1.73-1.glibc23.x86_64.rpm 5、登录MySQL mysql
二、 安装Mysql 将Mysql安装包上传到服务器上，然后解压压缩包，使用命令:unzip mysql-libs.zip ?...查看系统是否自带Mysql，将系统上的MySQL卸载 ? 然后首先安装Mysql-Server 其中有个重要的目录要查看 里面记录着Mysql的随机密码 ? ? ...mysql的随机密码为:MIgbmURIlR0Uskh9 ? 然后安装Mysql客户端: rpm -ivh MySQL-client-5.6.24-1.el6.x86_64.rpm ? ...OK,退出Mysql之后在重新登录一下，登录成功！ 三、Hive配置metastore 首先进入到Hive的安装目录中 /opt/moudles/hive-..... ...修改Hive日志的存放地址，（在Hive的安装目录中创建logs文件夹用来存放日志,然后配置 hive-log4j.properties 中的 hive.log.dir hive.log.threshold
Specified key was too long; max key length is 3072 bytes (state=42000,code=1071) org.apache.hadoop.hive.metastore.HiveMetaException...这个错误很低级 就是我已经mysql中创建过这张表了，所以执行schematool --dbType mysql --initSchema命令报错
上一篇博文我们讲了hive的操作，并且知道默认的derby数据库不支持并发执行，因此我们选用Mysql存储Metastore。那么这篇博文带来的是如何安装Mysql。 一....查看 [root@hadoop001 hive]# rpm -qa|grep mysql 2....卸载 [root@hadoop001 hive]# rpm -e --nodeps mysql-libs-5.1.71-1.el6.x86_64 ?...安装MySql服务器 2.1 安装mysql服务端 [root@hadoop001 mysql-libs]# rpm -ivh MySQL-server-5.6.24-1.el6.x86_64.rpm...安装MySql客户端 3.1 安装mysql客户端 [root@hadoop001 mysql-libs]# rpm -ivh MySQL-client-5.6.24-1.el6.x86_64.rpm
上传安装包 apache-hive-2.3.4-bin.tar.gz 解压 tar -xzvf apache-hive-2.3.4-bin.tar.gz -C /hd/ 重命名 ln -s apache-hive...环境变量起效果 source /etc/profile 修改配置文件 拷贝驱动mysql-connector-java-8.0.14.jar到 /hd/hive/lib 配置hive-site.xml... jdbc:mysql://192.168.154.201:3306/hive_metadata?...true javax.jdo.option.ConnectionDriverName com.mysql.jdbc.Driver...=/home/centos/hive/resource 创建数据库表到mysql里面 schematool -initSchema -dbType mysql 验证hive是否安装成功 直接输入hive
Hive基础02、安装Hive 前置 开启【hdfs】，六个服务都要在。...start-all.sh jps 安装Hive 1、解压【Hive】 tar -zxvf apache-hive-2.1.0-bin.tar.gz 由于命名不合适，所以更换一下： mv apache-hive...文件中修改相关配置内容，修改如下 修改属性“javax.jdo.option.ConnectionURL”的值为“jdbc:mysql://localhost:3306/hive?...执行脚本 source /etc/profile.d/hive.sh 6、复制MySQL的驱动包到hive的lib文件夹下 cp /opt/soft/mysql-connector-java-5.1.39.../schematool -initSchema -dbType mysql -userName root -passWord 123456 成功
承接安装系列环境 背景：Hive默认使用MapReduce作为执行引擎，即Hive on mr。...实际上，Hive还可以使用Tez和Spark作为其执行引擎，分别为Hive on Tez和Hive on Spark。...为了对比Hive on Spark和Hive on mr的速度，需要在已经安装了Hadoop集群的机器上安装Spark集群（Spark集群是建立在Hadoop集群之上的，也就是需要先装Hadoop集群，...环境说明(要么所有安装包基于cdh,要么都不基于) 操作系统：CentOS 7 Hadoop 2.6.0(按照原先文档安装) Zookeeper3.4.5(按照原先文档安装) Hbase1.1.4(按照原先文档安装...) Hive2.0(按照原先文档安装) Spark1.5.0 MySQL 5.1(按照原先文档安装) JDK
安装Mysql 在集群中选择一台节点进行安装mysql yum -y install mariadb-server mariadb 开启服务并配置开机自启 systemctl start...mariadb 所有节点安装mysql-connector驱动 yum -y install mysql-connector-java 安装之后的路径为/usr/share/java.../mysql-connector-java.jar 安装其他依赖包 yum -y install psmisc yum -y install perl...Hive的配置 hive只需要在一节点安装（服务端）即可 根据对应hadoop版本下载软件包 上传并解压到节点 配置环境变量 修改配置文件 cd .....> jdbc:mysql://hadoop1:3306/hive?
Centos 6.5是本文采用的操作系统 2， 安装mysql yum install mysql-server -y ?...启动mysql service mysqld status service mysqld start ?...测试 mysql -uroot -p123456 ? 整理认证权限 名字叫mysql的数据库中假如需要的认证。 ? 重点强调一定要执行: flush privileges; 二，安装Hive 1....本地安装测试 配置好HIVE_HOME等环境变量 # Hive export HIVE_HOME=/opt/modules/hive-1.2.1 export HIVE_CONF_DIR=$HIVE_HOME...推荐阅读： 1，Hadoop伪分布式集群安装部署 2，Spark部署模式另类详解 3，Hbase源码系列之BufferedMutator的Demo和源码解析
一、第一种安装方式 不要使用此安装方式，讲述这种安装方式，仅仅用于测试hive默认使用derby数据库的缺陷。你可以在下面的安装步骤中看到，我连环境变量都没有配置。...也就是说，使用derby作为hive的默认数据库，不同用户之间元数据库不能共享，也就导致元数据信息不能共享，只能被当前用户"独享"。 二、第二种安装方式 推荐使用此种安装方式。...1）首先保证你的linux中安装好了mysql 2）上传安装包 3）解压 apps是我在家目录下的hadoop用户下(/home/hadoop)，已经创建好的一个文件夹。...--元数据库的连接地址：这里使用的是mysql数据库--> <!...安装目录的1ib目录下 7）元数据库的初始化 命令如下： schematool -dbType mysql -initSchema 效果如下： 8）启动命令：hive 9）测试:可以使用如下测试命令
hadoop的版本是2.6.0 根据hive的源数据不同分为三种模式 1、内嵌模式，使用自带的derby 2、本地独立模式，本地mysql库 3、远程模式，远程mysql库...得配置完成，在远程主机上安装mysql，远程主机可以是任意操作系统，我这里用的是win7-x64，安装完成后新建数据库名为hive，字符集采用latin1， 回到centos7，找到hive主目录下得lib...，放入mysql得连接jar,mysql-connector-java-5.1.27-bin.jar，然后找到一个叫jline-2.1.2.jar得文件，复制他，去hadoop主目录将hadoop下得三个同名但不同版本得...那么下载一个hive-0.3.0，将其中lib下得hive-hwi-0.3.0.war拷贝到hive安装目录下得lib里，当然参照刚才得配置还要修改一下名字，回到主目录打开命令行，输入如下命令： bin...:9999/hwi （加入安装hive得主机ip地址是192.168.1.55） 下面是我得截图 ?
hive.metastore.uris Thrift uri for the remote metastore... javax.jdo.option.ConnectionURL jdbc:mysql:/.../localhost:3306/mysql?...=true javax.jdo.option.ConnectionDriverName com.mysql.jdbc.Driver.../beeline -u jdbc:hive2://yangsy132:10000/default -n root -p yangsiyi
Hadoop的版本是2.7.2，Hive的版本是2.1.1，版本要对应。 Hadoop的安装略，JDK的安装略。安装在192.168.33.33这台机器上。 ...首先安装JDK，略。 之后将Hadoop集群上的hadoop包拷贝到192.168.33.33，将HADOOP_HOME加入到PATH中。...Hive需要将元数据存储在数据库中，我们使用mysql，搭建mysql略。 1、将Hive安装包放在/opt下，解压，之后将mysql的jdbc连接包放在hive/lib下。...> javax.jdo.option.ConnectionURL jdbc:mysql:/...加入到PATH中，之后初始化，执行"schematool -dbType mysql -initSchema" 5、启动元数据服务，执行"hive --service metastore" 6、启动hiveserver
Hive 0.12.0安装指南.pdf 1. 前言 本文的安装参照了官方的文档：GettingStarted，将Hive 0.12.0安装在Hadoop 2.4.0上。...本文将Hive配置成Server模式，并且使用MySQL作为元数据数据库，远程连接MySQL。 关于Hadoop 2.4.0的安装，请参见《Hadoop-2.4.0分布式安装手册》一文。...安装MySQL 4.1. 安装MySQL 本文MySQL被安装在172.25.39.166机器上，Hive用MySQL来存储元数据，因此需要先安装好MySQL。...将二进制安装包解压后，可看到名为INSTALL-BINARY的文件，该文件有说明如何安装MySQL，本文基本参照它进行的，MySQL安装目录为/data/hadoop/mysql，具体步骤如下（未使用mysql...安装MySQL-Connector MySQL-Connector下载网址：http://dev.mysql.com/downloads/connector/。
一、HDFS安装 1、解压到指定位置tar -zxvf apache-hive-3.1.2-bin.tar.gz -C /usr/local/apps/ 2、改名mv apache-hive-3.1.2...-bin/ hive-3.1.2 3、在·conf·目录下添加Hadoop安装路径mv hive-env.sh.template hive-env.sh # 配置HADOOP_HOME路径 export...=$PATH:$HIVE_HOME/bin export HIVE_CONF_DIR=$HIVE_HOME/conf 二、将Hive元数据配置到MySql Hive Metastore服务将Hive表和分区的元数据存储在关系数据库中...Metastore默认存储在自带的derby数据库中，推荐使用MySQL存储Metastore; 1、解压驱动包tar -zxvf mysql-connector-java-5.1.49.tar.gz...2、驱动拷贝cp mysql-connector-java-5.1.49-bin.jar /usr/local/apps/hive-3.1.2/lib 3、vim hive-site.xml <?
这里只将如何部署hive，关于docker的安装部署可以参考这篇文章Docker的简单使用 安装hive git clone git@github.com:big-data-europe/docker-hive.git...# 注：本文所有docker-compose都是在docker-hive目录下执行的 cd docker-hive # 这步在后台起一个hive，元数据库用的是postgresql # 会费一点时间...，需要耐心等待 docker-compose up -d hive命令行 # 进入bash docker-compose exec hive-server bash # 使用beeline客户端连接.../opt/hive/bin/beeline -u jdbc:hive2://localhost:10000
这篇文章记录了如何在linux上安装hive。因为hive基于Hadoop，所以需要先安装Hadoop，如果你还没有安装Hadoop，可以参考linux上安装和配置Hadoop(单节点)进行安装。...下载和安装hive 前往Apache的官方下载地址：https://hive.apache.org/downloads.html，经历两个二级下载页后，获得到最终的下载地址。 ?...下载hive 登录linux系统，进入~/downloads文件夹，使用wget命令，下载安装包。这里安装的是次新版本2.3.3。...我是以root用户安装的hive，在我的主机上，这个目录位于/root下。...默认情况下hive使用derby数据库将元信息保存在本地，一种更常见的做法是保存到mysql数据库，具体操作可以查看这里：配置Hive使用MySql存储元数据。
环境的部署和启动请参考《Linux部署hadoop2.7.7集群》； 注意：确保环境变量中有HADOOP_HOME的配置； 安装和配置MySQL(5.7.27版本) MySQL用来存储元数据，我这里为了简化操作是在...进入mysql容器： docker exec -it mysql /bin/bash 进入容器后连接mysql，密码是888888： mysql -h127.0.0.1 -uroot -p 新建名为hive...mysql service mysql restart 再次进入mysql容器，以hive账号的身份登录mysql： mysql -uhive -p 创建名为hive的数据库： CREATE DATABASE...hive; 安装hive 去hive官网下载，地址是：http://mirror.bit.edu.cn/apache/hive/ ，选择合适的版本，如下图： ?...的安装和体验实战就完成了，希望本文能给一起学习hive的读者们一些参考。
安装 1....下载HIVE 假设你的电脑已经安装了MySQL 我的Hadoop版本是2.9.2, 我下载的对应HIVE版本是1.2.2 之前下载了 2.3.4 结果版本太新不匹配 https://hive.apache.org...配置HIVE 2.1 配置环境变量 vim ~/.bashrc # Hive export HIVE_HOME=/opt/hive-1.2.2 export PATH=${HIVE_HOME}...下载MySQL连接器 https://dev.mysql.com/downloads/connector/j/ 选择对应的版本下载: tar xvzf mysql-connector-java-5.1.47....tar.gz mv mysql-connector-java-5.1.47-bin.jar /opt/hive-1.2.2/lib/ 测试 输入命令hive进入命令交互界面 创建测试表: create
领取专属 10元无门槛券
手把手带您无忧上云
云服务器
ICP备案
对象存储
即时通信 IM
实时音视频
