hive客户端安装操作手册

上传人:n**** 文档编号:56539755 上传时间:2018-10-13 格式:DOC 页数:7 大小:223.91KB
返回 下载 相关 举报
hive客户端安装操作手册_第1页
第1页 / 共7页
hive客户端安装操作手册_第2页
第2页 / 共7页
hive客户端安装操作手册_第3页
第3页 / 共7页
hive客户端安装操作手册_第4页
第4页 / 共7页
hive客户端安装操作手册_第5页
第5页 / 共7页
点击查看更多>>
资源描述

《hive客户端安装操作手册》由会员分享,可在线阅读,更多相关《hive客户端安装操作手册(7页珍藏版)》请在金锄头文库上搜索。

1、Hive 客户端安装操作手册客户端安装操作手册 文档修订记录 版本 编号 *变化 状态 简要说明(变更内容和变更范 围) 日期变更人 批准日 期 批准人 V0.1建立Hive 客户端安装操作手册2006-10-19陈卫群 *变化状态:建立,修改,增加,删除 文档审批信息 序号审批人角色审批日期签字备注 主机说明主机说明 机器名称机器名称IP 地址地址 10.1.4.159 Salve110.1.4.160 Salve210.1.4.161 Salve310.1.4.162 客户端机10.1.8.95 机器是 hadoop 大数据平台的主机 Salve1-salve3 是 hadoop 大数

2、据平台的数据节点 10.1.8.95 机器是作为应用服务器部署开发的机器,通过该台机器来与大数据平台进行交互 准备工作准备工作 目录规划目录规划 在 10.1.8.95 上规划/home/nmc/nlcis/soft 作为使用软件的存放目录 /home/nmc/nlcis/hive 作为存放与 hive 相关的信息目录 /home/nmc/nlcis/hadoop 作为存放 hadoop 有关的信息目录 操作实施操作实施 步骤步骤 1 1、查看当前的集群环境的、查看当前的集群环境的 hivehive 的版本和的版本和 hadoophadoop 的版的版 本本 通过下面的命令 hive vers

3、ion 查看 hive 的版本 Hadoop version 查看 hadoop 的版本 步骤步骤 2 2、下载对应版本的、下载对应版本的 hivehive 和和 hadoophadoop http:/ http:/ 步骤步骤 3 3、修改客户机、修改客户机 hostshosts 文件文件 需要切换至 root 用户 修改 /etc/hosts 新增如下: 步骤 4、安装 java,配置 JAVA_HOME 由于正常情况下我们没有 root 权限,在公司里面需要 root 权限需要找系统部,因此我们尽 量把 jdk 放到用户目录下。 (1) 、上传 jdk 至/home/nmc/nlcis/s

4、oft (2)解压 tar xvf jdk-7u40-linux-x64.tar.gz 后如下图所示: (3)设置 JAVA_HOME 环境变量 Cd Vi .bash_profile 增加:export JAVA_HOME=/home/nmc/nlcis/soft/jdk1.7.0_40 保存后执行,source .bash_profile 步骤步骤 4 4、解压、解压 hadoop-2.3.0-cdh5.0.2.tar.gzhadoop-2.3.0-cdh5.0.2.tar.gz 并配置并配置 hadoophadoop 配配 置文件置文件 如下图所示: (1)core-site.xml 直

5、接从 10.1.4.159 机器拷贝。 通过命令 scp /var/run/cloudera-scm-agent/process/341-hdfs-NAMENODE/core- site.xml nmc10.1.8.95:/home/nmc/nlcis/hadoop/hadoop-2.3.0-cdh5.0.2/etc/hadoop (2)mapred-site.xml 直接从 10.1.4.159 机器拷贝。 Scp /var/run/cloudera-scm-agent/process/341-hdfs-NAMENODE/mapred-site.xml nmc10.1.8.95:/home/

6、nmc/nlcis/hadoop/hadoop-2.3.0-cdh5.0.2/etc/hadoop (3)hadfs-site.xml 先从 10.1.4.159 机器上拷贝下来 (4)Scp /var/run/cloudera-scm-agent/process/341-hdfs-NAMENODE/hdfs-site.xml nmc10.1.8.95:/home/nmc/nlcis/hadoop/hadoop-2.3.0-cdh5.0.2/etc/hadoop 然后删除带.txt的两个参数,这个是白名单,没啥用 (5)yarn-site.xml 直接从 10.1.4.159 机器拷贝。 Sc

7、p /var/run/cloudera-scm-agent/process/341-hdfs-NAMENODE/yarn-site.xml nmc10.1.8.95:/home/nmc/nlcis/hadoop/hadoop-2.3.0-cdh5.0.2/etc/hadoop (6)hadoop-env.sh 的修改: #export JAVA_HOME=$JAVA_HOME export JAVA_HOME=/home/nmc/nlcis/soft/jdk1.7.0_40 通过以上六个操作完成了对本地 hadoop 的配置 步骤步骤 5 5、解压、解压 hive-0.12.0-cdh5.0.

8、2.tar.gzhive-0.12.0-cdh5.0.2.tar.gz 并配置并配置 hivehive 配置文配置文 件件 Tar xvf hive-0.12.0-cdh5.0.2.tar.gz 。 创建链接 ln /home/nmc/nlcis/hive/hive-0.12.0-cdh5.0.2 hive 如下所示: (1)进入 hive 下的 conf 目录 如下所示: A、编辑 hive-env.sh 修改如下: 退出保存 B、编辑 hive-log4j.properties 修改如下: C、修改 hive-site.xml 由于目前我们的集群环境 hive 的元数据库和 hive 服务

9、端分别安装在两台机器上。 Hive 的 meterstore(元数据库)在 10.1.4.160(slave1)机器 登录到 10.1.4.160 机器 进入目录:/var/run/cloudera-scm-agent/process 如下图所示: 将红色全红部分取回到本地 登录到 10.1.4.159 机器 进入目录:/var/run/cloudera-scm-agent/process 如下图所示: 将红色全红部分取回本地 将 429-hive-HIVESERVER2 和 430-hive-HIVEMETASTORE 进行一个合并,有相同部分 去重,合并成为一个文件 hive-site.x

10、ml,上传 hive-site.xml 文件至: /home/nmc/nlcis/hive/hive 下。同时修改 hive-site.xml 如下属性: 引用包路径的修改。这些包可以从集群机器上的任何一台机器下载至图中的目录下: /home/nmc/nlcis/hadoop/hadoop-2.3.0-cdh5.0.2/lib 比如从 10.1.4.160 机器上的目录/opt/cloudera/parcels/CDH-5.0.2-1.cdh5.0.2.p0.13/lib 下,下载 hive,habase 两个目录的内容至 10.1.8.95 机器上的 /home/nmc/nlcis/hado

11、op/hadoop-2.3.0-cdh5.0.2/lib 上。 可以通过如下命令: Scp -r /opt/cloudera/parcels/CDH-5.0.2-1.cdh5.0.2.p0.13/lib/hive nmc10.1.8.95:/home/nmc/nlcis/hadoop/hadoop-2.3.0-cdh5.0.2/etc/hadoop Scp -r /opt/cloudera/parcels/CDH-5.0.2-1.cdh5.0.2.p0.13/lib/habase nmc10.1.8.95:/home/nmc/nlcis/hadoop/hadoop-2.3.0-cdh5.0.2

12、/etc/hadoop 步骤步骤 6 6、修改环境变量、修改环境变量 修改当前的环境变量文件 Cd Vi .bash_profile HADOOP_HOME=/home/nmc/nlcis/hadoop/hadoop-2.3.0-cdh5.0.2 export JAVA_HOME=/home/nmc/nlcis/soft/jdk1.7.0_40 export JRE_HOME=/home/nmc/nlcis/soft/jdk1.7.0_40/jre PATH=$PATH:$HOME/bin export HIVE_HOME=/home/nmc/nlcis/hive/hive export PATH=$HIVE_HOME/bin:$HADOOP_HOME/bin:$JAVA_HOME:$PATH export HADOOP_HOME export PATH Source .bash_profile. 查看环境变量通过 echo $环境变量名。 步骤步骤 7 7、验证、验证 hivehive 客户端是否成功客户端是否成功 在终端下输入 hive 命令如下图所示: 切换数据库。然后执行查询语句如下图所示: 最后任务执行的结果: 到此 hive 客户端的安装完成。

展开阅读全文
相关资源
正为您匹配相似的精品文档
相关搜索

最新文档


当前位置:首页 > 办公文档 > 经验/事迹

电脑版 |金锄头文库版权所有
经营许可证:蜀ICP备13022795号 | 川公网安备 51140202000112号