美文网首页
单机版hive的搭建

单机版hive的搭建

作者: 程序媛啊 | 来源:发表于2018-04-24 23:00 被阅读0次

1. 下载安装

1.1 这里选择安装的是3.1.2,使用下面命令进行下载:

1 # cd ~/software
2 wget http://mirror.bit.edu.cn/apache/hive/hive-3.1.2/apache-hive-3.1.2-bin.tar.gz

1.2 解压重命名

1 tar -xzvf apache-hive-3.1.2-bin.tar.gz
2 mv apache-hive-3.1.2-bin.tar.gz hive

1.3 配置环境变量

使用vim编辑~/.bashrc文件,加入以下配置(目录换成自己的安装目录):
1 # hive home /software/hive
2 export HIVE_HOME=/software/hive
3 export PATH=$PATH:$HIVE_HOME/bin
使用source命令使配置生效: source ~/.bashrc
可以使用echo $PATH 输出查看是否正确

2. 简单配置

2.1 配置hive-env.sh

文件位置:$HIVE_HOME/hive/conf/hive-env.sh.template

命令:

1 cd /software/hive/conf
2 # 复制并重命名
3 cp hive-env.sh.template hive-env.sh
4 vim hive-env.sh

配置如下:

1 # 相应的目录换成自己的
2 # hadoop 目录
3 HADOOP_HOME=/software/hadoop
4 
5 # hive 配置目录
6 export HIVE_CONF_DIR=/software/hive/conf
7 
8 # hive 的lib目录
9 export HIVE_AUX_JARS_PATH=/software/hive/lib

2.2 创建并配置hive-site.xml

文件位置: $HIVE_HOME/hive/conf/

命令:

1 cd /software/hive/conf
2 # 会自动创建
3 vim hive-site.xml

配置:

<?xml version="1.0" encoding="UTF-8" standalone="no"?>
<?xml-stylesheet type="text/xsl" href="configuration.xsl"?>
<configuration>
    <!-- jdbc-url -->
    <property>
        <name>javax.jdo.option.ConnectionURL</name>
        <value>jdbc:mysql://localhost:3306/hive?createDatabaseIfNotExist=true&amp;useUnicode=true&amp;characterEncoding=UTF-8&amp;useSSL=false</value>
    </property>
    <!-- jdbc-driver -->
    <property>
        <name>javax.jdo.option.ConnectionDriverName</name>
        <value>com.mysql.jdbc.Driver</value>
    </property>
    <!-- 数据库用户名 -->
    <property>
        <name>javax.jdo.option.ConnectionUserName</name>
        <value>root</value>
    </property>
    <!-- 数据密码-->
    <property>
        <name>javax.jdo.option.ConnectionPassword</name>
        <value>*******</value>
    </property>
    <property>
        <name>datanucleus.readOnlyDatastore</name>
        <value>false</value>
    </property>
    <property>
        <name>datanucleus.fixedDatastore</name>
        <value>false</value>
    </property>
    <property>
        <name>datanucleus.autoCreateSchema</name>
        <value>true</value>
    </property>
    <property>
        <name>datanucleus.schema.autoCreateAll</name>
        <value>true</value>
    </property>
    <property>
        <name>datanucleus.autoCreateTables</name>
        <value>true</value>
    </property>
    <property>
        <name>datanucleus.autoCreateColumns</name>
        <value>true</value>
    </property>
    <property>
        <name>hive.metastore.local</name>
        <value>true</value>
    </property>
    <!-- 显示表的列名 -->
    <property>
        <name>hive.cli.print.header</name>
        <value>true</value>
    </property>
    <!-- 显示数据库名称 -->
    <property>
        <name>hive.cli.print.current.db</name>
        <value>true</value>
    </property>
    <property>
        <name>hive.exec.local.scratchdir</name>
        <value>/usr/local/hive</value>
        <description>Local scratch space for Hive jobs</description>
    </property>
    <!-- 自定义目录start -->
    <property>
        <name>hive.downloaded.resources.dir</name>
        <value>/usr/local/hive/hive-downloaded-addDir/</value>
        <description>Temporary local directory for added resources in the remote file system.</description>
    </property>
    <property>
        <name>hive.querylog.location</name>
        <value>/usr/local/hive/querylog-location-addDir/</value>
        <description>Location of Hive run time structured log file</description>
    </property>
    <property>
        <name>hive.server2.logging.operation.log.location</name>
        <value>/usr/local/hive/hive-logging-operation-log-addDir/</value>
        <description>Top level directory where operation logs are stored if logging functionality is enabled</description>
    </property>
    <!-- 自定义目录end -->
</configuration>

2.3 格式化数据库及验证

1 # 格式化数据库
2 schematool -dbType mysql -initSchema
3 
4 # 启动hive
5 hive
6 
7 # 查看数据库
8 hive> show databases;

Tips:

1.如报错显示没有数据库连接驱动则下载mysql驱动包到hive目录下的lib目录下
1 cd /software/hive/lib
2 wget http://central.maven.org/maven2/mysql/mysql-connector-java/6.0.6/mysql-connector-java-6.0.6.jar
2.自定义hive的连接用户名和密码

转载自:https://www.cnblogs.com/dintalk/p/12234726.html

相关文章

  • 单机版hive的搭建

    1. 下载安装 1.1 这里选择安装的是3.1.2,使用下面命令进行下载: 1.2 解压重命名 1.3 配置环境变...

  • 21.1Hive复习

    Hive hive是数据仓库,用途:分析,决策类影响hive搭建 注意,搭建是按照元数据的存储和管理进行搭建的 搭...

  • Spark课程大纲

    Spark环境搭建 Centos Spark单机版伪分布式模式Spark单机版intelij开发(maven)Sp...

  • spark课程大纲

    Spark环境搭建 Centos Spark单机版伪分布式模式Spark单机版intelij开发(maven)Sp...

  • spark课程大纲

    Spark环境搭建 Centos Spark单机版伪分布式模式Spark单机版intelij开发(maven)Sp...

  • spark课程大纲

    Spark环境搭建 Centos Spark单机版伪分布式模式Spark单机版intelij开发(maven)Sp...

  • spark学习课程大纲

    Spark环境搭建 Centos Spark单机版伪分布式模式Spark单机版intelij开发(maven)Sp...

  • 07_hive_搭建_启动_使用

    [TOC] 1. 搭建hive 1.1 上传hive安装包 上传apache-hive-1.2.1-bin.tar...

  • Hive安装与简单使用并集成SparkSQL

    Hive环境搭建 hive下载:http://archive-primary.cloudera.com/cdh5/...

  • Hive搭建

    Hive搭建 系统环境: Ubuntu 16 Java 8 Hadoop 2.7 Hive 1.2 MySQL 按...

网友评论

      本文标题:单机版hive的搭建

      本文链接:https://www.haomeiwen.com/subject/ykislftx.html