美文网首页
CDH6.0-HBase集成Phoenix5.0

CDH6.0-HBase集成Phoenix5.0

作者: 天生小包 | 来源:发表于2020-04-14 14:42 被阅读0次

Apache Phoenix 为 Apache Hadoop 提供基于 SQL 的 OLTP 和运营分析,使用 Apache HBase 作为其后备存储,并提供与 Apache 生态系统中其他项目的集成,如 Spark、Hive、Pig、Flume和 MapReduce 。

1、下载Phoenix
$ wget http://apache.fayea.com/phoenix/apache-phoenix-5.0.0-HBase-2.0/bin/apache-phoenix-5.0.0-HBase-2.0-bin.tar.gz
2、将phoenix*.jar拷贝到各个节点

包括Master、HBase的每个节点

 $ cd apache-phoenix-5.0.0-HBase-2.0-bin  
 $ scp -r apache-phoenix-5.0.0-HBase-2.0-bin.tar.gz cdh@cdh02:/home/cdh/
3、解压Phoenix
$ tar -zxvf apache-phoenix-5.0.0-HBase-2.0-bin.tar.gz
$ cd apache-phoenix-5.0.0-HBase-2.0-bin
$ sudo phoenix*.jar  /opt/cloudera/parcels/CDH/lib/hbase/lib/

4、增加hbase-site.xml 配置

hbase-site.xml 的 Gateway客户端高级配置代码段(安全阀)
hbase-site.xml 的 RegionServer 高级配置代码段(安全阀)
切记!!! 这两个地方都要添加, 否则RegionServer启动不了
1、二级索引支持
<property>
  <name>hbase.regionserver.wal.codec</name>
  <value>org.apache.hadoop.hbase.regionserver.wal.IndexedWALEditCodec</value>
</property>
1、命名空间开启
<property>
  <name>phoenix.schema.isNamespaceMappingEnabled</name>
  <value>consistent</value>
</property>
HBase >> 配置 >> RegionServer >> 高级 >> ssl-server.xml 的 HBase 服务高级配置代码段(安全阀)>> 点击 + 添加
图一
图二
HBase >> 配置 >> Gateway >> 高级 >> ssl-server.xml 的 HBase 服务高级配置代码段(安全阀)>> 点击 + 添加
图三
图四

5、重启Hbase集群, 部署客户端配置

图五
把core.xml、hdfs.xml、hbase.xml拷贝到/home/cdh/apache-phoenix-5.0.0-HBase-2.0-bin/bin/下
 $ 上传下载文件到服务器,拷贝目录下所有文件到 /home/cdh/apache-phoenix-5.0.0-HBase-2.0-bin/bin/
 $ cp *.xml  /home/cdh/apache-phoenix-5.0.0-HBase-2.0-bin/bin/
 $ /home/cdh/apache-phoenix-5.0.0-HBase-2.0-bin/bin/sqlline.py
图四
Java使用引入依赖
<dependency>
  <groupId>org.apache.phoenix</groupId>
  <artifactId>phoenix-core</artifactId>
  <version>5.0.0-HBase-2.0</version>
  <exclusions> 
    <exclusion> 
      <groupId>org.apache.log4j</groupId>
      <artifactId>*</artifactId>
    </exclusion>
    <exclusion> 
      <groupId>org.slf4j</groupId> 
      <artifactId>*</artifactId> 
    </exclusion> 
    <exclusion> 
      <groupId>com.google.guava</groupId> 
      <artifactId>*</artifactId> 
    </exclusion> 
    <exclusion> 
      <groupId>org.mortbay.jetty</groupId> 
      <artifactId>*</artifactId> 
    </exclusion> 
    <exclusion> 
      <groupId>javax.servlet</groupId> 
      <artifactId>*</artifactId> 
    </exclusion> 
  </exclusions> 
</dependency> 
<dependency> 
  <groupId>com.google.guava</groupId> 
  <artifactId>guava</artifactId> 
  <version>16.0.1</version> 
</dependency> 
<!-- https://mvnrepository.com/artifact/org.apache.hadoop/hadoop-common -->      
<dependency> 
  <groupId>org.apache.hadoop</groupId> 
  <artifactId>hadoop-common</artifactId> 
  <version>2.8.4</version> 
</dependency>

package com.pactera.hbase;
import java.sql.*; 
public class Phoenix { 
  private static String driver = "org.apache.phoenix.jdbc.PhoenixDriver"; 
  public static void main(String[] args) throws SQLException { 
      try 
      { 
            Class.forName(driver); 
      } catch (ClassNotFoundException e) { 
            e.printStackTrace(); 
      }
   Statement stmt = null; 
   ResultSet rs = null; 
  Connection con = DriverManager.getConnection("jdbc:phoenix:storage01,storage02,storage03:2181/hbase"); 
  stmt = con.createStatement(); 
  String sql = "select * from test_phoenix_api"; 
  rs = stmt.executeQuery(sql); 
  while (rs.next()) { 
      System.out.print("id:"+rs.getInt("mykey"));         
      System.out.println(",name:"+rs.getString("mycolumn")); 
  } 
  stmt.close(); 
  con.close(); 
}
}

相关文章

  • CDH6.0-HBase集成Phoenix5.0

    Apache Phoenix 为 Apache Hadoop 提供基于 SQL 的 OLTP 和运营分析,使用 A...

  • 【3】企业集成EAI概要

    企业应用集成(EAI)可以包括表示集成、数据集成、控制集成和业务流程集成等多个层次和方面。 1.表示集成表示集成也...

  • 集成Facebook广告、分享集成笔记

    集成Facebook广告、分享集成笔记 1、集成Facebook广告2、集成Facebook分享 Facebook...

  • iOS原生集成H5+详细流程

    iOS原生集成H5+ 集成方式 独立应用方式集成 Widget方式集成 WebView方式集成 可以打开官方链接:...

  • iOS开发 - SMSSDK(短信验证)

    Mob 的SMS短信验证集成和使用 1.集成##### 集成可以用cocoapods来集成,也可以手动集成,这里就...

  • SpringBoot 集成

    SpringBoot 集成 redis SpringBoot集成mongodb SpringBoot集成Beetl...

  • 竹木纤维集成墙面好不好

    竹木纤维集成墙面优点 集成墙板十大品牌排名竹木纤维集成墙面用户集成墙面价格表 竹木纤维集成墙面 新型集成墙面装饰板...

  • iOS 友盟分享

    前言:学习笔记大致流程: (只记录 pod集成)1.集成SDK 1.1 自动集成 (Pod) [集成链接](...

  • 软件测试基础

    测试流程 单元 > 集成 > 系统 > 验收 集成测试 主要分为:一次性集成和增殖式集成。 一次性集成 自顶向下 ...

  • Android原生集成Flutter的两种方式

    Android原生集成flutter分为两种方式:源码集成和aar集成 一、Flutter源码集成 将Flutte...

网友评论

      本文标题:CDH6.0-HBase集成Phoenix5.0

      本文链接:https://www.haomeiwen.com/subject/wihpcctx.html