Apache Phoenix 4.11.0 HBase 集群安装与基本配置

PDF文件

apache

hbase

java

下载需积分: 0 | 139KB | 更新于2024-08-05 | 183 浏览量 | 举报收藏

立即下载

本文档主要介绍了如何在Hadoop HBase集群上安装和配置Apache Phoenix版本4.11.0的过程。Phoenix是一个列式数据库，它是HBase的SQL查询层，提供了SQL接口来操作NoSQL HBase数据。 1. **下载与解压**: 首先，用户需要从Apache官网下载`apache-phoenix-4.11.0-HBase-1.1-bin`版本的安装包。解压后，将其中的`phoenix-4.11.0-HBase-1.1-server.jar`文件复制到集群各节点的HBase安装目录下的lib子目录中。这里使用了SCP（Secure Copy）命令进行跨主机文件传输，确保所有节点都有该jar文件。 2. **重启HBase服务**: 安装完成后，为了使HBase服务加载新添加的Phoenix JAR文件，需要重启HBase服务。这一步骤确保了HBase能够识别并利用新安装的Phoenix库进行操作。 3. **部署Phoenix目录**: 解压缩后的整个`apache-phoenix-4.11.0-HBase-1.1-bin`文件夹需要被复制到集群中的一台机器上，具体路径是`/usr/hdp/2.4.0.0-169/apache-phoenix-4.11.0-HBase-1.1-bin`。这个步骤可能是为了在该节点上作为Phoenix的安装和服务启动点。 4. **修改文件执行权限**: 为了确保后续操作的顺利执行，对`/usr/hdp/2.4.0.0-169/apache-phoenix-4.11.0-HBase-1.1-bin`目录及其内容赋予适当的执行权限，通常使用`chmod 755`命令，这意味着给予所有者读、写和执行权限，组和其他用户只有读和执行权限。 5. **简单使用示例**: 文档还提到了创建一个名为`us_population.sql`的表，这可能是Phoenix的一个示例或教程的一部分。在Phoenix中，用户可以通过SQL语句创建表结构，例如定义列、索引等，这对于数据管理至关重要。总结来说，本文档详细阐述了在HBase集群环境中安装和配置Apache Phoenix 4.11.0的基本步骤，包括文件的下载、部署、权限设置以及基本的使用示例。这对于那些想要在Hadoop生态系统中集成SQL查询能力的开发者或管理员来说，是一份宝贵的参考指南。

安装安装

1. 下载apache-phoenix-4.11.0-HBase-1.1-bin

2. 解压下载文件,将phoenix-4.11.0-HBase-1.1-server.jar复制到集群的hbase目录中的lib目录下

[root@vrv203 /]# scp /usr/hdp/2.4.0.0-169/hbase/lib/phoenix-4.11.0-HBase-1.1-server.jar root@vrv204://usr/hdp/2.4.0.0-169/hbase/lib/

phoenix-4.11.0-HBase-1.1-server.jar 100% 24MB 24.1MB/s 00:00

[root@vrv203 /]# scp /usr/hdp/2.4.0.0-169/hbase/lib/phoenix-4.11.0-HBase-1.1-server.jar root@vrv205://usr/hdp/2.4.0.0-169/hbase/lib/

phoenix-4.11.0-HBase-1.1-server.jar 100% 24MB 24.1MB/s 00:01

[root@vrv203 /]# scp /usr/hdp/2.4.0.0-169/hbase/lib/phoenix-4.11.0-HBase-1.1-server.jar root@vrv206://usr/hdp/2.4.0.0-169/hbase/lib/

phoenix-4.11.0-HBase-1.1-server.jar 100% 24MB 24.1MB/s 00:00

[root@vrv203 /]# scp /usr/hdp/2.4.0.0-169/hbase/lib/phoenix-4.11.0-HBase-1.1-server.jar root@vrv207://usr/hdp/2.4.0.0-169/hbase/lib/

phoenix-4.11.0-HBase-1.1-server.jar 100% 24MB 24.1MB/s 00:01

3. 重启hbase

4. 将解压出来的文件夹复制到集群的一台机器上去

/usr/hdp/2.4.0.0-169/apache-phoenix-4.11.0-HBase-1.1-bin

5. 修改文件执行权限

chmod 755 /usr/hdp/2.4.0.0-169/apache-phoenix-4.11.0-HBase-1.1-bin/bin/*.py

简单使用简单使用

创建 us_population.sql

CREATE TABLE IF NOT EXISTS us_population (

state CHAR(2) NOT NULL,

city VARCHAR NOT NULL,

population BIGINT CONSTRAINT my_pk PRIMARY KEY (state,city)

);

创建 us_population.csv

state city population

NY New York 8143197

CA Los Angeles 3844829

IL Chicago 2842518

TX Houston 2016582

PA Philadelphia 1463281

AZ Phoenix 1461575

TX San Antonio 1256509

CA San Diego 1255540

TX Dallas 1213825

CA San Jose 912332

创建 us_population_queries.sql

SELECT state as "State",count(city) as "City Count",sum(population) as "Population Sum" FROM us_population GROUP BY state ORDER BY sum(population) DESC;

切换到phoenix的bin目录下执行以下命令