hbase2.0.5
关注
分享
扫一扫
文章平均质量分 79
旧城里的阳光
大数据开发
展开
专栏收录文章
- 默认排序
- 最新发布
- 最早发布
- 最多阅读
- 最少阅读
-
Hbase实际使用场景以及相关可视化工具
Hbase实际使用场景以及相关可视化工具Hbase实际使用场景Hbase实际使用场景（1）当数据库来使用（存数据好读数据）需要注意的是，我们在使用的时候put一条一条数据不是做数据的处理，而是在做数据的记录，比如电商项目，购买商品，每一个操作记录记录在hbase里面，这是最基础的使用。（java后端用法）当涉及大量数据时候存储时候，mysql不好集成和拓展。大数据开发我们一般没有这种需求，需要明确。（2）我们到底怎么使用？例如采集项目，java后端通过业务处理存在mysql的数据，我们对海量数据原创 2021-03-09 19:47:16 · 12646 阅读 · 5 评论 -
Hbase与Hive的集成
Hbase与Hive的集成Hbase与Hive的对比Hbase与Hive的集成Hive中MetaServer与HiveServer2的区别Hbase集成总结Hbase与Hive的对比首先我们可以明确一点，与Hive一点关系都没有1.Hive(1) 数据仓库Hive的本质其实就相当于将HDFS中已经存储的文件在Mysql中做了一个双射关系，以方便使用HQL去管理查询。(2) 用于数据分析、清洗Hive适用于离线的数据分析和清洗，延迟较高。(3) 基于HDFS、MapReduceHive存储的原创 2021-03-08 21:07:42 · 1705 阅读 · 0 评论 -
Hbase2.0.5-整合Phoenix实际操作
Hbase2.0.5-整合Phoenix1.Hbase与Mysql区别2.Phoenix定义3.使用Phoenix原因4.Phoenix结构（Hbase）5.Phoenix安装6.Phoenix Shell6.1使用胖客户端进行连接1.Hbase与Mysql区别1.Mysql 创建表 一般一级索引为主键，二级索引2.Phoenix 支持创建二级索引，Hbase没有二级索引，默认rowkey设计已实现2.Phoenix定义1.Phoenix是HBase的开源SQL皮肤。可以使用标准JDBC API原创 2021-03-08 19:11:04 · 1557 阅读 · 0 评论 -
关于HBase中Rowkey的设计原则
关于HBase中Rowkey的设计原则hbase的数据是key-value结构！因此一条数据的唯一标识就是rowkey!region也是根据rowkey进行排序，根据rowkey进行切分！rowkey设计的好，可以提供系统负载均衡的能力！如何让regionserver负载均衡： 让数据可以基于rowkey排序后，均匀地分散到所有的region!防止数据倾斜！如何实现：①可以采取随机数，hash或散列运算，让rowkey足够散列②字符串反转③字符串拼接** Rowkey设计原则**...原创 2021-03-05 20:58:06 · 246 阅读 · 0 评论 -
Hbase2.0.5优化总结
Hbase2.0.5优化总结1.Hbase优化2.实际生产中Hbase的使用3.预定分区3.1 手动分区3.2 生成16进制分区序列预分区3.3按照文件设定的规则进行预分区1.Hbase优化Hbase优化核心就是结合分区_时间戳_关键字段联合使用。其中rowKey设计很重要。2.实际生产中Hbase的使用处理散列热点问题散列热点问题即处理数据的倾斜问题，只要从事于大数据工作，解决数据倾斜问题就不可避免。常见的散列问题：1.“双十一”淘宝订单可能引起热点现象：处理方式：根据订单时间戳进行字符串原创 2021-03-05 20:55:22 · 346 阅读 · 0 评论 -
Hbase2.0.5-API总结
Hbase2.0.5-API总结1. IDEA搭建方式2. 创建HbaseDDL类基本连接方法1. IDEA搭建方式<dependency> <groupId>org.apache.hbase</groupId> <artifactId>hbase-server</artifactId> <version>2.0.5</version></dependency><depen原创 2021-03-05 13:25:02 · 326 阅读 · 0 评论 -
Hbase2.0.5-API官网查询方式
目录1.怎样使用HbaseAPI1.怎样使用HbaseAPI第一步：去官网查=>https://hbase.apache.org/=>开发文档API 2.2文档==>User API =>https://hbase.apache.org/2.0/apidocs/index.html把2.2换成2.0就行，对应你的版本号第二步：找到Connection类第三步：使用翻译软件进行翻译A cluster connection encapsulati..原创 2021-03-05 12:59:20 · 565 阅读 · 0 评论 -
Hbase2.0.5总结
Hbase2.0.5总结1.什么是Hbase？2.Hbase与MySQL和Kafka之间联系与区别？3关系型数据库与非关系型数据库之间区别？4.分析Hbase逻辑结构图--对比MySQL来理解5.分析Hbase物理结构6.hbase数据模型指哪些？7.大表分布式拆分流程8.Hbase基础架构--不完整版1.什么是Hbase？1.一个分布式，可扩展的大数据存储数据库，非关系型数据库NOSQL2.Hbase与MySQL和Kafka之间联系与区别？1.Mysql对于海量的数据扩展，只能插磁盘2.Hba原创 2021-03-04 12:01:09 · 901 阅读 · 1 评论 -
Hbase-2.0.5
大数据技术之HBase-2.0.5第1章 HBase简介1.1 HBase定义1.2 HBase数据模型1.2.1 HBase逻辑结构1.2.2 HBase物理存储结构1.2.3 数据模型1.3 HBase基本架构第2章 HBase快速入门2.1 HBase安装部署2.1.1 Zookeeper正常部署2.1.2 Hadoop正常部署2.1.3 HBase的解压2.1.4 HBase的配置文件2.1.5 HBase远程发送到其他集群2.1.6 HBase服务的启动2.1.7 查看HBase页面2.1.8 高原创 2021-03-04 10:31:55 · 2986 阅读 · 1 评论