李锋镝的博客 - LiFengdi.Com

  • 首页
  • 时间轴
  • 留言
  • 左邻右舍
  • 我的日常
  • 关于我
青衿之志 履践致远
霁月光风 不萦于怀
  1. 首页
  2. 原创
  3. 正文

HBASE填坑日志

2019年6月13日 16245点热度 0人点赞 3条评论

总结:

1.查询时能用rowKey查询尽量使用rowKey查询,这样hbase能最快确定数据在集群中的哪台机器上。

 

2.Scan.setReversed(true)、Filter.setReversed(true)可以将查询结果反转,但是有些限制:

使用Scan.setStartRow() Scan.setStopRow()时,如果Scan.setReversed(true)会导致查询不到数据。

使用FilterList时,所有的filter的reversed必须相同,否则会报错(Filters in the list must have the same reversed flag, this.reversed=XXX)。

 

3.Scan.setBatch()指定最多返回的Cell的数量,防止OutofMemory。

 

4.分页可以使用PageFilter,但是不能获取所有数据的总数量。

 

5.Filter.setFilterIfMissing()设置该行是否跳过。

 

6.可以使用SubstringComparator进行模糊查询;对RowKey使用RowFilter&RegexStringComparator进行正则查询;使用RowFilter&BinaryPrefixComparator对RowKey进行前缀查询。

 

7.按照时间戳查询可以使用Scan.setTimeRange()。

 

8.对于查询,使用Filter的效率远远低于使用RowKey(数据量越大越明显),设置合理的RowKey很重要,如果可以,尽量充分利用RowKey。

 

9.Scan.setMaxResultSize()设置的是二进制字节的大小,不是返回的数据的条数。

 

10.单条查询使用Get速度永远最快。

 

11.列族名、RowKey越短越好;能用一个列族搞定的就不要用两个列族,浪费空间,而且不方便查询。

 

暂时这么多,其他后续补充。

除非注明,否则均为李锋镝的博客 - LiFengdi.Com原创文章,转载必须以链接形式标明本文链接
本文链接:https://www.lifengdi.com/archives/article/91
本作品采用 知识共享署名 4.0 国际许可协议 进行许可
标签: hbase
最后更新:2019年6月13日

李锋镝

既然选择了远方,便只顾风雨兼程。

打赏 点赞
< 上一篇
下一篇 >
guest
您的姓名(必填)
您的邮箱(必填)
您的站点
guest
您的姓名(必填)
您的邮箱(必填)
您的站点
3 评论
最热
最新 最旧
Inline Feedbacks
查看所有评论
超新星
超新星
博主
2019年6月13日 17:18

沙发

0
0
回复
陈康
陈康
VIP
2020年9月9日 17:41

感谢博主、但有的业务需要scan.setReversed 和 withStartRow/withStopRow 一起使用查询不到值、请问这种有解决方法吗?谢谢~

0
-1
回复
李锋镝
李锋镝
博主
回复  陈康
2020年9月27日 16:19

@陈康 呃……我这边没有什么好的办法

0
0
回复
支付宝红包

夜阑卧听风吹雨,铁马冰河入梦来。

最新 热点 随机
最新 热点 随机
小记 hnswlib installation failed 一眨眼就三年了…… redis异常记录 今天,是我的第三十一个生日 回忆是一条没有尽头的路
今天,是我的第三十一个生日阳了...开工啦~国庆节过的也很累~~一眨眼就三年了……今天天气很好~心情也不差~
k8s + docker + Jenkins使用Pipeline部署SpringBoot项目时Jenkins错误集锦 哀莫大于心死 超级文艺的句子 妹妹的画【2019.09.26】 从零搭建Spring Cloud Gateway网关(三)——报文结构转换 TestNG基本注解
最近评论
李锋镝 发布于 4 天前(06月06日) 确实很烧脑,头发头快秃了
王光卫博客 发布于 4 天前(06月06日) 排错也是个耐心的工作啊,ChatGPT有时候也能解决简单的问题,复杂了又要烧脑
NK007 发布于 1 周前(06月01日) 啥三年啊
李锋镝 发布于 3 周前(05月22日) 兄弟开玩笑了~
王光卫博客 发布于 3 周前(05月22日) :douyin.19: 博主都在规划下个三年了,我当前还没活好
有情链接
  • 志文工作室
  • 临窗旋墨
  • 旧时繁华
  • 城南旧事
  • 强仔博客
  • 林三随笔
  • 徐艺扬的博客
  • 云辰博客
  • 韩小韩博客
  • 知向前端
  • 阿誉的博客
  • 林羽凡
  • 情侣头像
  • 哥斯拉
  • 博客录

COPYRIGHT © 2022 lifengdi.com. ALL RIGHTS RESERVED.

Theme Kratos Made By Seaton Jiang

豫ICP备16004681号-2