李锋镝的博客 - LiFengdi.Com

  • 首页
  • 时间轴
  • 留言
  • 左邻右舍
  • 我的日常
  • 关于我
青衿之志 履践致远
霁月光风 不萦于怀
  1. 首页
  2. 原创
  3. 正文

HBASE填坑日志

2019年6月13日 14226点热度 0人点赞 3条评论

总结:

1.查询时能用rowKey查询尽量使用rowKey查询,这样hbase能最快确定数据在集群中的哪台机器上。

 

2.Scan.setReversed(true)、Filter.setReversed(true)可以将查询结果反转,但是有些限制:

使用Scan.setStartRow() Scan.setStopRow()时,如果Scan.setReversed(true)会导致查询不到数据。

使用FilterList时,所有的filter的reversed必须相同,否则会报错(Filters in the list must have the same reversed flag, this.reversed=XXX)。

 

3.Scan.setBatch()指定最多返回的Cell的数量,防止OutofMemory。

 

4.分页可以使用PageFilter,但是不能获取所有数据的总数量。

 

5.Filter.setFilterIfMissing()设置该行是否跳过。

 

6.可以使用SubstringComparator进行模糊查询;对RowKey使用RowFilter&RegexStringComparator进行正则查询;使用RowFilter&BinaryPrefixComparator对RowKey进行前缀查询。

 

7.按照时间戳查询可以使用Scan.setTimeRange()。

 

8.对于查询,使用Filter的效率远远低于使用RowKey(数据量越大越明显),设置合理的RowKey很重要,如果可以,尽量充分利用RowKey。

 

9.Scan.setMaxResultSize()设置的是二进制字节的大小,不是返回的数据的条数。

 

10.单条查询使用Get速度永远最快。

 

11.列族名、RowKey越短越好;能用一个列族搞定的就不要用两个列族,浪费空间,而且不方便查询。

 

暂时这么多,其他后续补充。

除非注明,否则均为李锋镝的博客 - LiFengdi.Com原创文章,转载必须以链接形式标明本文链接
本文链接:https://www.lifengdi.com/archives/article/91
标签: hbase
最后更新:2019年6月13日

李锋镝

既然选择了远方,便只顾风雨兼程。

打赏 点赞
< 上一篇
下一篇 >
guest
您的姓名(必填)
您的邮箱(必填)
您的站点
guest
您的姓名(必填)
您的邮箱(必填)
您的站点
3 评论
最热
最新 最旧
Inline Feedbacks
查看所有评论
超新星
超新星
博主
2019年6月13日 17:18

沙发

0
0
回复
陈康
陈康
VIP
2020年9月9日 17:41

感谢博主、但有的业务需要scan.setReversed 和 withStartRow/withStopRow 一起使用查询不到值、请问这种有解决方法吗?谢谢~

0
-1
回复
李锋镝
李锋镝
博主
回复  陈康
2020年9月27日 16:19

@陈康 呃……我这边没有什么好的办法

0
0
回复
支付宝红包

一身转战三千里,一剑曾挡百万师。

最新 热点 随机
最新 热点 随机
开工啦~ 今晚,回家过年! 图数据库选型:Neo4j、Janus、HugeGraph Redisson分布式锁的watch dog自动续期机制 哀莫大于心死 你好,2023
居家办公了~C# 11 的这个新特性,我愿称之最强!看病难~取药难~~RocketMQ的push消费方式实现详解国庆节过的也很累~~开工啦~
新买的笔记本发货啦…… 还不懂Redis?看完这个故事就明白了! 背影 - 朱自清 微服务架构梳理总结 是时候优雅的和NullPointException说再见了 Java数组类型
最近评论
dd 发布于 42 分钟前(02月06日) 请问idea2022 myBatiscodehelperpro 3.1.5激活码?
Frankie Bridge 发布于 8 小时前(02月06日) I really like your writing style..Its so easily un...
Frankie Bridge 发布于 2 天前(02月05日) Hi! Just wondering- what template did you use for ...
lyshark 发布于 3 周前(01月18日) 已添加贵站,申请交换友链:) name: LyShark - 孤风洗剑 link: https:...
poetry 发布于 1 个月前(01月05日) 感谢分享
有情链接
  • 志文工作室
  • 临窗旋墨
  • 旧时繁华
  • 城南旧事
  • 强仔博客
  • 林三随笔
  • 徐艺扬的博客
  • 云辰博客
  • 韩小韩博客
  • 知向前端
  • 阿誉的博客
  • 林羽凡
  • 情侣头像
  • 哥斯拉

COPYRIGHT © 2022 lifengdi.com. ALL RIGHTS RESERVED.

Theme Kratos Made By Seaton Jiang

豫ICP备16004681号-2