Bitmaps
核心知识点:
1.Bitmaps是一种特殊的“数据结构”,实质上是一个字符串,操作单元是位。
2.命令:
a.setbit:设置值,只能存储0和1,适用二元判断类型
b.getbit:获取值
c.bitcount:统计1的数量,可指定范围
d.bitop:可取交集、并集、非、异或
e.bitpos:第一个获取某种状态的偏移量
3.Bitmaps并不是任何场合都适合,在某些场合适用会有意想不到的效果。
1.数据结构模型
现代计算机用二进制(位)作为信息的基础单位,1个字节等位8位,例如“big”字符串是由3个字节组成,
但实际在计算机存储时将其用二进制表示,“big”分别对应的ASCII码分别是98、105、103,
对应的二进制分别是01100010、01101001和01100111,如下图:
许多开发语言都提供了操作位功能,合理地使用位能够有效地提高内存使用率和开发效率。
Redis提供了Bitmaps这个“数据结构”,可以实现对位的操作。把数据结构加上引号主要因为:
(1)Bitmaps本身不是一种数据结构,实际上它就是字符串,,但它可以对字符串的位进行操作;
(2)Bitmaps单独提供了一套命令,所以在Redis中使用Bitmaps和使用字符串的方法不太一样。
可以把Bitmaps想象成一个以位为单位的数组,数组的每个单元只能存储0和1,数组的下标在Bitmaps中叫做偏移量。
2.命令
本节将每个独立用户是否访问过网站存放在Bitmaps中,将访问的用户记做1,没有访问的用户记做0,用偏移量作为用户的id。
(1)设置值
setbit key offset value
设置键的第offset个位的值(从0算起),假设现在有20个用户,userid=0,5,11,15,19的用户对网站进行了访问,
那么当前Bitmaps初始化结果如图:
具体操作过程如下,unique:users:2016-04-05代表2016-04-05这天的独立访问用户的Bitmaps:
127.0.0.1:> setbit unique:users:--
(integer)
127.0.0.1:> setbit unique:users:--
(integer)
127.0.0.1:> setbit unique:users:--
(integer)
127.0.0.1:> setbit unique:users:--
(integer)
127.0.0.1:> setbit unique:users:--
(integer)
很多应用的用户id以一个指定的数字(例如10000)开头,直接将用户id和Birmaps的偏移量对应势必会造成一定的浪费,
通常的做法是每次做setbit操作时将用户id减去这个指定数字。
在第一次初始化Bitmaps时,如果偏移量非常大,那么整个初始化过程执行会比较慢,可能会造成Redis阻塞。
(2)获取值
getbit key offset
获取键的第offset位的值(从0开始计算),如果返回0代表没有访问,返回1代表访问过。
127.0.0.1:> getbit unique:users:--
(integer)
127.0.0.1:> getbit unique:users:--
(integer)
127.0.0.1:> getbit unique:users:--
(integer)
#不存在1000,自然返回0
(3)获取Bitmaps指定范围值为1的个数
bitcount key [start] [end]
127.0.0.1:> bitcount unique:users:--
(integer)
127.0.0.1:> bitcount unique:users:--
(integer)
127.0.0.1:> bitcount unique:users:--
(integer)
#start和and代表字节数,一个字节8位,1到3个字节就是索引在8到23之间
(4)Bitmaps间的运算
bitop op destkey key [key ...]
bitop是一个复合操作,它可以做多个Bitmaps的and(交集)、or(并集)、not(非)、xor(异或)操作,并将结果保存在destkey中。
下面有该网站连续2天客户访问的Bitmaps记录:
下面操作计算两天都访问网站的用户数:
127.0.0.1:> bitop and unique:users:and:--03_04 unique:users:-- unique:users:--
(integer)
127.0.0.1:> bitcount unique:users:and:--03_04
(integer)
下面操作计算两天中至少有一天访问网站的用户数:
127.0.0.1:> bitop or unique:users:or:--03_04 unique:users:-- unique:users:--
(integer)
127.0.0.1:> bitcount unique:users:or:--03_04
(integer)
(5)计算Bitmaps中第一个值为tergetBit的偏移量
bitpos key targetBit [start] [end]
下面操作计算2016-04-03这一天当前访问网站的最小用户id:
127.0.0.1:> bitpos unique:users:--
(integer) 0 #索引为1的用户最先访问
除此之外,bitpos还可以指定start和end,分别代表起始字节和结束字节:
127.0.0.1:> bitpos unique:users:--
(integer)
3.Bitmaps性能分析
假设网站有1亿用户,每天独立访问的用户是5000万,如果每天用集合类型和Bitmaps分别存储活跃用户。
很容易看出,在这种情况下Bitmaps能节省很多内存空间,尤其随着时间推移比较客观。
但是Bitmaps并不是万金油,当该网站每天访问的用户很少时,Bitmaps就有点不合时宜了。
注释:由于有5000万活跃用户,每个用户一个id,这就需要8位数字表示,每个数字一个字节因此就是64位。
Bitmaps的更多相关文章
- Displaying Bitmaps Efficiently 显示图片相关
http://developer.android.com/training/displaying-bitmaps/index.html .手机内存资源有限 .Bitmap占用的内存大 .App有时需要 ...
- 使用Redis bitmaps进行快速、简单、实时统计
原文:Fast, easy, realtime metrics using Redis bitmaps (http://blog.getspool.com/2011/11/29/fast-easy-r ...
- 高效使用Bitmaps(三) 神奇的Cache
转载:http://my.oschina.net/rengwuxian/blog/184650 应用的场景 假设你开发了一个聊天程序,它的好友列表中显示从网络获取的好友头像.可是如果用户发现每次进入好 ...
- 高效使用Bitmaps(一) 大Bitmap的加载
转载:http://my.oschina.net/rengwuxian/blog/182885 高效使用Bitmaps有什么好处? 我们常常提到的“Android程序优化”,通常指的是性能和内存的优化 ...
- android 如何分析java.lang.IllegalArgumentException: Cannot draw recycled bitmaps异常
这类问题的分析,通常你需要找到bitmap对象已经在那个位置recyle,然后检查代码. 如何定位的位置,其中代码具有对bitmap 目的recyle.能够 Bitmap.java的recycle方法 ...
- Android IllegalArgumentException: Cannot draw recycled bitmaps解决方法
在编码图集过程中,出现了Android IllegalArgumentException: Cannot draw recycled bitmaps错误. 大致意思是:不能使用已经被回收的bitmap ...
- Tkinter Bitmaps
Tkinter Bitmaps: 你会使用这个属性显示一个位图.有以下类型的可用位图. 你会使用这个属性显示一个位图.有以下类型的可用位图.: "error" "g ...
- 在UI线程之外,多线程处理Bitmaps
多线程处理Bitmaps 上一篇,我们讨论了:Android有效的处理Bitmap,降低内存 ,可是最好不要运行在主线程(UI线程),假设图片是本地的或者网络的又或者是其它地方的. 图片载入的 ...
- Loading Large Bitmaps Efficiently
有效地加载大位图文件-Loading Large Bitmaps Efficiently 图像有各种不同的形状和大小.在许多情况下,他们往往比一个典型应用程序的用户界面(UI)所需要的资源更大.例如, ...
随机推荐
- 【spring cloud】注解@SpringCloudApplication和@SpringBootApplication的区别
@SpringCloudApplication和@SpringBootApplication的区别
- [置顶]
python字典和nametuple互相转换例子
如果tuple中的元素很多的时候操作起来就比较麻烦,有可能会由于索引错误导致出错. namedtuple对象给tuple命名. 下面的例子可以字典和nametuple互相转换 aa={'verbosi ...
- hadoop datanode节点超时时间设置
datanode进程死亡或者网络故障造成datanode无法与namenode通信,namenode不会立即把该节点判定为死亡,要经过一段时间,这段时间暂称作超时时长. HDFS默认的超时时长为10分 ...
- nginx/iptables动态IP黑白名单实现方案
nginx/iptables动态IP黑白名单实现方案 一.手动封IP步骤 1.Nginx手动封IP 1.获取各个IP访问次数 awk '{print $1}' nginx.access.log |so ...
- 【前端GUI】—— 网站美工必须掌握的PS知识点&思维导图
前言:前端离不开与设计的沟通,有时候还需要自己上手改动甚至设计网页,所以这里简单梳理一下近期学习的“网站美工”相关知识及练习.(工作用不上的时候,自己玩儿着也蛮有意思的,哈哈(*゚∀゚*)~) 一.P ...
- 25. Spring Boot使用自定义的properties【从零开始学Spring Boot】
转:http://blog.csdn.net/linxingliang/article/details/52069515 spring boot使用application.properties默认了很 ...
- 公司的mysql-installer-community-5.7.19.0安装注意
需要安装Microsoft Visual C++ 2013 Redistributable(x64) 和 Microsoft Visual C++ 2013 Redistributable(x86) ...
- 【BIEE】BIEE报表根据维度表展示事实表不存在的维度
事实表数据 维度表数据 现在报表展示如下: 这样展示报表让人感觉数据缺失了,需要显示成如下样子,感觉会比较舒服一点 那么,如何实现上面的完美操作呢? 实现步骤 分析编辑页面→表视图属性→包含仅具有空行 ...
- [Flex][Adobe Flash Builder 4.6]谷歌浏览器(Chrome)下运行Flex程序的问题
今天刚开始学习Flex,发现用Chrome运行程序时会一片空白,上网查了相关资料后找到了解决方法: 打开Chrome,在地址栏输入:chrome://plugins/ 进入插件管理界面,查找Fla ...
- Node.js学习笔记(2)——关于异步编程风格
Node.js的异步编程风格是它的一大特点,在代码中就是体现在回调中. 首先是代码的顺序执行: function heavyCompute(n, callback) { var count = 0, ...