在高并发的情况下,对数据row1  column=cf1:qual1, timestamp=1, value=val1的插入或者更新可能会导致非预期的情况,

例如:原本客户端A需要在value=val1的条件下将value更新成val_A,高并发下客户端B可能抢先将数据value=val1更新成value=val_B,这个时候客户端A如果还继续更新将不符合预期。

HBase中的CAS(compare-and-set)API用来解决这个数据一致性问题,简单的说CAS操作可以让你在put数据之前先经过某些条件的验证,只有满足条件的put才会入库。

hbase1.0版本的API:
checkAndPut(byte.md row, byte.md family, byte.md qualifier, byte.md value, Put put)
其中,put方法的最后一个参数是你需要录入的数据的put对象;
value是与服务端check的预期值,只有服务器端对应rowkey的数据与你预期的值相同时,你的put操作才能被提交的服务端。
但是这个API在2.0版本已经被弃用

新的API是checkAndMutate,一个流式API。checkAndMutate在后续的版本中还在持续改进中。

1、创建一个测试表demoTable,模拟一些测试数据

    //清除并插入测试数据
private static void createDemoTable() throws IOException {
String tableNameString = "demoTable";
if (helper.existsTable(tableNameString))
helper.dropTable(tableNameString);
helper.createTable(tableNameString, 100, "cf1", "cf2");
helper.put(tableNameString,
new String[]{"row1"},
new String[]{"cf1", "cf2"},
new String[]{"qual1", "qual2", "qual3"},
new long[]{1, 2, 3},
new String[]{"val1", "val2", "val3"});
System.out.println("Before check and mutate calls...");
helper.dump("testtable", new String[]{"row1"}, null, null);
}

结果类似这样:

2、测试cas,checkAndMutate支持流式函数格式

2.1 如果列数据还不存在就插入预期数据

        String tableNameString = "demoTable";
Table table = helper.getConnection().getTable(TableName.valueOf(tableNameString)); boolean res = false;
Put put = null; put = new Put(Bytes.toBytes("row1"));
put.addColumn(Bytes.toBytes("cf1"), Bytes.toBytes("qual4"), 4, Bytes.toBytes("val1"));
// 如果row1 cf1 qual4 不存在值就插入put数据
res = table.checkAndMutate(Bytes.toBytes("row1"), Bytes.toBytes("cf1"))
.qualifier(Bytes.toBytes("qual4"))
.ifNotExists()
.thenPut(put);
System.out.println("1 result is (expected true) :" + res);

执行结果:1 result is (expected true) :true

执行第二遍将返回false

2.2 如果列值相等就更新数据

        put = new Put(Bytes.toBytes("row1"));
put.addColumn(Bytes.toBytes("cf1"), Bytes.toBytes("qual1"), 4, Bytes.toBytes("val1"));
//如果row1 cf1 qual1 val1存在就插入put,因为这个value已经存在所以可以插入,结果返回true,时间戳变为4
res = table.checkAndMutate(Bytes.toBytes("row1"), Bytes.toBytes("cf1"))
.qualifier(Bytes.toBytes("qual1")).ifEquals(Bytes.toBytes("val1"))
.thenPut(put);
System.out.println("2 result is (expected true) :" + res);

执行结果:2 result is (expected true) :true

2.3 如果列值不等于则更新

        put = new Put(Bytes.toBytes("row1"));
put.addColumn(Bytes.toBytes("cf1"),Bytes.toBytes("qual1"),5,Bytes.toBytes("val2"));
////如果row1 cf1 qual1 不等于val2在就插入put
res = table.checkAndMutate(Bytes.toBytes("row1"), Bytes.toBytes("cf1"))
.qualifier(Bytes.toBytes("qual1"))
.ifMatches(CompareOperator.NOT_EQUAL,Bytes.toBytes("val2"))
.thenPut(put);
System.out.println("3 result is (expected true) :" + res);

2.4 多个条件组合判断,多个操作执行

        put = new Put(Bytes.toBytes("row1"));
put.addColumn(Bytes.toBytes("cf1"), Bytes.toBytes("qual5"),1,Bytes.toBytes("val1"));
put.addColumn(Bytes.toBytes("cf1"), Bytes.toBytes("qual6"),1,Bytes.toBytes("val1")); Delete delete = new Delete(Bytes.toBytes("row1"));
delete.addColumns(Bytes.toBytes("cf1"), Bytes.toBytes("qual4")); //RowMutations这个版本还没定型
RowMutations mutations = new RowMutations(Bytes.toBytes("row1"));
mutations.add(put);
mutations.add(delete); //row1 cf1 qual4 val1存在,row1 cf1 qual5和row1 cf1 qual6无值则插入qual5和qual6的值,并删除qual4的值
res = table.checkAndMutate(Bytes.toBytes("row1"),Bytes.toBytes("cf1")).qualifier(Bytes.toBytes("qual4"))
.ifEquals(Bytes.toBytes("val1"))
.qualifier(Bytes.toBytes("qual5")).ifNotExists()
.qualifier(Bytes.toBytes("qual6")).ifNotExists()
.thenMutate(mutations);
System.out.println("1 result is (expected true) :" + res);

3、hbase的cas操作针对是同一个行键下的数据。

hbase 原子操作cas的更多相关文章

  1. java并发编程系列二:原子操作/CAS

    什么是原子操作 不可被中断的一个或者一系列操作 实现原子操作的方式 Java可以通过锁和循环CAS的方式实现原子操作 CAS( Compare And Swap )  为什么要有CAS? Compar ...

  2. Java并发编程(十一)——原子操作CAS

    一.原子操作 syn基于阻塞的锁的机制,1.被阻塞的线程优先级很高,2.拿到锁的线程一直不释放锁怎么办?3.大量的竞争,消耗cpu,同时带来死锁或者其他安全. CAS的原理 CAS(Compare A ...

  3. java原子操作CAS

    本次内容主要讲原子操作的概念.原子操作的实现方式.CAS的使用.原理.3大问题及其解决方案,最后还讲到了JDK中经常使用到的原子操作类. 1.什么是原子操作? 所谓原子操作是指不会被线程调度机制打断的 ...

  4. 原子操作cas

    一.概念, 基于处理器指令,把比较和交换合成一个指令完成,保证了原子性: 因为是针对一个内存地址值的,一个内存地址指向一个变量,所以只对一个共享变量能保证原子性: 二.原子操作类 锁只有synchro ...

  5. 并发之ATOMIC原子操作--CAS乐观锁原理(二)

    1.乐观锁介绍 程序完成并发操作时,访问数据时每次不加锁,假设没有冲突去完成某项操作,如果因为冲突失败就重试,直到成功为止.就是当去做某个修改或其他操作的时候它认为不会有其他线程来做同样的操作(竞争) ...

  6. CAS 原子操作

    理会CAS和CAS: 有时候面试官面试问你的时候,会问,谈谈你对CAS的理解,这时应该有很多人,就会比较懵,当然,我也会比较懵,当然我和很多人的懵不同,很多人可能,并不知道CAS是一个什么东西,而在我 ...

  7. 原子操作&普通锁&读写锁

    一:原子操作CAS(compare-and-swap) 原子操作分三步:读取addr的值,和old进行比较,如果相等,则将new赋值给*addr,他能保证这三步一起执行完成,叫原子操作也就是说它不能再 ...

  8. CAS 无锁式同步机制

    计算机系统中,CPU 和内存之间是通过总线进行通信的,当某个线程占有 CPU 执行指令的时候,会尽可能的将一些需要从内存中访问的变量缓存在自己的高速缓存区中,而修改也不会立即映射到内存. 而此时,其他 ...

  9. CAS无锁实现原理以及ABA问题

    CAS(比较与交换,Compare and swap) 是一种有名的无锁算法.无锁编程,即不使用锁的情况下实现多线程之间的变量同步,也就是在没有线程被阻塞的情况下实现变量的同步,所以也叫非阻塞同步(N ...

随机推荐

  1. Centos6.8配置JDK

    下载jdk-版本号.tar.gz 解压到/usr/local/ vi /etc/profile 最后一行添加如下内容: export JAVA_HOME=/usr/local/jdk-版本号expor ...

  2. 011 --Mysql中特定查询

    1.优化COUNT()查询 COUNT()可能是被大家误解最多的函数了,它有两种不同的作用,其一是统计某个列值的数量,其二是统计行数.统计列值时,要求列值是非空的,它不会统计NULL.如果确认括号中的 ...

  3. 关于MySql数据库主键及索引的区别

    一.什么是索引?索引用来快速地寻找那些具有特定值的记录,所有MySQL索引都以B-树的形式保存.如果没有索引,执行查询时MySQL必须从第一个记录开始扫描整个表的所有记录,直至找到符合要求的记录.表里 ...

  4. Protocol buffer的使用案例

    Protocolbuffer(以下简称PB)是google 的一种数据交换的格式,它独立于语言,独立于平台.google 提供了多种语言的实现:java.c#.c++.go 和 python,每一种实 ...

  5. 2019CSUST集训队选拔赛题解(二)

    凛冬将至 Description 维斯特洛大陆的原住民是森林之子,他们长得如孩童一般,善于使用石器,威力值35,用树叶树枝作为衣物,在森林里繁衍生息,与万物和平相处.他们会使用古老的魔法(比如绿之视野 ...

  6. Linux命令之mount挂载

    挂载概念 Linux中的根目录以外的文件要想被访问,需要将其“关联”到根目录下的某个目录来实现,这种关联操作就是“挂载”,这个目录就是“挂载点”,解除次关联关系的过程称之为“卸载”. 注意:“挂载点” ...

  7. 根据 WBS 列新 PID 数据

    之前写过关于 菜单树的. http://www.cnblogs.com/newsea/archive/2012/08/01/2618731.html 现在在写城市树. 结构: CREATE TABLE ...

  8. java中重要的多线程工具类

    前言 之前学多线程的时候没有学习线程的同步工具类(辅助类).ps:当时觉得暂时用不上,认为是挺高深的知识点就没去管了.. 在前几天,朋友发了一篇比较好的Semaphore文章过来,然后在浏览博客的时候 ...

  9. C# Linq找不到行或已更改

    前段时间工作中的一个新需求,有机会用到了Linq to SQL.使用后的第一感觉,就是方便很多,也为整个项目节约了一大把的开发时间,甚至代码量也少了很多.不过在程序的实际运行中,始终会遇到一些莫名其妙 ...

  10. 自己对git的认识。

    刚打开这个软件的网页,只能用一个字来形容,蒙,蒙,蒙,重要的事要说三遍,全英文的,这到底是什么东西,连注册都得慢慢翻译,这英语基础实在是太差劲了. 看了老师推荐的对Git使用介绍,由于之前对这个软件的 ...