在高并发的情况下,对数据row1  column=cf1:qual1, timestamp=1, value=val1的插入或者更新可能会导致非预期的情况,

例如:原本客户端A需要在value=val1的条件下将value更新成val_A,高并发下客户端B可能抢先将数据value=val1更新成value=val_B,这个时候客户端A如果还继续更新将不符合预期。

HBase中的CAS(compare-and-set)API用来解决这个数据一致性问题,简单的说CAS操作可以让你在put数据之前先经过某些条件的验证,只有满足条件的put才会入库。

hbase1.0版本的API:
checkAndPut(byte.md row, byte.md family, byte.md qualifier, byte.md value, Put put)
其中,put方法的最后一个参数是你需要录入的数据的put对象;
value是与服务端check的预期值,只有服务器端对应rowkey的数据与你预期的值相同时,你的put操作才能被提交的服务端。
但是这个API在2.0版本已经被弃用

新的API是checkAndMutate,一个流式API。checkAndMutate在后续的版本中还在持续改进中。

1、创建一个测试表demoTable,模拟一些测试数据

    //清除并插入测试数据
private static void createDemoTable() throws IOException {
String tableNameString = "demoTable";
if (helper.existsTable(tableNameString))
helper.dropTable(tableNameString);
helper.createTable(tableNameString, 100, "cf1", "cf2");
helper.put(tableNameString,
new String[]{"row1"},
new String[]{"cf1", "cf2"},
new String[]{"qual1", "qual2", "qual3"},
new long[]{1, 2, 3},
new String[]{"val1", "val2", "val3"});
System.out.println("Before check and mutate calls...");
helper.dump("testtable", new String[]{"row1"}, null, null);
}

结果类似这样:

2、测试cas,checkAndMutate支持流式函数格式

2.1 如果列数据还不存在就插入预期数据

        String tableNameString = "demoTable";
Table table = helper.getConnection().getTable(TableName.valueOf(tableNameString)); boolean res = false;
Put put = null; put = new Put(Bytes.toBytes("row1"));
put.addColumn(Bytes.toBytes("cf1"), Bytes.toBytes("qual4"), 4, Bytes.toBytes("val1"));
// 如果row1 cf1 qual4 不存在值就插入put数据
res = table.checkAndMutate(Bytes.toBytes("row1"), Bytes.toBytes("cf1"))
.qualifier(Bytes.toBytes("qual4"))
.ifNotExists()
.thenPut(put);
System.out.println("1 result is (expected true) :" + res);

执行结果:1 result is (expected true) :true

执行第二遍将返回false

2.2 如果列值相等就更新数据

        put = new Put(Bytes.toBytes("row1"));
put.addColumn(Bytes.toBytes("cf1"), Bytes.toBytes("qual1"), 4, Bytes.toBytes("val1"));
//如果row1 cf1 qual1 val1存在就插入put,因为这个value已经存在所以可以插入,结果返回true,时间戳变为4
res = table.checkAndMutate(Bytes.toBytes("row1"), Bytes.toBytes("cf1"))
.qualifier(Bytes.toBytes("qual1")).ifEquals(Bytes.toBytes("val1"))
.thenPut(put);
System.out.println("2 result is (expected true) :" + res);

执行结果:2 result is (expected true) :true

2.3 如果列值不等于则更新

        put = new Put(Bytes.toBytes("row1"));
put.addColumn(Bytes.toBytes("cf1"),Bytes.toBytes("qual1"),5,Bytes.toBytes("val2"));
////如果row1 cf1 qual1 不等于val2在就插入put
res = table.checkAndMutate(Bytes.toBytes("row1"), Bytes.toBytes("cf1"))
.qualifier(Bytes.toBytes("qual1"))
.ifMatches(CompareOperator.NOT_EQUAL,Bytes.toBytes("val2"))
.thenPut(put);
System.out.println("3 result is (expected true) :" + res);

2.4 多个条件组合判断,多个操作执行

        put = new Put(Bytes.toBytes("row1"));
put.addColumn(Bytes.toBytes("cf1"), Bytes.toBytes("qual5"),1,Bytes.toBytes("val1"));
put.addColumn(Bytes.toBytes("cf1"), Bytes.toBytes("qual6"),1,Bytes.toBytes("val1")); Delete delete = new Delete(Bytes.toBytes("row1"));
delete.addColumns(Bytes.toBytes("cf1"), Bytes.toBytes("qual4")); //RowMutations这个版本还没定型
RowMutations mutations = new RowMutations(Bytes.toBytes("row1"));
mutations.add(put);
mutations.add(delete); //row1 cf1 qual4 val1存在,row1 cf1 qual5和row1 cf1 qual6无值则插入qual5和qual6的值,并删除qual4的值
res = table.checkAndMutate(Bytes.toBytes("row1"),Bytes.toBytes("cf1")).qualifier(Bytes.toBytes("qual4"))
.ifEquals(Bytes.toBytes("val1"))
.qualifier(Bytes.toBytes("qual5")).ifNotExists()
.qualifier(Bytes.toBytes("qual6")).ifNotExists()
.thenMutate(mutations);
System.out.println("1 result is (expected true) :" + res);

3、hbase的cas操作针对是同一个行键下的数据。

hbase 原子操作cas的更多相关文章

  1. java并发编程系列二:原子操作/CAS

    什么是原子操作 不可被中断的一个或者一系列操作 实现原子操作的方式 Java可以通过锁和循环CAS的方式实现原子操作 CAS( Compare And Swap )  为什么要有CAS? Compar ...

  2. Java并发编程(十一)——原子操作CAS

    一.原子操作 syn基于阻塞的锁的机制,1.被阻塞的线程优先级很高,2.拿到锁的线程一直不释放锁怎么办?3.大量的竞争,消耗cpu,同时带来死锁或者其他安全. CAS的原理 CAS(Compare A ...

  3. java原子操作CAS

    本次内容主要讲原子操作的概念.原子操作的实现方式.CAS的使用.原理.3大问题及其解决方案,最后还讲到了JDK中经常使用到的原子操作类. 1.什么是原子操作? 所谓原子操作是指不会被线程调度机制打断的 ...

  4. 原子操作cas

    一.概念, 基于处理器指令,把比较和交换合成一个指令完成,保证了原子性: 因为是针对一个内存地址值的,一个内存地址指向一个变量,所以只对一个共享变量能保证原子性: 二.原子操作类 锁只有synchro ...

  5. 并发之ATOMIC原子操作--CAS乐观锁原理(二)

    1.乐观锁介绍 程序完成并发操作时,访问数据时每次不加锁,假设没有冲突去完成某项操作,如果因为冲突失败就重试,直到成功为止.就是当去做某个修改或其他操作的时候它认为不会有其他线程来做同样的操作(竞争) ...

  6. CAS 原子操作

    理会CAS和CAS: 有时候面试官面试问你的时候,会问,谈谈你对CAS的理解,这时应该有很多人,就会比较懵,当然,我也会比较懵,当然我和很多人的懵不同,很多人可能,并不知道CAS是一个什么东西,而在我 ...

  7. 原子操作&普通锁&读写锁

    一:原子操作CAS(compare-and-swap) 原子操作分三步:读取addr的值,和old进行比较,如果相等,则将new赋值给*addr,他能保证这三步一起执行完成,叫原子操作也就是说它不能再 ...

  8. CAS 无锁式同步机制

    计算机系统中,CPU 和内存之间是通过总线进行通信的,当某个线程占有 CPU 执行指令的时候,会尽可能的将一些需要从内存中访问的变量缓存在自己的高速缓存区中,而修改也不会立即映射到内存. 而此时,其他 ...

  9. CAS无锁实现原理以及ABA问题

    CAS(比较与交换,Compare and swap) 是一种有名的无锁算法.无锁编程,即不使用锁的情况下实现多线程之间的变量同步,也就是在没有线程被阻塞的情况下实现变量的同步,所以也叫非阻塞同步(N ...

随机推荐

  1. 【Jmeter测试】接口请求完成后,查询数据库结果,检测数据存储是否正确

    Jmeter脚本逻辑 发送POST请求,把数据保存到数据库中 发讯数据库,数据库查询结果保存的变量中 使用BeanShell判断数据库查询结果 Jmeter脚本结构 第一个箭头指的是JDBC Conn ...

  2. Java中的Union Types和Intersection Types

    前言 Union Type和Intersection Type都是将多个类型结合起来的一个等价的"类型",它们并非是实际存在的类型. Union Type Union type(联 ...

  3. Python之NMAP详解

    一.NMAP简介 NMap,也就是Network Mapper,最早是Linux下的网络扫描和嗅探工具包. nmap是一个网络连接端扫描软件,用来扫描网上电脑开放的网络连接端.确定哪些服务运行在哪些连 ...

  4. SQL Server复制

    SQL Server复制的阶梯:级别1-SQL Server复制介绍 By Sebastian Meine, 2012/12/26 原文链接:http://www.sqlservercentral.c ...

  5. IDEA配置maven中央库

    分两步: STEP :配置maven: STEP :配置IDEA.区分默认配置和项目级配置. STEP 1:maven中央库配置 国内常用的maven库主要是阿里云maven库.华为云maven. 其 ...

  6. PCL 库存在vtk的问题导致libproj.so链接错误

    常变现为** No rule to make target '/usr/lib/x86_64-linux-gnu/libproj.so', needed by ××× vtk库的bug导致,目前尚未修 ...

  7. pstree命令详解

    基础命令学习目录首页 pstree命令是用于查看进程树之间的关系,即哪个进程是父进程,哪个是子进程,可以清楚的看出来是谁创建了谁#pstree几个重要的参数:-A: 各进程树之间的连接以ASCII码字 ...

  8. 元素transform: rotate()之后,元素宽高该怎么计算?

    通常,利用transform: rotate()元素之后,我们并不会去在意元素大小的变化,因为看上去并没有什么变化.虽然看上去没有变化,其实是有变化的.下面用一个例子来说明一下. html: < ...

  9. java程序设计课程实验报告1

    北京电子科技学院(BESTI) 实     验    报     告 课程:Java程序设计   班级:1353       姓名:陈都  学号:20135328 成绩:             指导 ...

  10. java 第一次实验报告

    北京电子科技学院(BESTI) 实     验    报     告 课程:Java程序设计 班级:1353  姓名:黎静  学号:20135338 成绩:             指导教师:娄嘉鹏  ...