shared_ptr的线程安全性与再论cmu15445 project0的COW线程安全字典树
shared_ptr的线程安全性
近期在网上冲浪时看到一篇boost的文章,里面聊到了shared_ptr的线程安全性
据原文所说,shared_ptr的线程安全性与c++中的容器是一致的。比如说std::map,你可以多线程访问,但是多个线程不能同时析构它,不能同时修改它。同样,shared_ptr可以多线程读,但是不能多线程析构,不能够多线程修改。这里说的shared_ptr是shared_ptr这个class本身的线程安全性与c++的其他容器是一致的,而不是shared_ptr所指向的对象。
一个shared_ptr至少包含了这几个成员:weak_count, ref_count, object_ptr。两个count都是原子类型的,所以对他们递增或递减是不存在多线程问题的。
更准确的说,一个shared_ptr的成员大概是这样的:
template <typename T>
class shared_ptr {
T *object_ptr;
struct Count {
atomic_int weak_count, ref_count;
};
Count *counts;
};
但是!众所周知,多线程线程安全性是不可组合的,所以这里两个原子操作,一旦混合起来就无法确保线程安全性。以前文链接中的example6为例子:
// 注意,这里p3是一个全局变量,所以可以被两个线程访问。
// thread A
p = p3; // reads p3, writes p
// thread B
p3.reset(); // writes p3; undefined, simultaneous read/write
这里p3.reset包含2个操作,两个都不是原子的,即object_ptr = nullptr, counts = nullptr。这里假定p3的ref_count是1,weak_count=0,那么如果说example6的执行顺序是这样的:
- thread A检查了counts->ref_count,发现不是0
- thread B调用reset,发现ref_count==1,所以析构了object_ptr,并设置其为nullptr
- thread A设置了counts = p3.counts
- thread B由于ref_count1, weak_count0, 释放了counts
- thread A尝试递增counts,完蛋了
有一个推荐的做法,即:
void ThreadFunc(shared_ptr p) {
shared_ptr local_copy;
{
lock_guard guard{mutex};
local_copy = p;
}
// 继续操作local_copy
......
}
这样做就符合了shared_ptr的线程安全性了。
cmu15445 Copy On Write的线程安全字典树(trie)
到这里忽然想到了之前做cmu15445的project0的时候也有不少用上shared_ptr的地方,所以想着回顾一下代码,看看有没有什么地方我忽略了线程安全性问题。
首先先介绍一下这个字典树的实现吧。
首先,它使用shared_ptr实现一个线程不安全的trie。假定一开始的trie是这样的:

然后我给插入了一个"ad",那么它会连着root一起复制一遍shared_ptr,原来的trie如虚线所示,新的trie则是蓝色部分:

可以看出,trie是从根开始,一路复制shared_ptr到需要修改的地方的。至于删除则类似。
那么这个trie的线程安全性如何?
看起来都是对原来的trie的读取,包括对shared_ptr的读取操作和每个节点的map<char,shared_ptr>的读取,所有的修改都只是在复制之后的副本上进行修改的。这样一来,只要保证初始被多个线程共享的root这个shared_ptr不会析构即可,这里可以用上前面推荐的操作:
struct Guard {
shared_ptr<TrieNode> guard;
// 为了减少代码,这里用void *这种形式来表现一个值
void *value;
}
shared_ptr<TrieNode> root;
// 这个Get操作有点MVCC的味道,都是读取的时候不会锁住所有写入操作的,都是可以访问历史版本的。
Guard Get(string_view sv) {
shared_ptr local_copy;
{
lock_guard lock{mutex};
local_copy = root;
}
return Guard{local_copy, local_copy->Get(string_view key)};
}
shared_ptr<TrieNode> Put(string_view key, void *value) {
shared_ptr local_copy;
{
lock_guard lock{mutex};
local_copy = root;
}
// 这里的put就是前面说的从根开始进行了复制,直到被修改的地方的操作。
return local_copy->Put(key, value);
}
这样一来线程安全就已经做到了,所有写入都可以做到写时复制。但是奇怪的是为什么project0要求我用一个写锁?
后面看了当时写的代码才想起来,原来project0要求实现的是对前面的线程安全版本的封装,即:
class TrieStore {
......
shared_ptr<TrieNode> Put(string_view key, void *value) {
lock_guard lock{write_lock};
shared_ptr local_copy;
{
lock_guard lock{mutex};
local_copy = root;
}
root = local_copy->Put(key, value);
}
Guard Get(string_view sv) {
shared_ptr local_copy;
{
lock_guard lock{mutex};
local_copy = root;
}
return Guard{local_copy, local_copy->Get(string_view key)};
}
} trie_store;
void ThreadFunc() {
// 给trie_store放入1到65536的key,value都是old+key的形式,比如说1的value是old1,54321的是old54321
// 给trie_store移除1到65536
// 给trie_store放入1到65536,value都是new+key的形式
}
void Test() {
// 起n个线程,每个线程都执行ThreadFunc
// 检查是否有1到65535,每个键是否都是new+key的形式
}
要确保每一个修改都最终可以通过trie_store这个对象确认到,但是所有读取操作都不能被阻塞,所以里面的Put操作需要上一个写锁。
shared_ptr的线程安全性与再论cmu15445 project0的COW线程安全字典树的更多相关文章
- Java中各种集合(字符串类)的线程安全性!!!
Java中各种集合(字符串类)的线程安全性!!! 一.概念: 线程安全:就是当多线程访问时,采用了加锁的机制:即当一个线程访问该类的某个数据时,会对这个数据进行保护,其他线程不能对其访问,直到该线程读 ...
- volatile变量能保证线程安全性吗?为什么?
在谈及线程安全时,常会说到一个变量——volatile.在<Java并发编程实战>一书中是这么定义volatile的——Java语言提供了一种稍弱的同步机制,即volatile变量,用来确 ...
- 深度分析Java的枚举类型—-枚举的线程安全性及序列化问题
原文:深度分析Java的枚举类型--枚举的线程安全性及序列化问题 枚举是如何保证线程安全的 要想看源码,首先得有一个类吧,那么枚举类型到底是什么类呢?是enum吗?答案很明显不是,enum就和clas ...
- shared_ptr的线程安全性
一: All member functions (including copy constructor and copy assignment) can be called by multiple t ...
- 《Java并发编程实战》第二章 线程安全性 读书笔记
一.什么是线程安全性 编写线程安全的代码 核心在于要对状态訪问操作进行管理. 共享,可变的状态的訪问 - 前者表示多个线程訪问, 后者声明周期内发生改变. 线程安全性 核心概念是正确性.某个类的行为与 ...
- Java线程安全性中的对象发布和逸出
发布(Publish)和逸出(Escape)这两个概念倒是第一次听说,不过它在实际当中却十分常见,这和Java并发编程的线程安全性就很大的关系. 什么是发布?简单来说就是提供一个对象的引用给作用域之外 ...
- 【Java并发.2】线程安全性
要编写线程安全的代码,其核心在于要对状态访问操作进行管理,特别是对共享(Shared)和可变的(Mutable)状态的访问. “共享”意味着变量可以由多个线程同时访问,而“可变”则意味着变量的值在其生 ...
- Java并发(理论知识)—— 线程安全性
1.什么是线程安全性 当多个线 ...
- Java并发编程原理与实战二十:线程安全性问题简单总结
一.出现线程安全性问题的条件 •在多线程的环境下 •必须有共享资源 •对共享资源进行非原子性操作 二.解决线程安全性问题的途径 •synchronized (偏向锁,轻量级锁,重量级锁) •vol ...
- Java并发编程原理与实战八:产生线程安全性问题原因(javap字节码分析)
前面我们说到多线程带来的风险,其中一个很重要的就是安全性,因为其重要性因此,放到本章来进行讲解,那么线程安全性问题产生的原因,我们这节将从底层字节码来进行分析. 一.问题引出 先看一段代码 packa ...
随机推荐
- 场景题:假设有40亿QQ号,但只有1G内存,如何实现去重?
当数据量比较大时,使用常规的方式来判重就不行了.例如,使用 MySQL 数据库判重,或使用 List.contains() 或 Set.contains() 判重就不行了,因为数据量太大会导致内存放不 ...
- WPF页面中将一个控件的宽度绑定到其父级用户控件的实际宽度
该实际场景比较常见于,当存在多个用户控件页面拼成一个窗体,因为实际控件对应窗体的宽度并不能确定,也不是那种能指定的宽度或者高度,比如窗体分导航区域和内容区域,左侧导航区域可以直接指定宽度,而右侧内容区 ...
- 京东从 OpenStack 改用 Kubernetes 的始末
构建集群的历史 物理机器的时代(2004年-2014年) 在2014年之前,我们公司的应用程序都部署在物理机器上.在物理机器时代,为了给即将上线的应用程序分配物理机器,我们平均需要等上一周的时间.由于 ...
- biancheng-Python教程
目录http://c.biancheng.net/python/ 1Python编程基础2Python编程环境搭建3变量类型和运算符4列表.元组.字典和集合5Python字符串常用方法6Python流 ...
- biancheng-MongoDB教程
目录http://c.biancheng.net/mongodb2/ 1NoSQL是什么2MongoDB是什么3Windows安装MongoDB4Linux安装MongoDB5MacOS安装Mongo ...
- Windows 激活
参考:链接1 链接2 链接3 链接4
- 使用pkg对nodejs项目打包
pkg的介绍可以阅读官方说明.下面针对使用做一个简单的说明. 1. 安装, 假设需要将项目打包成 win-x86 下运行的软件包,需要确定使用的 pkg 和 pkg-fecth 的版本,目前最后一个 ...
- 0515-BufferedInputStream缓存输入输出流
package A10_IOStream; import java.io.*; /* 作为IO流的入门,今天我们见识一些更强大的流.比如能够高效读写的缓冲流,能够转换编码的转换流,能够持久化存储对象的 ...
- uni-app中picker-view(常见的坑)出现选择值与输出的值不一致
今天遇见一个问题,在使用picker-view的时候: 出现我选择的值和输出的值不一致: 经过与官方的demo做对比发现: 官方是实时的将值从组件中向上抛出去: 值是从change事件传递出去的 而我 ...
- shell脚本sed命令
Sed 是一个脚本型的编译器,全称StreamEDitor,即流编辑器是非交互式的编辑器 sed 原理简析sed 以行为处理单位,每次从标准输入/文本获取一行信息,存储到其" 模式空间 &q ...