shared_ptr的线程安全性与再论cmu15445 project0的COW线程安全字典树
shared_ptr的线程安全性
近期在网上冲浪时看到一篇boost的文章,里面聊到了shared_ptr的线程安全性
据原文所说,shared_ptr的线程安全性与c++中的容器是一致的。比如说std::map,你可以多线程访问,但是多个线程不能同时析构它,不能同时修改它。同样,shared_ptr可以多线程读,但是不能多线程析构,不能够多线程修改。这里说的shared_ptr是shared_ptr这个class本身的线程安全性与c++的其他容器是一致的,而不是shared_ptr所指向的对象。
一个shared_ptr至少包含了这几个成员:weak_count, ref_count, object_ptr。两个count都是原子类型的,所以对他们递增或递减是不存在多线程问题的。
更准确的说,一个shared_ptr的成员大概是这样的:
template <typename T>
class shared_ptr {
T *object_ptr;
struct Count {
atomic_int weak_count, ref_count;
};
Count *counts;
};
但是!众所周知,多线程线程安全性是不可组合的,所以这里两个原子操作,一旦混合起来就无法确保线程安全性。以前文链接中的example6为例子:
// 注意,这里p3是一个全局变量,所以可以被两个线程访问。
// thread A
p = p3; // reads p3, writes p
// thread B
p3.reset(); // writes p3; undefined, simultaneous read/write
这里p3.reset包含2个操作,两个都不是原子的,即object_ptr = nullptr, counts = nullptr。这里假定p3的ref_count是1,weak_count=0,那么如果说example6的执行顺序是这样的:
- thread A检查了counts->ref_count,发现不是0
- thread B调用reset,发现ref_count==1,所以析构了object_ptr,并设置其为nullptr
- thread A设置了counts = p3.counts
- thread B由于ref_count1, weak_count0, 释放了counts
- thread A尝试递增counts,完蛋了
有一个推荐的做法,即:
void ThreadFunc(shared_ptr p) {
shared_ptr local_copy;
{
lock_guard guard{mutex};
local_copy = p;
}
// 继续操作local_copy
......
}
这样做就符合了shared_ptr的线程安全性了。
cmu15445 Copy On Write的线程安全字典树(trie)
到这里忽然想到了之前做cmu15445的project0的时候也有不少用上shared_ptr的地方,所以想着回顾一下代码,看看有没有什么地方我忽略了线程安全性问题。
首先先介绍一下这个字典树的实现吧。
首先,它使用shared_ptr实现一个线程不安全的trie。假定一开始的trie是这样的:
然后我给插入了一个"ad",那么它会连着root一起复制一遍shared_ptr,原来的trie如虚线所示,新的trie则是蓝色部分:
可以看出,trie是从根开始,一路复制shared_ptr到需要修改的地方的。至于删除则类似。
那么这个trie的线程安全性如何?
看起来都是对原来的trie的读取,包括对shared_ptr的读取操作和每个节点的map<char,shared_ptr>的读取,所有的修改都只是在复制之后的副本上进行修改的。这样一来,只要保证初始被多个线程共享的root这个shared_ptr不会析构即可,这里可以用上前面推荐的操作:
struct Guard {
shared_ptr<TrieNode> guard;
// 为了减少代码,这里用void *这种形式来表现一个值
void *value;
}
shared_ptr<TrieNode> root;
// 这个Get操作有点MVCC的味道,都是读取的时候不会锁住所有写入操作的,都是可以访问历史版本的。
Guard Get(string_view sv) {
shared_ptr local_copy;
{
lock_guard lock{mutex};
local_copy = root;
}
return Guard{local_copy, local_copy->Get(string_view key)};
}
shared_ptr<TrieNode> Put(string_view key, void *value) {
shared_ptr local_copy;
{
lock_guard lock{mutex};
local_copy = root;
}
// 这里的put就是前面说的从根开始进行了复制,直到被修改的地方的操作。
return local_copy->Put(key, value);
}
这样一来线程安全就已经做到了,所有写入都可以做到写时复制。但是奇怪的是为什么project0要求我用一个写锁?
后面看了当时写的代码才想起来,原来project0要求实现的是对前面的线程安全版本的封装,即:
class TrieStore {
......
shared_ptr<TrieNode> Put(string_view key, void *value) {
lock_guard lock{write_lock};
shared_ptr local_copy;
{
lock_guard lock{mutex};
local_copy = root;
}
root = local_copy->Put(key, value);
}
Guard Get(string_view sv) {
shared_ptr local_copy;
{
lock_guard lock{mutex};
local_copy = root;
}
return Guard{local_copy, local_copy->Get(string_view key)};
}
} trie_store;
void ThreadFunc() {
// 给trie_store放入1到65536的key,value都是old+key的形式,比如说1的value是old1,54321的是old54321
// 给trie_store移除1到65536
// 给trie_store放入1到65536,value都是new+key的形式
}
void Test() {
// 起n个线程,每个线程都执行ThreadFunc
// 检查是否有1到65535,每个键是否都是new+key的形式
}
要确保每一个修改都最终可以通过trie_store这个对象确认到,但是所有读取操作都不能被阻塞,所以里面的Put操作需要上一个写锁。
shared_ptr的线程安全性与再论cmu15445 project0的COW线程安全字典树的更多相关文章
- Java中各种集合(字符串类)的线程安全性!!!
Java中各种集合(字符串类)的线程安全性!!! 一.概念: 线程安全:就是当多线程访问时,采用了加锁的机制:即当一个线程访问该类的某个数据时,会对这个数据进行保护,其他线程不能对其访问,直到该线程读 ...
- volatile变量能保证线程安全性吗?为什么?
在谈及线程安全时,常会说到一个变量——volatile.在<Java并发编程实战>一书中是这么定义volatile的——Java语言提供了一种稍弱的同步机制,即volatile变量,用来确 ...
- 深度分析Java的枚举类型—-枚举的线程安全性及序列化问题
原文:深度分析Java的枚举类型--枚举的线程安全性及序列化问题 枚举是如何保证线程安全的 要想看源码,首先得有一个类吧,那么枚举类型到底是什么类呢?是enum吗?答案很明显不是,enum就和clas ...
- shared_ptr的线程安全性
一: All member functions (including copy constructor and copy assignment) can be called by multiple t ...
- 《Java并发编程实战》第二章 线程安全性 读书笔记
一.什么是线程安全性 编写线程安全的代码 核心在于要对状态訪问操作进行管理. 共享,可变的状态的訪问 - 前者表示多个线程訪问, 后者声明周期内发生改变. 线程安全性 核心概念是正确性.某个类的行为与 ...
- Java线程安全性中的对象发布和逸出
发布(Publish)和逸出(Escape)这两个概念倒是第一次听说,不过它在实际当中却十分常见,这和Java并发编程的线程安全性就很大的关系. 什么是发布?简单来说就是提供一个对象的引用给作用域之外 ...
- 【Java并发.2】线程安全性
要编写线程安全的代码,其核心在于要对状态访问操作进行管理,特别是对共享(Shared)和可变的(Mutable)状态的访问. “共享”意味着变量可以由多个线程同时访问,而“可变”则意味着变量的值在其生 ...
- Java并发(理论知识)—— 线程安全性
1.什么是线程安全性 当多个线 ...
- Java并发编程原理与实战二十:线程安全性问题简单总结
一.出现线程安全性问题的条件 •在多线程的环境下 •必须有共享资源 •对共享资源进行非原子性操作 二.解决线程安全性问题的途径 •synchronized (偏向锁,轻量级锁,重量级锁) •vol ...
- Java并发编程原理与实战八:产生线程安全性问题原因(javap字节码分析)
前面我们说到多线程带来的风险,其中一个很重要的就是安全性,因为其重要性因此,放到本章来进行讲解,那么线程安全性问题产生的原因,我们这节将从底层字节码来进行分析. 一.问题引出 先看一段代码 packa ...
随机推荐
- Solution Set -「LOCAL」冲刺省选 Round VII
\(\mathscr{Summary}\) 三道结论题,毁灭吧. A 题一开始思路偏了,发现答案最高 bit 能固定之后接下来的结论就顺理成章了. B 题哈哈哈哈又是经典:我结论猜对了,然 ...
- .NET 开发的分流抢票软件,不做广告、不收集隐私
前言 每年春节大家必备的抢票工具Bypass-分流抢票.分流抢票是一款免费无广适用于PC端的自动分流抢票软件. 分流抢票,是以用户为中心.人性化的抢票软件.不做广告.不做推广.不携带病毒.不收集隐私信 ...
- 前端(一)-Html
1.网页基本信息 <!DOCTYPE html> 浏览器使用的规范 <head> 网页头 <body> 主体部分 <meta> 元数据 meta的nam ...
- python实现excel数据处理
python xlrd读取excel(表格)详解 安装: pip install xlrd 官网地址: https://xlrd.readthedocs.io/ 介绍: 为开发人员提供一个库,用于从M ...
- nginx平台初探-1
初探nginx架构(100%) 众所周知,nginx性能高,而nginx的高性能与其架构是分不开的.那么nginx究竟是怎么样的呢?这一节我们先来初识一下nginx框架吧. nginx在启动后,在un ...
- Redis(3)---Redis事务|主从复制
Redis事务 Redis 通过 MULTI .EXEC. DISCARD 和 WATCH 四个命令来实现事务功能. MULTI :标记一个事务块的开始. EXEC: 执行所有事务块内的命令. DI ...
- Linux密钥rsa加密原理和ssh使用密钥实现免密码登录
1.公私钥简介与原理 公钥和私钥都属于非对称加密算法的一个实现,这个加密算法的信息交换过程是: 1) 持有公钥的一方(甲)在收到持有私钥的一方(乙)的请求时,甲会在自己的公钥列表中查找是否有乙的公钥, ...
- VulNyx - Responder靶场
靶机ip 192.168.200.9 先nmap 扫描全端口 这个22端口不知道有没有开 被过滤了 我们 收集一下靶机的ipv6地址 nmap用ipv6地址扫他的端口就能绕过 他的端口过滤 ping6 ...
- ARM单片机知识点
1.STM32编译信息 代码占用FLASH 大小为:Code + RO-data, 7420字节(5054+2366),所用的RAM 大小为:RW-data + ZI-data, 8576(372+8 ...
- 大模型背后的向量魔法:Embedding技术初探
本文原本是2022年写的,然而一直没有完善,自从LLM火起来之后,NLP领域的技术更新很快,本文只是大概介绍了Embedding相关的基础知识,具体应用接下来会在博客更新发布. 前言 又是很长一段时间 ...