curl_multi_*模拟多线程异步用法
测试环境:
- PHP版本:php7.0.10
- mysql版本:5.7.14
测试用例:循环插入两千行数据到数据库
public function test_syn($pc){
// $pc = trim(I('pc'));
$model = M('','');
$model -> startTrans();
try{
$sql = 'update d_fhditem set num = num +1 where id= 1365';
$res = $model -> execute($sql);
}catch(\Exception $e){
$res = false;
}
if($res === false){
$model -> rollback();
echo '更新失败<br>';
die;
}
try{
$sql = 'insert into check_thread_log(`pc`) values('.$pc.')';
$res = $model -> execute($sql);
}catch(\Exception $e){
$res = false;
}
if($res === false){
$model -> rollback();
echo '添加事务失败<br>';
die;
}
$res = $model -> commit();
if($res === false){
$model -> rollback();
echo '提交事务失败';
}
//echo '测试成功'.$pc.'<br>';
}
测试一:一次生成2000个curl句柄,同时运行
public function checkThread3(){
$t = microtime(true);
$row = 2000;
$i = 0;
$arr_handle = array();
while($i < $row){
$res = $res.$i;
$res = curl_init();
$url = 'http://localhost/InTimeCommnuicate/index.php/Home/WebstockApi/test_syn/pc/'.$i;
curl_setopt($res, CURLOPT_URL , $url);
curl_setopt($res, CURLOPT_RETURNTRANSFER, 1);
curl_setopt($res, CURLOPT_HEADER, 0);
$arr_handle[] = $res;
$i++;
}
$cmi = curl_multi_init();
//添加2000条句柄
foreach($arr_handle as $k => $v){
curl_multi_add_handle($cmi, $v);
}
$still_running = null;
do{
usleep(10000);
$res = curl_multi_exec($cmi, $still_running);
$j++;
}while($still_running > 0);
foreach($arr_handle as $v){
curl_multi_remove_handle($cmi, $v);
}
curl_multi_close($cmi);
$t1 = microtime(true);
echo '<hr>并发执行时间:'.($t1 - $t).'<br>';
}
运行结果:
mysql查询:
小结:从结果可以看出,当同时运行的数量过大时会有部分丢失。
测试二:对程序进行部分改进,把并发数量控制在400条以内
public function checkThread(){
$t = microtime(true);
$row = 2000;
$i = 0;
$arr_handle = array();
while($i < $row){
$res = $res.$i;
$res = curl_init();
$url = 'http://localhost/InTimeCommnuicate/index.php/Home/WebstockApi/test_syn/pc/'.$i;
curl_setopt($res, CURLOPT_URL , $url);
curl_setopt($res, CURLOPT_RETURNTRANSFER, 1);
curl_setopt($res, CURLOPT_HEADER, 0);
$arr_handle[] = $res;
$i++;
}
$cmi = curl_multi_init();
//最大并发数
$maxRunHandle = 400;
//当前添加句柄
$thisAddHandle = 0;
//需要运行条数
$maxRow = count($arr_handle);
//添加400条句柄
foreach($arr_handle as $k => $v){
if($k >= $maxRunHandle) break;
curl_multi_add_handle($cmi, $v);
$thisAddHandle++;
}
$still_running = null;
$j = 1;
do{
//当运行并发数小于400且并发
if($still_running < 400 && $thisAddHandle < $maxRow){
curl_multi_add_handle($cmi, $arr_handle[$thisAddHandle]);
$thisAddHandle++;
}
usleep(10000);
$res = curl_multi_exec($cmi, $still_running);
// echo '第'.$j.'次输并发执行的句柄数量为'.$still_running.'<br>';
$j++;
}while($still_running > 0);
foreach($arr_handle as $v){
curl_multi_remove_handle($cmi, $v);
}
curl_multi_close($cmi);
$t1 = microtime(true);
echo '<hr>并发执行时间:'.($t1 - $t).'<br>';
}
运行结果:
mysql查询:
小结:可以看出运行速度比原来的快,而且没有任何的数据丢失。
测试三:不使用curl函数,直接插入2000行数据
public function checkThread2(){
$t = microtime(true);
$row = 2000;
$i = 0;
while($row > $i){
$this -> test_syn($i);
$i++;
}
$t1 = microtime(true);
echo '<hr>while循环时间'.($t1 - $t).'<br>';
}
结果:
mysql查询:
curl_multi_*模拟多线程异步用法的更多相关文章
- 通过curl模拟多线程抓取网页(curl_multi_*)
curl请求多个url,以前都是使用循环来处理.最近发现可以通过curl_multi_*系列函数来模拟多线程.比对一下,发现如果请求的url只有几个,2种方案耗时差不多,但是url比较多,差距就非常明 ...
- Android 多线程 异步加载
Android 应用中需要显示网络图片时,图片的加载过程较为耗时,因此加载过程使用线程池进行管理, 同时使用本地缓存保存图片(当来回滚动ListView时,调用缓存的图片),这样加载和显示图片较为友好 ...
- 可扩展多线程异步Socket服务器框架EMTASS 2.0 (转自:http://blog.csdn.net/hulihui)
可扩展多线程异步Socket服务器框架EMTASS 2.0 (转自:http://blog.csdn.net/hulihui) 0 前言 >>[前言].[第1节].[第2节].[第3节]. ...
- 【JavaScript】吃饱了撑的系列之JavaScript模拟多线程并发
前言 最近,明学是一个火热的话题,而我,却也想当那么一回明学家,那就是,把JavaScript和多线程并发这两个八竿子打不找的东西,给硬凑了起来,还写了一个并发库concurrent-thread-j ...
- Java使用多线程异步执行批量更新操作
import com.google.common.collect.Lists; import org.apache.commons.collections.CollectionUtils; impor ...
- php模拟多线程
一:应该知道的: php本身是不支持多线, 但是php的好搭档,apache和linux是支持的,故lamp才是最佳组合,还在使用win服务器的现在知道为什么要用linux吧.既然是模拟的, 就不是真 ...
- C# 实现的多线程异步Socket数据包接收器框架
转载自Csdn : http://blog.csdn.net/jubao_liang/article/details/4005438 几天前在博问中看到一个C# Socket问题,就想到笔者2004年 ...
- C# 多线程 异步加载 窗体
C# 多线程 异步加载 窗体 分类: C#2014-05-28 16:57 1286人阅读 评论(0) 收藏 举报 异步加载 我们在使用 windowform 编程的时候,我们或许可能会越到,各种在窗 ...
- shell 中用管道模拟多线程
shell 中用管道模拟多线程 这里以两个例子来对比多线程和单进程 单线程的例子 # config.txt在这个例子和多线程的例子中都会用到 [root@ns_10.2.1.242 test]$ ca ...
随机推荐
- python 学习 (1-3)
流程控制if语句 语法种类: 第⼀种语法: if 条件: #引号是将条件与结果分开. 结果1. # 四个空格,或者⼀个tab键,这个是告诉程序满⾜这个条件的 结果2. 如果条件是真(True) ...
- Idea2019激活码
此教程仅用作个人学习,请勿用于商业获利,造成后果自负!!! 此教程已支持最新2019.2版本 此教程实时更新,请放心使用:如果有新版本出现猪哥都会第一时间尝试激活: idea官网下载地址:http:/ ...
- .net core使用HttpClient发送代理请求_程序内抓包_Fiddler抓包
前言: 通过Fiddler抓取浏览器请求数据,相信大家已经都会用了,我们知道Fiddler是通过在本机计算器添加一个默认的代理服务器来实现的抓包数据的,端口号为:8888. 其实当我们打开Fiddl ...
- ThinkPHP5.x.x各版本实战环境getshell
#这个文章我之前在t00ls已经分享过了 #内容只是对tp5的实战环境下getshell做的记录,中间遇到的一些小问题的突破,没啥技术含量 -5.1.18 http://www.xxxxx.com/? ...
- Java 类集初探
类集 类集:主要功能就是Java数据结构的实现(java.util) 类集就是动态对象数组(链表也是动态数组) Collection 接口* Collection是整个类集之中单值保存的最大 父接口 ...
- [转]VBA Check if an outlook folder exists; if not create it
本文转自:http://www.outlookcode.com/d/code/quarexe.htm To quarantine application file attachments This O ...
- adb 控制手机动作
下载adb工具包,解压即可 https://download.csdn.net/download/kai402458953/10784310 各种事件说明:https://blog.csdn.n ...
- Ubantu 安装SSH
1.检查是否安装SSH dpkg --get-selections | grep ssh 一般情况下Ubantu 默认集成 openssh-client,但要用sftp的话还需要安装openssh-s ...
- python中基本数据类型以及运算符
python中基本数据类型以及运算符的知识 一.与用户的交互以及python2与python的区别 1.1什么是与用户交互 用户交互就是人往计算机中input(输入数据),计算机print(输出结果) ...
- busybox启动流程简单解析:从init到shell login
关键词:kernel_init().init.inittab.wait/waitpid.fork/vfork.setsid().execvp/execlp.dup2等等. 由于遇到一系列定制,从ini ...