php利用zookeeper作dispatcher服务器
=====
https://blog.eood.cn/php_share_memory
最常见的apc
可以缓存php的opcode提高应用的性能,可以在同个php-fpm进程池间共享数据
常见功能:
$shm_key = ftok(__FILE__, 't'); /**
开辟一块共享内存 int $key , string $flags , int $mode , int $size
$flags: a:访问只读内存段
c:创建一个新内存段,或者如果该内存段已存在,尝试打开它进行读写
w:可读写的内存段
n:创建一个新内存段,如果该内存段已存在,则会失败
$mode: 八进制格式 0655
$size: 开辟的数据大小 字节 */ $shm_id = shmop_open($shm_key, "c", 0644, 1024); /**
* 写入数据 数据必须是字符串格式 , 最后一个指偏移量
* 注意:偏移量必须在指定的范围之内,否则写入不了
*
*/
$size = shmop_write($shm_id, 'songjiankang', 0);
echo "write into {$size}"; #读取的范围也必须在申请的内存范围之内,否则失败
$data = shmop_read($shm_id, 0, 100);
var_dump($data); #删除 只是做一个删除标志位,同时不在允许新的进程进程读取,当在没有任何进程读取时系统会自动删除
shmop_delete($shm_id); #关闭该内存段
shmop_close($shm_id);
2,用semaphore扩展中的sem类函数,类似key-value格式,注意此方式和第一种方式不能通用
// Get the file token key
$key = ftok(__DIR__, 'a'); // 创建一个共享内存
$shm_id = shm_attach($key, 1024, 777); // resource type
if ($shm_id === false) {
die('Unable to create the shared memory segment');
} #设置一个值
shm_put_var($shm_id, 111, 'value'); #删除一个key
//shm_remove_var($shm_id, 111); #获取一个值
$value = shm_get_var($shm_id, 111);
var_dump($value); #检测一个key是否存在
// var_dump(shm_has_var($shm_id, 111)); #从系统中移除
shm_remove($shm_id); #关闭和共享内存的连接
shm_detach($shm_id);
3,使用一个共享内存和信号量实现的消息队列
/**
* 使用共享内存和信号量实现
*
* 支持多进程, 支持各种数据类型的存储
* 注: 完成入队或出队操作,尽快使用unset(), 以释放临界区
*
*/
class ShmQueue
{ private $maxQSize = 0; // 队列最大长度
private $front = 0; // 队头指针
private $rear = 0; // 队尾指针
private $blockSize = 256; // 块的大小(byte)
private $memSize = 25600; // 最大共享内存(byte)
private $shmId = 0; private $filePtr = './shmq.ptr'; private $semId = 0; public function __construct ()
{
$shmkey = ftok(__FILE__, 't'); $this->shmId = shmop_open($shmkey, "c", 0644, $this->memSize);
$this->maxQSize = $this->memSize / $this->blockSize; // 申請一个信号量
$this->semId = sem_get($shmkey, 1);
sem_acquire($this->semId); // 申请进入临界区 $this->init();
} private function init ()
{
if (file_exists($this->filePtr)) {
$contents = file_get_contents($this->filePtr);
$data = explode('|', $contents);
if (isset($data[0]) && isset($data[1])) {
$this->front = (int) $data[0];
$this->rear = (int) $data[1];
}
}
} public function getLength ()
{
return (($this->rear - $this->front + $this->memSize) % ($this->memSize)) /
$this->blockSize;
} public function enQueue ($value)
{
if ($this->ptrInc($this->rear) == $this->front) { // 队满
return false;
} $data = $this->encode($value);
shmop_write($this->shmId, $data, $this->rear);
$this->rear = $this->ptrInc($this->rear);
return true;
} public function deQueue ()
{
if ($this->front == $this->rear) { // 队空
return false;
}
$value = shmop_read($this->shmId, $this->front, $this->blockSize - 1);
$this->front = $this->ptrInc($this->front);
return $this->decode($value);
} private function ptrInc ($ptr)
{
return ($ptr + $this->blockSize) % ($this->memSize);
} private function encode ($value)
{
$data = serialize($value) . "__eof";
echo ''; echo strlen($data);
echo ''; echo $this->blockSize - 1;
echo ''; if (strlen($data) > $this->blockSize - 1) {
throw new Exception(strlen($data) . " is overload block size!");
}
return $data;
} private function decode ($value)
{
$data = explode("__eof", $value);
return unserialize($data[0]);
} public function __destruct ()
{
$data = $this->front . '|' . $this->rear;
file_put_contents($this->filePtr, $data); sem_release($this->semId); // 出临界区, 释放信号量
}
} /*
* // 进队操作 $shmq = new ShmQueue(); $data = 'test data'; $shmq->enQueue($data);
* unset($shmq); // 出队操作 $shmq = new ShmQueue(); $data = $shmq->deQueue();
* unset($shmq);
*/
====
我的业务逻辑:
利用zookeeper作拓扑发现和分发的功能,
业务的其他服务器(server1,server2,server3...)在启动的时候,向zookeeper服务器注册自身的ip地址;
客户端首先需要获取服务器的ip地址,需要访问dispatcher服务器,
我们现在的dispatcher服务器和zookeeper服务器是放在同一台机器上(这时候,我们不需要利用zookeeper的leader选举策略),
当用户通过http协议访问dispatcher:
dispatcher是一个运行生产者消费者模型的php多进程程序,
生产者进程:利用php zookeeper的扩展,将多台服务器的ip从zookeeper中取出,放入共享内存中,
消费者进程:就是通过http访问,利用nginx代理,通过fast-cgi产生的任务线程,这些任务线程->
就是消费者进程,利用php中的加锁服务在同享内存中取得数据,
-------
写操作优先,但是需要 消息队列 来缓存来自http的请求;
-------
php利用zookeeper作dispatcher服务器的更多相关文章
- 【zookeeper】4、利用zookeeper,借助观察模式,判断服务器的上下线
首先什么是观察者模式,可以看看我之前的设计模式的文章 https://www.cnblogs.com/cutter-point/p/5249780.html 确定一下,要有观察者,要有被观察者,然后要 ...
- 代理 XP”组件已作为此服务器安全配置的一部分被关闭。系统管理员可以使用 sp_configure 来启用“代理 XP”。
新建维护计划的时候遇到下图的报错信息 标题: Microsoft SQL Server Management Studio------------------------------ “代理 XP”组 ...
- SQL Server 阻止了对组件 'Ad Hoc Distributed Queries' 的 STATEMENT 'OpenRowset/OpenDatasource' 的访问,因为此组件已作为此服务器安全配置的一部分而被关闭。系统管理员可以通过使用 sp_configure 启用 'Ad Hoc Distributed Queries'。
今天单位一ASP.NET网站,里面有个功能是导出数据,发现一导出就报错,报错内容是:SQL Server 阻止了对组件 'Ad Hoc Distributed Queries' 的 STATEMENT ...
- “代理XP”组件已作为此服务器安全配置的一部分被关闭的解决办法
代理XP”组件已作为此服务器安全配置的一部分被关闭.系统管理员可以使用sp_configure来启用“代理XP”.有关启用“代理XP”的详细信息,请参阅SQL Server联机丛书中的“外围应用配置器 ...
- “代理 XP”组件已作为此服务器安全配置的一部分被关闭。解决方法
新建维护计划的时候遇到下图的报错信息 标题: Microsoft SQL Server Management Studio------------------------------ “代理 XP”组 ...
- 创建维护计划时,提示“代理XP”组件已作为此服务器安全配置的一部分被关闭
一.问题在Management Studio中新建维护计划时,提示以下错误信息:“代理XP”组件已作为此服务器安全配置的一部分被关闭.系统管理员可以使用sp_configure来启用“代理XP”.有关 ...
- zookeeper作为soa服务器集群的协调调度服务器
zookeeper作为soa服务器集群的协调调度服务器,当然自身也支持集群. ZooKeeper搭建系列集 ZooKeeper系列之一:ZooKeeper简介 ZooKeeper系列之二:ZooKee ...
- Zookeeper动态更新服务器列表
-------------------------------------------------------------------------------------- [版权申明:本文系作者原创 ...
- SQLSERVER 2012 之 “代理 XP”组件已作为此服务器安全配置的一部分被关闭
新建维护计划的时候遇到下图的报错信息 标题: Microsoft SQL Server Management Studio ------------------------------ “代理 XP” ...
随机推荐
- 远程实时调试手机上的Web页面
1. 安装 需要Node.js平台, 先安装好后, 打开Node.js command prompt, 通过NPM来安装 weinre npm -g install weinre 2. 启动 ...
- TreeSet和Comparator 对TreeSet排序
使用TreeSet和Comparator,编写TreeSetTestInner类,要求对TreeSet中的元素"HashSet"."ArrayList".&qu ...
- SunSonic 3.0 ORM开源框架的学习
SubSonic 3.0简介 接触到SubSonic3.0 ORM框架是看了AllEmpty大神的从零开始编写自己的C#框架(链接在此)系列的随笔接触到的,本文章学习内容源于AllEmpty大神. S ...
- 微信JS-SDK DEMO页面和示例代码
<?php require_once "jssdk.php"; $jssdk = new JSSDK("yourAppID", "yourApp ...
- 超链接<a></a>
1.<a href="#" target="_self原窗口-默/_blank新窗口/_top/_parent"></a> 绝对路径:f ...
- nopcommerce 初学2
好久没有接触nopcommerce了. 2016-9-5 现在最新的是3.8. 这段时间也稍微接触了下aspnet 的mvc. 所以就想到nop是一个开源的 很全得项目, 然后就拆了一些可以学习跟借 ...
- 持续集成-sourcetree的安装、使用记录
1.参考 http://blog.sina.com.cn/s/blog_672143a30102vold.html 2.问题-安装sourcetree后,打开时提示下载但是连接不上相应链接 自行下载g ...
- iOS 模拟器上录制Demo视频
在App审核中会让用户上传一段简易的视频,那么如何制作改视频呢? 今天无意中在Cocochina 中看到 说利用QuickTime来制作,而QuickTime是操作系统自带的. 哦 My,God ! ...
- 学习笔记之 prim算法和kruskal算法
~. 最近数据结构课讲到了prim算法,然而一直使用kruskal算法的我还不知prim的思想,实在是寝食难安,于此灯火通明之时写此随笔,以祭奠我睡过去的数 据结构课. 一,最小生成树之prim pr ...
- SQL.WITH AS.公用表表达式(CTE)
一.WITH AS的含义 WITH AS短语,也叫做子查询部分(subquery factoring),可以让你做很多事情,定义一个SQL片断,该SQL片断会被整个SQL语句所用到.有的时候,是 ...