PHP共享内存的应用shmop系列
简单的说明
可能很少情况会使用PHP来操控共享内存,一方面在内存的控制上,MC已经提供了一套很好的方式,另一方面,自己来操控内存的难度较大,内存的读写与转存,包括后面可能会用到的存储策略,要是没有一定计算机组成原理的基础,想做这些不是一件容易的事情。那为什么还要使用它呢?如果我想进行管道通信,为其它的应用服务准备数据;我想建立自己的数据缓存体系,使用MC有点大炮打苍蝇的感觉。那么shmop会是一个选择,当然,在操作内存前,一定要谨慎。
系统要求
shmop系列函数只是在unix/Linux下可用,可以通过命令:
- ipcs -m
来查看当前的共享内存使用情况。其中,各个部分解释如下:
key :共享内存的唯一的key值,共享内存通过该key来判断你读取的是哪一块内存。
shmid:当使用key来获取内存时,你获得的是这个id的值。它作为你操作内存块的标识。
owner:创建该共享内存块的用户
perms:该共享内存的读写权限,8禁止,可以是777,与文件的读写权限一致。
bytes:该内存块的大小
nattch:连接该内存块的进程数
status:当前状态,如:dest,即将删除等。
使用示例
具体的使用说明,在PHP手册中有详细介绍,这里不进行赘述。这里将写一些简单的操作例子。
写入
- <?php
- /**
- * SHMOP共享内存操作示例
- * @author monkee
- **/
- $key = 0x4337b700;
- $size = 4096;
- $shmid = @shmop_open($key, 'c', 0644, $size);
- if($shmid === FALSE){
- exit('shmop_open error!');
- }
- $data = '世界,你好!我将写入很多的数据,你能罩得住么?';
- $length = shmop_write($shmid, pack('a*',$data), 0);
- if($length === FALSE){
- exit('shmop_write error!');
- }
- @shmop_close($shmid);
- exit('succ');
- ?>
读取
- <?php
- /**
- * SHMOP共享内存操作示例
- * @author monkee
- **/
- $key = 0x4337b700;
- $size = 256;
- $shmid = @shmop_open($key, 'c', 0644, $size);
- if($shmid === FALSE){
- exit('shmop_open error!');
- }
- $data = unpack('a*', shmop_read($shmid, 0, 256));
- if($data === FALSE){
- exit('shmop_read error!');
- }
- @shmop_close($shmid);
- exit($data[1]);
- ?>
这里使用到了函数:pack() 这个函数用来将内存里的内容转化为二进制内容,具体请查看手册内容。
多服务器内存同步
已经在本地做好了这个服务,现在需要在多台服务器上进行内存数据同步。虽然这个时候可以放弃共享内存的方式来处理数据了,然而你被要求需要这么做。于是,同步我想不是问题,做好“主-从”的架构,我同步好的内存及时推送过去就可以了。然而,我是不是需要在从机上做一个监听程序呢?这样的代价有点大,好的一点是,从机上有apache。也就是说可以使用HTTP协议来进行通信了。
同步策略
如何同步?看似无聊的问题,却又产生了疑惑。同步数据呗,但是同步什么数据!一种方式是主机的内存改变后,程序读取所有内存数据然后发送到从机进行同步;如果我只是更改一些简单的操作位的话,那么小的更新却要引起整个内存块的同步,似乎有些浪费。还有一种,是更新变化。将变化进行更新。这种比较复杂,因为你需要定义每一种操作的处理。幸运的是,你需要操作的数据并不多,还有,你要定义的操作也不多:write,delete(read可以不要,因为你很少会从从机上读取数据)。那么好了,我们选择其中一种来做吧。
主机发送
- <?php
- /**
- * 共享内存操作,支持远程内存同步。
- * @author hufeng@
- * @since 2011-08-10
- *
- */
- define('PSHMOP_HOST', '192.168.0.1');
- define('PSHMOP_SEPE', "\r\n----------CKSJFIOWKJDFOCKJVNBBSDF----------\r\n");
- class Pshmop
- {
- static private $data = array();
- static public function write($key, $offset, $data, $size = 0){
- $h = array('key' => $key, 'offset' => $offset, 'size' => $size, 'ac' => 'write');
- return self::add($h, $data);
- }
- static public function del($key){
- $h = array('key' => $key, 'ac' => 'delete');
- return self::add($h);
- }
- static private function add($dataheader, $databody=''){
- self::$data[] = serialize($dataheader)."\n".$databody;
- }
- static private function send(){
- $d = & self::$data;
- if(count($d) == 0){
- return ;
- }
- $http_entity_body = join(PSHMOP_SEPE, $d);
- $http_entity_length = strlen($http_entity_body);
- $fp = fsockopen(PSHMOP_HOST, 80, $errno, $error);
- if(!$fp){
- return -1;
- }
- fputs($fp, "PUT /pshmop.php HTTP/1.1\r\n");
- fputs($fp, 'Host: '.PSHMOP_HOST."\r\n");
- fputs($fp, "Content-Type: application/x-www-form-urlencoded\r\n");
- fputs($fp, "Content-Length: {$http_entity_length}\r\n");
- fputs($fp, "Connection: close\r\n\r\n");
- fputs($fp, $http_entity_body . "\r\n\r\n");
- $d = '';
- while(!feof($fp)){
- $d .= fgets($fp, 4096);
- }
- fclose($fp);
- return $d;
- }
- }
使用的时候,进行:
- Pshmop::write();
- Pshmop::write();
- Pshmop::write();
- Pshmop::send();
PS:为了支持多个更新一次传递的原则,以上便是举例。
从机监听
- <?php
- /**
- * 共享内存远程处理类
- * 对从远端传输到的数据进行处理、内存同步更新
- * @author hufeng@
- * @since 2011-08-11
- **/
- define('RSHMOP_SEPE', "\r\n----------CKSJFIOWKJDFOCKJVNBBSDF----------\r\n");
- class Rshmop
- {
- static public function run($data){
- $items = @explode(RSHMOP_SEPE, $data);
- if($items === NULL){
- return -1;
- }
- $result = array('succ' => 0, 'error' => 0);
- foreach($items as $k => $i){
- self::op($i) === 0 ? $result['succ']++ : $result['error']++;
- unset($items[$k]);
- }
- return $result;
- }
- static public function op($str){
- $p = strpos($str, "\n");
- $header = @unserialize(substr($str, 0, $p));
- if($header === FALSE){
- return 'Data Format Error!';
- }
- $body = substr($str, $p+1);
- $shmid = null;
- if($header['size'] > 0){
- $shmid = @shmop_open($header['key'], 'c', 0644, $header['size']);
- }
- if(!$shmid){
- $cmd = "ipcs -m | grep '{$header['key']}'";
- $em = exec($cmd);
- $em = preg_replace('/ +/', ' ', $em);
- $ems = explode(' ', $em);
- $header['size'] = intval($ems[4]);
- if($header['size'] == 0){
- if($headerreturn ['ac'] == 'delete'){
- return 0;
- }else{
- return 'Param `size` required!';
- }
- }
- $shmid = @shmop_open($header['key'], 'c', 0644, $header['size']);
- }
- if($header['ac'] == 'write'){
- shmop_write($shmid, $body, $header['offset']);
- }
- if($header['ac'] == 'delete'){
- shmop_delete($shmid);
- }
- shmop_close($shmid);
- return 0;
- }
- }
如果遇到主机有而从机未有的数据块(可能由网络问题造成,也可以有其它解决办法),可以选择delete然后再进行其它操作。
缓存使用的策略
觉得使用MC代价有点高,可以自己来控制内存和使用。当然,小部分的数据可以容易使用,但是当数据多的时候,决定哪部分数据进入内存,哪部分数据进入硬盘都是值得商榷的。这也就是为什么要提策略。
常见的策略无非是 FIFO,LUR,LAR等,但并不是说这些策略就是好的。实际情况中,根据具体的业务需求,来组织相应的策略。最常见的,我们是将从数据库查询时间长的、获取数据耗时(从其它机器上获取)、计算耗时的、需要及时使用的放入内存中。
这部分的代码就不写了,希望有所帮助。
转载自:http://tubaluer.iteye.com/blog/1349797 作者 tubaluer
PHP共享内存的应用shmop系列的更多相关文章
- PHP共享内存详解
前言 在PHP中有这么一族函数,他们是对UNIX的V IPC函数族的包装. 它们很少被人们用到,但是它们却很强大.巧妙的运用它们,可以让你事倍功半. 它们包括: 信号量(Semaphores) 共享内 ...
- php简单使用shmop函数创建共享内存减少服务器负载
在之前的一篇博客[了解一下共享内存的概念及优缺点]已经对共享内存的概念做了说明.下面就来简单使用共享内存(其实也可以用其他工具,比如redis) PHP做内存共享有两套接口.一个是shm,它实际上是变 ...
- c/c++ linux 进程间通信系列4,使用共享内存
linux 进程间通信系列4,使用共享内存 1,创建共享内存,用到的函数shmget, shmat, shmdt 函数名 功能描述 shmget 创建共享内存,返回pic key shmat 第一次创 ...
- 作为phper既然了解共享内存函数shmop的使用方法,那么就必须要了解一下信号量是什么,以及信号量使用的代码案例
在单独的一个PHP进程中读写.创建.删除共享内存方面上你应该没有问题了.但是实际运行中不可能只是一个PHP进程在运行中.如果在多个进程的情况下你还是沿用单个进程的处理方法,你一定会碰到问题--著名的并 ...
- 给PHP开启shmop扩展实现共享内存
在项目开发中,想要实现PHP多个进程之间共享数据的功能,让客户端连接能够共享一个状态,需要开启共享内存函数shmop.如果预期考虑会遇到这方面需求,那么最好在编译PHP的时候添加--with-shmo ...
- POSIX 共享内存和 系列函数
在前面介绍了system v 共享内存的相关知识,现在来稍微看看posix 共享内存 和系列函数. 共享内存简单来说就是一块真正的物理内存区域,可以使用一些函数将这块区域映射到进程的地址空间进行读写, ...
- php 共享内存学习(shmop函数)
问题:希望可以在进程间共享变量,为共享数据提供快速访问 解决方案:除了可以使用APC模块,还可以用shmop或System V共享内存 //创建键 //将一个可访问的文件路径名转换为一个可供 shmo ...
- 【VxWorks系列】任务间同步与通信之共享内存
在开始之前先说明三个概念,任务间的同步,互斥,通信. 同步,是指一个任务等待某个条件发生,而另外一个任务引发这个条件后,等待的任务会被触发执行相应的处理.这就是一个任务与另一任务之间的同步控制. 互斥 ...
- php操作共享内存shmop类及简单使用测试(代码)
SimpleSHM 是一个较小的抽象层,用于使用 PHP 操作共享内存,支持以一种面向对象的方式轻松操作内存段.在编写使用共享内存进行存储的小型应用程序时,这个库可帮助创建非常简洁的代码.可以使用 3 ...
随机推荐
- python_20_列表
#1 names=["QiZhiguang","DaiYang","HuZhongtao","ZhangDong"] p ...
- 漫谈 Clustering (番外篇): Vector Quantization
在接下去说其他的聚类算法之前,让我们先插进来说一说一个有点跑题的东西:Vector Quantization.这项技术广泛地用在信号处理以及数据压缩等领域.事实上,在 JPEG 和 MPEG-4 等多 ...
- GreenPlum查看表和数据库大小
表大小 zwcdb=# select pg_size_pretty(pg_relation_size('gp_test')); pg_size_pretty ---------------- 1761 ...
- C++ 限定名称查找
限定名称查找规则实际归纳下来很简单,先对::左边的名称进行查找(遵循,限定,无限定),然后在左边查找到的(此时只查找类型名称)名字的作用域内(含内联名称空间件)查找右边出现的名字,查找到即存在(故可以 ...
- 2018.11.3 Nescafe18 T2 太鼓达人
题目 背景 七夕祭上,Vani 牵着 cl 的手,在明亮的灯光和欢乐的气氛中愉快地穿行.这时,在前面忽然出现了一台太鼓达人机台,而在机台前坐着的是刚刚被精英队伍成员 XLk.Poet_shy 和 ly ...
- PAT 乙级 1003
题目 题目地址:PAT 乙级 1003 题解 规律观察题,本题的关键在于把题读懂,同时还有几个比较容易疏忽的地方需要注意:总之这道题要考虑的东西更多,细节上也要特别注意: 规律:“如果 aPbTc 是 ...
- javascript简易日历制作
学习记录 01.练习数组的用法 02.理解this.index的用法 03.绑定事件深入练习理解 html代码 <div id="date"> <ul id=&q ...
- 策略模式—Java实现(转)
1. 现实需求 客户有了新的需求,这时我们直接新增策略即可,改很少的代码.基本符合我们面向对象原则中的开闭原则(对扩展开放,对修改关系),实现了高内聚低耦合. 2. 策略模式定义 策略模式,又叫算法簇 ...
- Mysql相关子查询&&MySQL获取分组后的TOP N记录
小燕子,哈哈哈哈~~~~~~~~~~ 相关子查询是指引用了外部查询列的子查询,即子查询会对外部查询的每行进行一次计算. 举个例子 root:test> show create table tes ...
- NMF分解(二)
应用: 一.图像分析 NMF最成功的一类应用是在图像的分析和处理领域.图像本身包含大量的数据,计算机一般将图像的信息按照矩阵的形式进行存放,针对图像的识别.分析和处理也是在矩阵的基础上进行的.这些特点 ...