ChinaUnix首页 > 精华文章 > Php > 正文

[精彩] [性能] PHP之中使共享内存进行高速数据更新的一种方案


http://www.chinaunix.net 作者:HonestQiao  发表于:2006-01-02 15:08:27
发表评论】 【查看原文】 【Php讨论区】【关闭

[性能] PHP之中使用共享内存进行高速数据更新的一种方案

    如果在你实际的应用之中,你确实需要高速数据更新的操作,那么我们认为你已经具备以下先决条件:
    [size=5][color=red]能够按照实际应用的需要而调整服务器[/color][/size]
    关于这句话,大家自己可以明白意思的,不明白的自己想一想,如果没有达到这个要求,你是否有必要高速数据更新的操作, 或者先看看最后的附加说明. 

[color=#336666]    先见的参考文档:
1. http://w.yi.org/ftp/FAPM/PHP/php_manual_zh/ref.shmop.html
说明: PHP功能, 共享内存功能函数, 此处用于PHP直接操作内存, 提供高速数据操作
开启: 编译PHP的时候,加上参数: -enable-shmop
附注: 这个准备工作, 非常简单

2. http://w.yi.org/ftp/FAPM/PHP/php_manual_zh/ref.sem.html
说明: PHP功能, IPC通信相关功能函数, 此处用于使用信号量实现互斥
开启: 编译PHP的时候,加上参数: --enable-sysvsem
附注: 这个准备工作, 同样非常简单

3. http://www.huihoo.com/os/process/main.htm
说明: 学习资料, 进程的同步与互斥, 通俗的讲解了进程互斥的概念
附注: 学习资料,看看即可

4. http://www.huihoo.com/os/process/monitor.htm
说明: 学习资料, 信号量, 讲解了信号量在进程互斥之中的使用
附注: 学习资料,看看即可

5. http://www.ccw.com.cn/htm/app/aprog/01_4_25_3.asp
说明: 学习资料, 在PHP中实现进程间通讯, 讲解了如何在PHP之中利用共享内存和IPC视线进程间通讯
附注: 学习资料,看看即可[/color]

6. http://pear.php.net/package/System_SharedMemory/
说明: PEAR库, System_SharedMemory, 一个共享内存的PEAR库
支持: 使用pear管理程序, pear install System_SharedMemory-0.1.0
附注: 这个才正是我们所需要的.

    System_SharedMemory在PEAR的说明为"common OO-style shared memory API", 也就是"使用通常面向对象的模式操作共享内存的应用程序接口", 后面我们可以看到, 使用它来操作共享内存, 确实很简单, 要操做一个变量, 就和普通的对象的属性操作(使用set和get)类似了.

    首先, System_SharedMemory可以使用如下的多种途径来进行共享内存操作:

引用:
PHP加速模块:     'eaccelerator' => 'Eaccelerator',   // Eaccelerator (Turck MMcache fork)
PHP加速模块:     'mmcache'      => 'Mmcache',        // Turck MMCache
PHP加速模块:     'Memcache'     => 'Memcached',      // Memched
共享内存模块:     'shmop_open'   => 'Shmop',          // Shmop
PHP加速模块:     'apc_fetch'    => 'Apc',            // APC
Apache功能:      'apache_note'  => 'Apachenote',     // Apache note
Systemv模块:     'shm_get_var'  => 'Systemv',        // System V
sqlite数据库模块: 'sqlite_open'  => 'Sqlite',         // SQLite
使用文件模拟:      'file'         => 'File',           // Plain text
PHP加速模块:      'fsockopen'    => 'Sharedance',     // Sharedance



    以上所说的PHP加速模块是认为他在某一层面对PHP进行了加速.

    我们可以根据实际的情况,选用一种途径. 如果没有指定途径, 那么System_SharedMemory会自动从上直下检测是否存在类似途径的操作函数, 而自动选择途径.

    因为我的实验环境是*nix系统, 所以我选择了其中之一 Shmop 模式, 当然其他模式也完全是可以的, 只要你加了对应的编译参数或者扩展模块.

    以下为计数的演示代码:

<?php

    /// 引用System_SharedMemory库
    include_once 'System/SharedMemory.php';

    $intUpdateValue = 255;
    /// 数据库数据更新操作阀值, 255以内刚好一个字符

    /// 实例化System_SharedMemory对象
    $Shared =& System_SharedMemory::factory();

    /// 获取Count的值, 并+1, 如果没有初始化过, 值为0+1
    $intCount = intval($Shared->get('Count')) + 1;

    if($intCount >= 255){
       /// 计数器自增, 每255次
$Shared->set('Count', '0');
                /// 计数器清零, 开始下一计数循环

                /// 数据库操作
/// 数据库更新数据操作, 计数字段+=$intCount
    } else {
$Shared->set('Count', strval($intCount));
                /// 使用共享内存保存计数器值
    }

echo("$intCount");
        /// 显示本次循环计数器值
?>


    现在把上面的这段代码演示一下子,你会看到一个高速数据更新计数器就这么简单了.
    
    附加说明: [size=2][color=red]一个小的站点也可以使用这个模块, 因为它可以自动的那个选择共享内存的操作途径, 如果没有对内存操作的函数, 他自动选择使用文件模拟.[/color][/size]

[ 本帖最后由 HonestQiao 于 2005-12-15 17:23 编辑 ]



 gydoesit 回复于:2005-12-15 16:48:11

版主大人说得过于简单,另外请举点其他方面的例子,不要老是计数器哈.
再有,版主中间那个灰字简直不好看清


 北京野狼 回复于:2005-12-15 16:51:14

如何做分布?
拜托能不能改一下字体颜色和背景


 HonestQiao 回复于:2005-12-15 17:26:59

其中的Mmcache和Sharedance支持远程调用的.

实际上是监听了一个端口来操作.


 北京野狼 回复于:2005-12-15 17:43:09

我做的系统过滤,就是你说的这么做的。使用共享内存读入所有的过滤词。
只不过不是使用php.共享内存处理小量的数据很有效。不相信内存表


 HonestQiao 回复于:2005-12-15 17:55:09

引用:原帖由 北京野狼 于 2005-12-15 17:43 发表
我做的系统过滤,就是你说的这么做的。使用共享内存读入所有的过滤词。
只不过不是使用php.共享内存处理小量的数据很有效。不相信内存表 




当然是较少数据量的操作比较合适.

如果数据量大,还是用专门的系统或者程序来实现


 wobushiwo 回复于:2005-12-15 18:46:02

我记得php的共享内存应该早有了吧,这么常用,实用的功能怎么老是推广不起来呢?

w-h-y-?

why?


 HonestQiao 回复于:2005-12-15 20:40:35

引用:原帖由 wobushiwo 于 2005-12-15 18:46 发表
我记得php的共享内存应该早有了吧,这么常用,实用的功能怎么老是推广不起来呢?

w-h-y-?

why? 





应为它本身提供的基本功能已经足够强大了, 很好用了.


 tonera 回复于:2005-12-16 09:12:42

PHP的应用绝大多数用mysql数据库,而mysql并不支持存储过程,不知道这样做是否真的能提升系统效率。


 北京野狼 回复于:2005-12-16 09:29:06

引用:原帖由 tonera 于 2005-12-16 09:12 发表
PHP的应用绝大多数用mysql数据库,而mysql并不支持存储过程,不知道这样做是否真的能提升系统效率。 



正常的大量数据的增删改,共享内存并不适合。heap也不太好,还是老老实实使用mysql

共享内存的使用环境比如做连接池,或者认证服务器——真正强大的session,

还有我做的那种过滤服务,通过后台守候进程和socket给其他服务器提供过滤信息服务


 xuzuning 回复于:2005-12-16 10:59:33

不错!

对于共享内存的操作在linux和win32下是不同的。这是制约这个技术发展的原因之一
大多空间供应商并不提供共享内存操作支持。这是制约这个技术发展的原因之二
系统中可被利用的共享内存并不大。这是制约这个技术发展的原因之三

linux下有一文件夹(名字不记得了,好久没用linux了)是创建在内存上的,完全可以把他应用于缓存各种临时文件


 wobushiwo 回复于:2005-12-16 11:12:20

因为php是不能保持的,它得依靠os的支持

比如shmop,没守护进程,靠的是把内容写进linux/unix等os的共享内存segments

请问shmop有锁吗?怎么保证一系列的操作同步?

假如没有锁,怎么同步法?再设一个标志什么的也是不保险的

请大家说说这同步问题怎么解决,解决了才能写出连接池得需要同步的东西吧?


 hightman 回复于:2005-12-16 11:35:10

*nix 下用信号量来互斥或同步.

呵呵,跟操作文件的作法是一样的,程序设计上并不简单.

其实如果有 shell 权限也可以用 local socket 来做进程间通信.

内存数据完全由一个进程轮换服务来管理,节省内存也确保同步.


 HonestQiao 回复于:2005-12-16 11:46:12

请大家注意,  System_SharedMemory 这个PEAR库之中对于共享内存的操作, 采用了信号量来进行互斥处理的.

如果不是*nix, 还有其他的及格扩展模块啊, 还可以直接使用Apache提供的功能的.

而这些仅仅需要实例化对象的时候,指定途径即可.


 wobushiwo 回复于:2005-12-16 12:36:56

先来个 服

你们把一语言的功能发挥到极至了,像以前有狂人用php写出什么样的软件等等...

但就站在php的角度而言,它对os/其它软件都存在依赖,源于没有自己的VM,不能

用它本身编写"组件",现在流行语言带VM的,自己也能编组件

感觉有点像几年前的asp和php刚出现时,对asp的失望....


 HonestQiao 回复于:2005-12-16 13:32:21

引用:原帖由 wobushiwo 于 2005-12-16 12:36 发表
先来个 服

你们把一语言的功能发挥到极至了,像以前有狂人用php写出什么样的软件等等...

但就站在php的角度而言,它对os/其它软件都存在依赖,源于没有自己的VM,不能

用它本身编写"组件",现 ... 




但是这造就了语言本身的庞大无比, 你所推崇的语言是一个典型的例子.


用时它可以使用多种途径来操作共享内存, 例如直接利用Apache的功能.

[ 本帖最后由 HonestQiao 于 2005-12-21 16:18 编辑 ]


 fivebull 回复于:2005-12-21 14:55:58

谁有没有memcache 和 Sharedance  的优劣势的对比?


 qoooop 回复于:2006-01-01 15:21:09

代码中对共用数据加上共享内存后比不用还慢... BSD下做的测试


 hightman 回复于:2006-01-01 16:36:43

单机解决方案:

可以试试用 eaccelerator 扩展, 直接通过共享内存/文件在 zend 引擎级做cache.
eaccelerator_get()  eacclerator_put() .. 还有更多, 有一组API函数, 也可以对当前页进行CACHE...


 showsa 回复于:2006-01-01 20:37:18

楼主善于总结


 sickcat2004 回复于:2006-01-02 15:08:27

引用:原帖由 tonera 于 2005-12-16 09:12 发表
PHP的应用绝大多数用mysql数据库,而mysql并不支持存储过程,不知道这样做是否真的能提升系统效率。 


现在mysql5.0 stable  发行版支持事务,支持触发器,支持春初过程,不论是INODB 还是MYISAM的type都支持
,详情可以看http://www.mysql.com
:mrgreen::mrgreen::mrgreen::mrgreen::mrgreen::mrgreen:




原文链接:http://bbs.chinaunix.net/viewthread.php?tid=669627
转载请注明作者名及原文出处