php多用户读写文件冲突的解决办法


Posted in PHP onNovember 06, 2013

一般的方案会是:

$fp = fopen("/tmp/lock.txt", "w+");
if (flock($fp, LOCK_EX)) {
    fwrite($fp, "Write something heren");
    flock($fp, LOCK_UN);
} else {
    echo "Couldn't lock the file !";
}
fclose($fp);

但在PHP中,flock似乎工作的不是那么好!在多并发情况下,似乎是经常独占资源,不即时释放,或者是根本不释放,造成死锁,从而使服务器的cpu占用很高,甚至有时候会让服务器彻底死掉。好像在很多linux/unix系统中,都会有这样的情况发生。
所以使用flock之前,一定要慎重考虑。
那么就没有解决方案了吗?其实也不是这样的。如果flock()我们使用得当,完全可能解决死锁的问题。当然如果不考虑使用flock()函数,也同样会有很好的解决方案来解决我们的问题。
经过我个人的搜集和总结,大致归纳了解决方案有如下几种。
方案一:对文件进行加锁时,设置一个超时时间.
大致实现如下:
if($fp = fopen($fileName, 'a')) {
 $startTime = microtime();
 do {
         $canWrite = flock($fp, LOCK_EX);
  if(!$canWrite) usleep(round(rand(0, 100)*1000));
 } while ((!$canWrite)&& ((microtime()-$startTime) < 1000));
 if ($canWrite) {
   fwrite($fp, $dataToSave);
 }
 fclose($fp);
}
 

超时设置为1ms,如果这里时间内没有获得锁,就反复获得,直接获得到对文件操作权为止,当然。如果超时限制已到,就必需马上退出,让出锁让其它进程来进行操作。
方案二:不使用flock函数,借用临时文件来解决读写冲突的问题。
大致原理如下:
1。将需要更新的文件考虑一份到我们的临时文件目录,将文件最后修改时间保存到一个变量,并为这个临时文件取一个随机的,不容易重复的文件名。
2。当对这个临时文件进行更新后,再检测原文件的最后更新时间和先前所保存的时间是否一致。
3。如果最后一次修改时间一致,就将所修改的临时文件重命名到原文件,为了确保文件状态同步更新,所以需要清除一下文件状态。
4。但是,如果最后一次修改时间和先前所保存的一致,这说明在这期间,原文件已经被修改过,这时,需要把临时文件删除,然后返回false,说明文件这时有其它进程在进行操作。
大致实现代码如下:
$dir_fileopen = "tmp";function randomid() {
    return time().substr(md5(microtime()), 0, rand(5, 12));
}
function cfopen($filename, $mode) {
    global $dir_fileopen;
    clearstatcache();
    do {
        $id = md5(randomid(rand(), TRUE));
        $tempfilename = $dir_fileopen."/".$id.md5($filename);
    } while(file_exists($tempfilename));
    if (file_exists($filename)) {
        $newfile = false;
        copy($filename, $tempfilename);
    }else{
        $newfile = true;
    }
    $fp = fopen($tempfilename, $mode);
    return $fp ? array($fp, $filename, $id, @filemtime($filename)) : false;
}
function cfwrite($fp,$string) { return fwrite($fp[0], $string); }
function cfclose($fp, $debug = "off") {
    global $dir_fileopen;
    $success = fclose($fp[0]);
    clearstatcache();
    $tempfilename = $dir_fileopen."/".$fp[2].md5($fp[1]);
    if ((@filemtime($fp[1]) == $fp[3]) || ($fp[4]==true && !file_exists($fp[1])) || $fp[5]==true) {
        rename($tempfilename, $fp[1]);
    }else{
        unlink($tempfilename);
  //说明有其它进程 在操作目标文件,当前进程被拒绝
        $success = false;
    }
    return $success;
}
$fp = cfopen('lock.txt','a+');
cfwrite($fp,"welcome to beijing.n");
fclose($fp,'on');
 

对于上面的代码所使用的函数,需要说明一下:
1.rename();重命名一个文件或一个目录,该函数其实更像linux里的mv。更新文件或者目录的路径或名字很方便。
但当我在window测试上面代码时,如果新文件名已经存在,会给出一个notice,说当前文件已经存在。但在linux下工作的很好。
2.clearstatcache();清除文件的状态.php将缓存所有文件属性信息,以提供更高的性能,但有时,多进程在对文件进行删除或者更新操作时,php没来得及更新缓存里的文件属性,容易导致访问到最后更新时间不是真实的数据。所以这里需要使用该函数对已保存的缓存进行清除。
方案三:对操作的文件进行随机读写,以降低并发的可能性。
在对用户访问日志进行记录时,这种方案似乎被采用的比较多。
先前需要定义一个随机空间,空间越大,并发的的可能性就越小,这里假设随机读写空间为[1-500],那么我们的日志文件的分布就为log1~到log500不等。每一次用户访问,都将数据随机写到log1~log500之间的任一文件。
在同一时刻,有2个进程进行记录日志,A进程可能是更新的log32文件,而B进程呢?则此时更新的可能就为log399.要知道,如果要让B进程也操作log32,概率基本上为1/500,差不多约等于零。
在需要对访问日志进行分析时,这里我们只需要先将这些日志合并,再进行分析即可。
使用这种方案来记录日志的一个好处时,进程操作排队的可能性比较小,可以使进程很迅速的完成每一次操作。
方案四:将所有要操作的进程放入一个队列中。然后专门放一个服务完成文件操作。
队列中的每一个排除的进程相当于第一个具体的操作,所以第一次我们的服务只需要从队列中取得相当于具体操作事项就可以了,如果这里还有大量的文件操作进程,没关系,排到我们的队列后面即可,只要愿意排,队列的多长都没关系。
对于以前几种方案,各有各的好处!大致可能归纳为两类:
1、需要排队(影响慢)比如方案一、二、四
2、不需要排队。(影响快)方案三
在设计缓存系统时,一般我们不会采用方案三。因为方案三的分析程序和写入程序是不同步的,在写的时间,完全不考虑到时候分析的难度,只管写的行了。试想一下,如我们在更新一个缓存时,如果也采用随机文件读写法,那么在读缓存时似乎会增加很多流程。但采取方案一、二就完全不一样,虽然写的时间需要等待(当获取锁不成功时,会反复获取),但读文件是很方便的。添加缓存的目的就是要减少数据读取瓶颈,从而提高系统性能。

PHP 相关文章推荐
Banner程序
Oct 09 PHP
destoon实现调用自增数字从1开始的方法
Aug 21 PHP
php中__destruct与register_shutdown_function执行的先后顺序问题
Oct 17 PHP
php使用date和strtotime函数输出指定日期的方法
Nov 14 PHP
php类的定义与继承用法实例
Jul 07 PHP
详解PHP序列化反序列化的方法
Oct 27 PHP
PHP简单实现生成txt文件到指定目录的方法
Apr 25 PHP
CakePHP框架Model函数定义方法示例
Aug 04 PHP
PHP排序算法之希尔排序(Shell Sort)实例分析
Apr 20 PHP
php 后端实现JWT认证方法示例
Sep 04 PHP
php微信公众号开发之答题连闯三关
Oct 20 PHP
PHP高并发和大流量解决方案整理
Mar 09 PHP
php生成图形(Libchart)实例
Nov 06 #PHP
php ZipArchive压缩函数详解实例
Nov 06 #PHP
php根据分类合并数组的方法实例详解
Nov 06 #PHP
php foreach循环中使用引用的问题
Nov 06 #PHP
php用正则表达式匹配中文实例详解
Nov 06 #PHP
php引用传值实例详解学习
Nov 06 #PHP
php二维数组排序详解
Nov 06 #PHP
You might like
3.从实例开始
2006/10/09 PHP
PHP的邮件群发系统phplist配置方法详细总结
2016/03/30 PHP
laravel 解决路由除了根目录其他都404的问题
2019/10/18 PHP
PHP函数用法详解【初始化、嵌套、内置函数等】
2020/06/02 PHP
各种效果的jquery ui(接口)介绍
2008/09/17 Javascript
jQuery TextBox自动完成条
2009/07/22 Javascript
火狐4、谷歌12不支持Jquery Validator的解决方法分享
2011/06/20 Javascript
JavaScript移除数组元素减少长度的方法
2013/09/05 Javascript
javascript中判断json的方法总结
2015/08/27 Javascript
Jquery中request和request.form和request.querystring的区别
2015/11/26 Javascript
js实现简单的二级联动效果
2017/03/09 Javascript
js实现拖拽上传图片功能
2017/08/01 Javascript
Angularjs 手写日历的实现代码(不用插件)
2017/10/18 Javascript
vue 实现左右拖拽元素并且不超过他的父元素的宽度
2018/11/30 Javascript
简单易扩展可控性强的Jquery转盘抽奖程序
2019/03/16 jQuery
Vue 无限滚动加载指令实现方法
2019/05/28 Javascript
浅谈一个webpack构建速度优化误区
2019/06/24 Javascript
详解Angular cli配置过程记录
2019/11/07 Javascript
Tensorflow中的placeholder和feed_dict的使用
2018/07/09 Python
python 删除字符串中连续多个空格并保留一个的方法
2018/12/22 Python
Python3数字求和的实例
2019/02/19 Python
python字典的常用方法总结
2019/07/31 Python
详解python中__name__的意义以及作用
2019/08/07 Python
Pytorch加载部分预训练模型的参数实例
2019/08/18 Python
opencv python 图片读取与显示图片窗口未响应问题的解决
2020/04/24 Python
html5贪吃蛇游戏使用63行代码完美实现
2013/06/25 HTML / CSS
瑞典网上购买现代和复古家具:Reforma
2019/10/21 全球购物
幼儿园教师工作感言
2014/02/15 职场文书
婚前协议书范本
2014/04/15 职场文书
跳槽求职信范文
2014/05/26 职场文书
优秀党员学习焦裕禄精神思想汇报范文
2014/09/10 职场文书
初婚未育证明样本
2015/06/18 职场文书
培训感想范文
2015/08/07 职场文书
考研经验交流会策划书
2015/11/02 职场文书
家电创业计划书
2019/08/05 职场文书
2021好看的国漫排行榜前十名 《完美世界》上榜,《元龙》排名第一
2022/03/18 国漫