PHP使用pcntl_fork实现多进程下载图片的方法


Posted in PHP onDecember 16, 2014

本文实例讲述了PHP使用pcntl_fork实现多进程下载图片的方法。分享给大家供大家参考。具体分析如下:

PHP pcntl_fork — 在当前进程当前位置产生分支,子进程,译注:fork是创建了一个子进程,父进程和子进程 都从fork的位置开始向下继续执行,不同的是父进程执行过程中,得到的fork返回值为子进程号,而子进程得到的是0.

注意:PHP有个pcntl_fork的函数可以实现多进程,但要加载pcntl拓展,而且只有在linux下才能编译这个拓展.

1.首先在ubuntu下编译pcntl.so,我的ubuntu下找不到pcntl的包,于是创建一个文件夹下载了整个PHP包,在里面找到了pcntl包运行如下命令,代码如下:

# mkdir php 

# cd php 

# apt-get source php5 

# cd php5-(WHATEVER_RELEASE)/ext/pcntl 

# phpize 

# ./configure (注一) 

# make 

# make install phpize 命令是用来准备 PHP 外挂模块的编译环境的

成功的安装将建立 extname.so 并放置于 PHP 的外挂模块目录中(预设存放于 /usr/lib/php/modules/ 内),需要调整 php.ini,加入 extension=extname.so 这一行之后才能使用此外挂模块.

例:

void pcntl_exec(string $path [,array $args [,array $envs ]])

pcntl_exec — 在当前进程空间执行指定程序,代码如下:

$cmds=array( 

        array('/home/jerry/projects/www/test2.php'), 

        array('/home/jerry/projects/www/test3.php') 

); 

 

foreach($cmds as $cmd){ 

        $pid=pcntl_fork(); 

        if($pid==-1){ 

        //进程创建失败 

            echo '创建子进程失败时返回-1'; 

            exit(-1); 

        } 

        else if($pid){ 

        //父进程会得到子进程号,所以这里是父进程执行的逻辑 

            pcntl_wait($status,WNOHANG); 

        } 

        else{ 

        //子进程处理逻辑 

            sleep(5); 

            pcntl_exec('/usr/bin/php',$cmd); 

            exit(0); 

        } 

}

例,实例多图片同步下载,代码如下:
#!/usr/bin/php 

<?php 

// 需要抓取的网页地址 

$url = 'https://3water.com'; 

$content = file_get_contents($url); 

preg_match_all('/<imgs+src="(.*?)"/', $content, $matches,PREG_SET_ORDER); 

echo "已发现".count($matches)."张图片n"; 

 

list($sm, $ss) = explode(" ", microtime()); 

foreach ($matches as $k => $val) 

{ 

 $pid[$k] = pcntl_fork(); 

 if(!$pid[$k]) 

 { 

  download($url, $val); 

  // 子进程要exit否则会进行递归多进程,父进程不要exit否则终止多进程 

  exit(0); 

 } 

 

 if ($pid[$k]) 

 { 

//    pcntl_waitpid($pid[$k], $status, WUNTRACED); 

 } 

 

} 

echo "下载完成n"; 

 

list($em, $es) = explode(" ", microtime()); 

 

echo "用时:",($es+$em) - ($ss + $sm),"n"; 

/** 

 * 抓取网页图片 

 *  

 */ 

function download($url, $val) 

{ 

 $pic_url = $val[1]; 

 if (strpos($val[1], '//') !== false) 

 { 

  ; 

 } 

 elseif (preg_match('@^(.*?)/@', $val[1], $inner_matches) == 0) 

 { 

  $pic_url = $url.$val[1]; 

 } 

 elseif (preg_match('@[:.]@', $inner_matches[1], $tmp_matches) == 0) 

 { 

  $pic_url = $url.$val[1]; 

 } 

 

 $pic = file_get_contents($pic_url); 

 

 if ($pic === false) 

 { 

  return; 

 } 

 

 preg_match('@/([^/]+)$@', $pic_url, $tmp_matches); 

 // 可使用assert处理异常 

 $pic_file_name = $tmp_matches[1]; 

 $f = fopen("tmp/".$pic_file_name, "wb"); # 

 fwrite($f, $pic); 

 fclose($f); 

} 

 

/* End of file pcntl_fork.php */ 

?>

希望本文所述对大家的PHP程序设计有所帮助。

PHP 相关文章推荐
php 各种应用乱码问题的解决方法
May 09 PHP
在smarty模板中使用PHP函数的方法
Apr 23 PHP
基于PHP导出Excel的小经验 完美解决乱码问题
Jun 10 PHP
PHP获取表单所有复选框的值的方法
Aug 28 PHP
一个完整的php文件上传类实例讲解
Oct 27 PHP
thinkPHP框架实现图像裁剪、缩放、加水印的方法
Mar 14 PHP
PHP使用finfo_file()函数检测上传图片类型的实现方法
Apr 18 PHP
php简单生成一组与多组随机字符串的方法
May 09 PHP
PHP实践教程之过滤、验证、转义与密码详解
Jul 24 PHP
PHP中“=&gt;
Mar 01 PHP
PHP实现八皇后算法
May 06 PHP
php实现分页功能的详细实例方法
Sep 29 PHP
php中最简单的字符串匹配算法
Dec 16 #PHP
PHP实现将科学计数法转换为原始数字字符串的方法
Dec 16 #PHP
php输出金字塔的2种实现方法
Dec 16 #PHP
smarty缓存用法分析
Dec 16 #PHP
yii2.0之GridView自定义按钮和链接用法
Dec 15 #PHP
smarty表格换行实例
Dec 15 #PHP
PHP使用xmllint命令处理xml与html的方法
Dec 15 #PHP
You might like
PHP 抓取网页图片并且另存为的实现代码
2010/03/24 PHP
php读取javascript设置的cookies的代码
2010/04/12 PHP
php实现对两个数组进行减法操作的方法
2015/04/17 PHP
CentOS下PHP7的编译安装及MySQL的支持和一些常见问题的解决办法
2015/12/17 PHP
定位地理位置PHP判断员工打卡签到经纬度是否在打卡之内
2019/05/23 PHP
如何运行/调试你的PHP代码
2020/10/23 PHP
javascript简易缓动插件(源码打包)
2012/02/16 Javascript
JavaScript 操作table,可以新增行和列并且隔一行换背景色代码分享
2013/07/05 Javascript
javascript实现倒计时N秒后网页自动跳转代码
2014/12/11 Javascript
深入理解JavaScript系列(38):设计模式之职责链模式详解
2015/03/04 Javascript
JavaScript生成福利彩票双色球号码
2015/05/15 Javascript
JQuery中两个ul标签的li互相移动实现方法
2015/05/18 Javascript
JavaScript中exec函数用法实例分析
2015/06/08 Javascript
js实现带缓冲效果的仿QQ面板折叠菜单代码
2015/09/06 Javascript
JavaScript中this的9种应用场景及三种复合应用场景
2015/09/12 Javascript
纯js代码制作的网页时钟特效【附实例】
2016/03/30 Javascript
JavaScript的Backbone.js框架入门学习指引
2016/05/07 Javascript
JavaScript事件学习小结(一)事件流
2016/06/09 Javascript
Bootstrap table 定制提示语的加载过程
2017/02/20 Javascript
Bootstrap按钮组实例详解
2017/07/03 Javascript
JavaScript闭包与作用域链实例分析
2019/01/21 Javascript
在vue中axios设置timeout超时的操作
2020/09/04 Javascript
[14:19]2018年度COSER大赛-完美盛典
2018/12/16 DOTA
python批量同步web服务器代码核心程序
2014/09/01 Python
Python3 使用cookiejar管理cookie的方法
2018/12/28 Python
Python 读取串口数据,动态绘图的示例
2019/07/02 Python
Python extract及contains方法代码实例
2020/09/11 Python
Python 中如何使用 virtualenv 管理虚拟环境
2021/01/21 Python
纯CSS3实现地球自转实现代码(图文教程附送源码)
2012/12/26 HTML / CSS
马来西亚在线购物:POPLOOK.com
2019/12/09 全球购物
俄罗斯便宜的在线服装商店:GroupPrice
2020/04/10 全球购物
机电专业毕业生推荐信
2013/11/10 职场文书
大学生实习证明范本
2014/09/19 职场文书
股东出资证明书范例
2014/10/04 职场文书
2015年幼儿园中班工作总结
2015/04/25 职场文书
MySQL数据库表约束讲解
2022/06/21 MySQL