PHP使用pcntl_fork实现多进程下载图片的方法


Posted in PHP onDecember 16, 2014

本文实例讲述了PHP使用pcntl_fork实现多进程下载图片的方法。分享给大家供大家参考。具体分析如下:

PHP pcntl_fork — 在当前进程当前位置产生分支,子进程,译注:fork是创建了一个子进程,父进程和子进程 都从fork的位置开始向下继续执行,不同的是父进程执行过程中,得到的fork返回值为子进程号,而子进程得到的是0.

注意:PHP有个pcntl_fork的函数可以实现多进程,但要加载pcntl拓展,而且只有在linux下才能编译这个拓展.

1.首先在ubuntu下编译pcntl.so,我的ubuntu下找不到pcntl的包,于是创建一个文件夹下载了整个PHP包,在里面找到了pcntl包运行如下命令,代码如下:

# mkdir php 

# cd php 

# apt-get source php5 

# cd php5-(WHATEVER_RELEASE)/ext/pcntl 

# phpize 

# ./configure (注一) 

# make 

# make install phpize 命令是用来准备 PHP 外挂模块的编译环境的

成功的安装将建立 extname.so 并放置于 PHP 的外挂模块目录中(预设存放于 /usr/lib/php/modules/ 内),需要调整 php.ini,加入 extension=extname.so 这一行之后才能使用此外挂模块.

例:

void pcntl_exec(string $path [,array $args [,array $envs ]])

pcntl_exec — 在当前进程空间执行指定程序,代码如下:

$cmds=array( 

        array('/home/jerry/projects/www/test2.php'), 

        array('/home/jerry/projects/www/test3.php') 

); 

 

foreach($cmds as $cmd){ 

        $pid=pcntl_fork(); 

        if($pid==-1){ 

        //进程创建失败 

            echo '创建子进程失败时返回-1'; 

            exit(-1); 

        } 

        else if($pid){ 

        //父进程会得到子进程号,所以这里是父进程执行的逻辑 

            pcntl_wait($status,WNOHANG); 

        } 

        else{ 

        //子进程处理逻辑 

            sleep(5); 

            pcntl_exec('/usr/bin/php',$cmd); 

            exit(0); 

        } 

}

例,实例多图片同步下载,代码如下:
#!/usr/bin/php 

<?php 

// 需要抓取的网页地址 

$url = 'https://3water.com'; 

$content = file_get_contents($url); 

preg_match_all('/<imgs+src="(.*?)"/', $content, $matches,PREG_SET_ORDER); 

echo "已发现".count($matches)."张图片n"; 

 

list($sm, $ss) = explode(" ", microtime()); 

foreach ($matches as $k => $val) 

{ 

 $pid[$k] = pcntl_fork(); 

 if(!$pid[$k]) 

 { 

  download($url, $val); 

  // 子进程要exit否则会进行递归多进程,父进程不要exit否则终止多进程 

  exit(0); 

 } 

 

 if ($pid[$k]) 

 { 

//    pcntl_waitpid($pid[$k], $status, WUNTRACED); 

 } 

 

} 

echo "下载完成n"; 

 

list($em, $es) = explode(" ", microtime()); 

 

echo "用时:",($es+$em) - ($ss + $sm),"n"; 

/** 

 * 抓取网页图片 

 *  

 */ 

function download($url, $val) 

{ 

 $pic_url = $val[1]; 

 if (strpos($val[1], '//') !== false) 

 { 

  ; 

 } 

 elseif (preg_match('@^(.*?)/@', $val[1], $inner_matches) == 0) 

 { 

  $pic_url = $url.$val[1]; 

 } 

 elseif (preg_match('@[:.]@', $inner_matches[1], $tmp_matches) == 0) 

 { 

  $pic_url = $url.$val[1]; 

 } 

 

 $pic = file_get_contents($pic_url); 

 

 if ($pic === false) 

 { 

  return; 

 } 

 

 preg_match('@/([^/]+)$@', $pic_url, $tmp_matches); 

 // 可使用assert处理异常 

 $pic_file_name = $tmp_matches[1]; 

 $f = fopen("tmp/".$pic_file_name, "wb"); # 

 fwrite($f, $pic); 

 fclose($f); 

} 

 

/* End of file pcntl_fork.php */ 

?>

希望本文所述对大家的PHP程序设计有所帮助。

PHP 相关文章推荐
给多个地址发邮件的类
Oct 09 PHP
php中session_unset与session_destroy的区别分析
Jun 16 PHP
phpadmin如何导入导出大数据文件及php.ini参数修改
Feb 18 PHP
ThinkPHP实现批量删除数据的代码实例
Jul 02 PHP
php限制ip地址范围的方法
Mar 31 PHP
php使用Imagick生成图片的方法
Jul 31 PHP
微信公众平台DEMO(PHP)
May 04 PHP
thinkphp整合微信支付代码分享
Nov 24 PHP
Zend Framework使用Zend_Loader组件动态加载文件和类用法详解
Dec 09 PHP
PDO::errorCode讲解
Jan 28 PHP
Smarty模板类内部原理实例分析
Jul 03 PHP
laravel withCount 统计关联数量的方法
Oct 10 PHP
php中最简单的字符串匹配算法
Dec 16 #PHP
PHP实现将科学计数法转换为原始数字字符串的方法
Dec 16 #PHP
php输出金字塔的2种实现方法
Dec 16 #PHP
smarty缓存用法分析
Dec 16 #PHP
yii2.0之GridView自定义按钮和链接用法
Dec 15 #PHP
smarty表格换行实例
Dec 15 #PHP
PHP使用xmllint命令处理xml与html的方法
Dec 15 #PHP
You might like
从Web查询数据库之PHP与MySQL篇
2009/09/25 PHP
php中将html中的br换行符转换为文本输入中的换行符
2013/03/26 PHP
详解php设置session(过期、失效、有效期)
2015/11/12 PHP
smarty高级特性之过滤器的使用方法
2015/12/25 PHP
ThinkPHP中session函数详解
2016/09/14 PHP
php变量与数组相互转换的方法(extract与compact)
2016/12/02 PHP
PHP无限极分类函数的实现方法详解
2017/04/15 PHP
PHP执行普通shell命令流程解析
2020/08/24 PHP
一个小型js框架myJSFrame附API使用帮助
2008/06/28 Javascript
利用json获取字符出现次数的代码
2012/03/22 Javascript
页面使用密码保护代码
2013/04/10 Javascript
如何设置iframe高度自适应在跨域情况下的可用方法
2013/09/06 Javascript
node.js中的console.log方法使用说明
2014/12/09 Javascript
js方法数据验证的简单实例
2016/09/17 Javascript
微信小程序 es6-promise.js封装请求与处理异步进程
2017/06/12 Javascript
for循环 + setTimeout 结合一些示例(前端面试题)
2017/08/30 Javascript
elementui的默认样式修改方法
2018/02/23 Javascript
javascript使用正则实现去掉字符串前面的所有0
2018/07/23 Javascript
[56:12]LGD vs Optic Supermajor小组赛D组胜者组决赛 BO3 第一场 6.3
2018/06/04 DOTA
在IPython中进行Python程序执行时间的测量方法
2018/11/01 Python
pip安装py_zipkin时提示的SSL问题对应
2018/12/29 Python
Python爬虫实现验证码登录代码实例
2019/05/10 Python
PyTorch搭建一维线性回归模型(二)
2019/05/22 Python
基于Python实现ComicReaper漫画自动爬取脚本过程解析
2019/11/11 Python
Pytorch实现各种2d卷积示例
2019/12/30 Python
虚拟环境及venv和virtualenv的区别说明
2021/02/05 Python
FitFlop澳大利亚官网:英国符合人体工学的鞋类品牌
2017/06/05 全球购物
说出你对remoting 和webservice的理解和应用
2014/06/08 面试题
飞利信loadrunner和软件测试笔试题
2012/09/22 面试题
师范生自荐信
2013/10/27 职场文书
优秀教师单行材料
2014/12/16 职场文书
中学教师个人总结
2015/02/10 职场文书
幼儿园师德师风心得体会
2016/01/12 职场文书
python将图片转为矢量图的方法步骤
2021/03/30 Python
python3 实现mysql数据库连接池的示例代码
2021/04/17 Python
《艾尔登法环》Boss腐烂树灵很有可能是《黑暗之魂3》的一个废案
2022/04/11 其他游戏