详解PHP中curl_multi并发的实现


Posted in PHP onJune 08, 2020

PHP中的curl_multi系列函数可以实现同时请求多个URL来实现并发,而不是像普通curl函数那样请求后会阻塞,直到结果返回才进行下一个请求。因此在批量请求URL时可通过curl_multi系列函数提升程序的运行效率。

curl普通请求

$startTime = microtime(true);
$chArr = [];
$optArr = [
  CURLOPT_URL => 'http://www.httpbin.org/ip',
  CURLOPT_HEADER => 0,
  CURLOPT_RETURNTRANSFER => 1,
];
$result = [];

//创建多个curl资源并执行
for ($i=0; $i<10; $i++) {
  $chArr[$i] = curl_init();
  curl_setopt_array($chArr[$i], $optArr);
  $result[$i] = curl_exec($chArr[$i]);
  curl_close($chArr[$i]);
}

$endTime = microtime(true);
echo sprintf("use time: %.3f s".PHP_EOL, $endTime - $startTime);

use time: 6.080 s

curl_multi并发请求

$startTime = microtime(true);
$chArr = [];
$optArr = [
  CURLOPT_URL => 'http://www.httpbin.org/ip',
  CURLOPT_HEADER => 0,
  CURLOPT_RETURNTRANSFER => 1,
];
$result = [];

//创建多个curl资源
for ($i=0; $i<10; $i++) {
  $chArr[$i] = curl_init();
  curl_setopt_array($chArr[$i], $optArr);
}
//创建批处理curl句柄
$mh = curl_multi_init();
//将单个curl句柄添加到批处理curl句柄中
foreach ($chArr as $ch) {
  curl_multi_add_handle($mh, $ch);
}
//判断操作是否仍在执行的标识的引用
$active = null;
/**
 * 本次循环第一次处理 $mh 批处理中的 $ch 句柄,并将 $mh 批处理的执行状态写入 $active,
 * 当状态值等于 CURLM_CALL_MULTI_PERFORM 时,表明数据还在写入或读取中,执行循环,
 * 当第一次 $ch 句柄的数据写入或读取成功后,状态值变为 CURLM_OK ,跳出本次循环,进入下面的大循环中。
 */
do {
  //处理在批处理栈中的每一个句柄
  $mrc = curl_multi_exec($mh, $active);
} while ($mrc == CURLM_CALL_MULTI_PERFORM);
/**
 * 上面这段代码中,是可以直接使用 $active > 0 来作为 while 的条件,如下:
 * do {
 *  $mrc = curl_multi_exec($mh, $active);
 * } while ($active > 0);
 * 此时如果整个批处理句柄没有全部执行完毕时,系统会不停的执行 curl_multi_exec 函数,从而导致系统CPU占用会很高,
 * 因此一般不采用这种方案,可以通过 curl_multi_select 函数来达到没有需要读取的程序就阻塞住的目的。
 */

/**
 * $active 为 true 时,即 $mh 批处理之中还有 $ch 句柄等待处理,
 * $mrc == CURLM_OK,即上一次 $ch 句柄的读取或写入已经执行完毕。
 */
while ($active && $mrc == CURLM_OK) {
  /** 
   * 程序进入阻塞状态,直到批处理中有活动连接(即 $mh 批处理中还有可执行的 $ch 句柄),
   * 这样执行的好处是 $mh 批处理中的 $ch 句柄会在读取或写入数据结束后($mrc == CURLM_OK)进入阻塞阶段,
   * 而不会在整个 $mh 批处理执行时不停地执行 curl_multi_exec 函数,白白浪费CPU资源。
   */
   if (curl_multi_select($mh) != -1) {
    //程序退出阻塞状态继续执行需要处理的 $ch 句柄
    do {
      $mrc = curl_multi_exec($mh, $active);
    } while ($mrc == CURLM_CALL_MULTI_PERFORM);
  }
}

foreach ($chArr as $i=>$ch) {
  //获取某个curl句柄的返回值
  $result[$i] = curl_multi_getcontent($ch);
  //移除批处理句柄中的某个句柄资源
  curl_multi_remove_handle($mh, $ch);
}
//关闭一组curl句柄
curl_multi_close($mh);
$endTime = microtime(true);
echo sprintf("use time: %.3f s".PHP_EOL, $endTime - $startTime);

use time: 0.599 s

通过对比上述程序的运行时间可以得知,使用curl_multi系列函数并发请求要比普通的curl函数依次请求效率高很多。

到此这篇关于详解PHP中curl_multi并发的实现的文章就介绍到这了,更多相关PHP curl_multi并发内容请搜索三水点靠木以前的文章或继续浏览下面的相关文章希望大家以后多多支持三水点靠木! 

PHP 相关文章推荐
php GD绘制24小时柱状图
Jun 28 PHP
PHP学习笔记 用户注册模块用户类以及验证码类
Sep 20 PHP
PHP中实现中文字符进制转换原理分析
Dec 06 PHP
PHP得到mssql的存储过程的输出参数功能实现
Nov 23 PHP
探讨file_get_contents与curl效率及稳定性的分析
Jun 06 PHP
利用PHP+JS实现搜索自动提示(实例)
Jun 09 PHP
php实现图片局部打马赛克的方法
Feb 11 PHP
帝国cms目录结构分享
Jul 06 PHP
PHP模拟post提交数据方法汇总
Feb 16 PHP
PHP微信开发之有道翻译
Jun 23 PHP
php微信开发之上传临时素材
Jun 24 PHP
关于ThinkPhp 框架表单验证及ajax验证问题
Jul 19 PHP
THINKPHP5.1 Config的配置与获取详解
Jun 08 #PHP
ThinkPHP5.1验证码功能实现的示例代码
Jun 08 #PHP
php框架CI(codeigniter)自动加载与自主创建对象操作实例分析
Jun 06 #PHP
CI框架简单分页类用法示例
Jun 06 #PHP
简单的php购物车代码
Jun 05 #PHP
实例化php类时传参的方法分析
Jun 05 #PHP
PHP页面静态化――纯静态与伪静态用法详解
Jun 05 #PHP
You might like
rrmdir php中递归删除目录及目录下的文件
2011/05/15 PHP
php防止站外远程提交表单的方法
2014/10/20 PHP
Thinkphp框架中D方法与M方法的区别
2016/12/23 PHP
php脚本守护进程原理与实现方法详解
2017/07/20 PHP
详细解读php的命名空间(一)
2018/02/21 PHP
jscript之Read an Excel Spreadsheet
2007/06/13 Javascript
javascript 动态加载 css 方法总结
2009/07/11 Javascript
基于JQuery的模拟苹果桌面Dock效果(稳定版)
2012/10/15 Javascript
运算符&amp;&amp;的三个不同层次
2013/04/07 Javascript
你必须知道的Javascript知识点之&quot;this指针&quot;的应用
2013/04/23 Javascript
javascript和HTML5利用canvas构建猜牌游戏实现算法
2013/07/17 Javascript
jQuery中ajax的get()方法用法实例
2014/12/26 Javascript
浅析javascript中函数声明和函数表达式的区别
2015/02/15 Javascript
js添加绑定事件的方法
2016/05/15 Javascript
Javascript类型系统之String字符串类型详解
2016/06/21 Javascript
原生js实现jquery函数animate()动画效果的简单实例
2016/08/21 Javascript
JSON与JS对象的区别与对比
2017/03/01 Javascript
js中apply与call简单用法详解
2017/11/06 Javascript
JS立即执行的匿名函数用法分析
2019/11/04 Javascript
[01:03:31]DOTA2上海特级锦标赛B组资格赛#1 Alliance VS Fnatic第二局
2016/02/26 DOTA
在Python中pandas.DataFrame重置索引名称的实例
2018/11/06 Python
浅谈Python的条件判断语句if/else语句
2019/03/21 Python
python 进程的几种创建方式详解
2019/08/29 Python
python/Matplotlib绘制复变函数图像教程
2019/11/21 Python
kafka监控获取指定topic的消息总量示例
2019/12/23 Python
python设置代理和添加镜像源的方法
2020/02/14 Python
python使用建议与技巧分享(一)
2020/08/17 Python
使用javascript和HTML5 Canvas画的四渐变色播放按钮效果
2014/04/10 HTML / CSS
用HTML5实现鼠标滚轮事件放大缩小图片的功能
2015/06/25 HTML / CSS
美国受信赖的教育产品供应商:Nest Learning
2018/06/14 全球购物
奥地利购买珠宝和手表网站:ELLA JUWELEN
2019/09/03 全球购物
医药学专业大学生职业生涯规划书论文
2014/01/21 职场文书
培训自我鉴定
2014/01/31 职场文书
《长城》教学反思
2014/02/14 职场文书
 分享一个Python 遇到数据库超好用的模块
2022/04/06 Python
Java 轮询锁使用时遇到问题
2022/05/11 Java/Android