详解PHP内置访问资源的超时时间 time_out file_get_contents read_file


Posted in PHP onJune 03, 2013

提问
我循环用file_get_contents抓取一堆url,但总是会在不到第100个URL的时候停下,提示我:“Warning: file_get_contents(URL) [function.file-get-
contents]: failed to open stream: HTTP request failed! HTTP/1.0 500 Read timed out
in D:\website\extra.php on line 65”
我在程序的开始已经有set_time_limit(0);了啊,那上面的错误会是因为什么呢?
回答
set_time_limit只是设置你的PHP程序的超时时间,而不是file_get_contents函数读取URL的超时时间。
从警告信息来看,是被抓取的网页出现了服务器500错误,可能是他的程序出现超时了。
如果想改变file_get_contents的超时时间,可以用resource $context的timeout参数:

$opts = array(
'http'=>array(
    'method'=>"GET",
    'timeout'=>60,
   )
);
$context = stream_context_create($opts);
$html =file_get_contents('http://www.example.com', false, $context);
fpassthru($fp);

这样readfile函数的超时时间就设置成了10秒,如果你够细心的话,还会发现数组中还有一些其他的配置,第一维中的http是指定使用的网络协议,二维中的method批的是http的请求方法get,post,head等,timeout就是超时时间了。我想很多人会使用php内置的file_get_contents函数来下载网页,因为这个函数使用起来够简单。很多人也都很简单的使用它,只要传递一个链接它就可以自动的发送get请求,并将网页内容下载下来。如果比较复杂的情况,比如使用POST请求,使用代理下载,定义User-Agent等等,这时很多人就会认为这个函数做不了这样的事情,就会选择其他方式,如curl,来实现。实际上,这些事情file_get_contents也可以做到,
就是通过它的第三个参数,设置http请求的context
支持的设置和使用方式见官方说明:http://www.php.net/manual/en/context.http.php
附:目前我知道的支持context参数的php内置函数有file_get_contents,file_put_contents,readfile,file,fopen,copy(估计这一类的函数都支持吧,待确认)。
function Post($url, $post = null)
{
$context = array();
if (is_array($post))
{
ksort($post);
$context['http'] = array
(
'timeout'=>60,
'method' => 'POST',
'content' => http_build_query($post, '', '&'),
);
}
return file_get_contents($url, false, stream_context_create($context));
}
$data = array
(
'name' => 'test',
'email' => 'test@gmail.com',
'submit' => 'submit',
);
echo Post('http://www.yifu.info', $data);

OK , 上面函数完美了,既解决了超时控制又解决了Post传值。再配合康盛的改良版RC4加密解密算法,做一个安全性很高的webservice就简单多了。
PHP 相关文章推荐
PHP 数据库树的遍历方法
Feb 06 PHP
PHP中设置时区,记录日志文件的实现代码
Jan 07 PHP
使用php get_headers 判断URL是否有效的解决办法
Apr 27 PHP
ubuntu10.04配置 nginx+php-fpm模式的详解
Jun 03 PHP
探讨PHP中this,self,parent的区别详解
Jun 08 PHP
php实现源代码加密的方法
Jul 11 PHP
PHP记录和读取JSON格式日志文件
Jul 07 PHP
Yii+MYSQL锁表防止并发情况下重复数据的方法
Jul 14 PHP
PHP7新特性foreach 修改示例介绍
Aug 26 PHP
CentOS 上搭建 PHP7 开发测试环境
Feb 26 PHP
PHP APP微信提现接口代码
Sep 30 PHP
php把文件设置为插件的技巧方法
Feb 03 PHP
PHP CLI模式下的多进程应用分析
Jun 03 #PHP
基于php-fpm 参数的深入理解
Jun 03 #PHP
php-cli简介(不会Shell语言一样用Shell)
Jun 03 #PHP
基于在生产环境中使用php性能测试工具xhprof的详解
Jun 03 #PHP
php cli模式学习(PHP命令行模式)
Jun 03 #PHP
获取PHP警告错误信息的解决方法
Jun 03 #PHP
php cli 小技巧
Jun 03 #PHP
You might like
用PHP的ob_start();控制您的浏览器cache!
2007/02/14 PHP
php防止sql注入代码实例
2013/12/18 PHP
PHP文件缓存内容保存格式实例分析
2014/08/20 PHP
五款PHP代码重构工具推荐
2014/10/14 PHP
PHP addslashes()函数讲解
2019/02/03 PHP
PHP常见的几种攻击方式实例小结
2019/04/29 PHP
js中的eventType事件及其浏览器支持性介绍
2013/11/29 Javascript
Javascript基础教程之while语句
2015/01/18 Javascript
深入探寻seajs的模块化与加载方式
2015/04/14 Javascript
浅析创建javascript对象的方法
2016/05/13 Javascript
JS创建对象的写法示例
2016/11/04 Javascript
自适应布局meta标签中viewport、content、width、initial-scale、minimum-scale、maximum-scale总结
2017/08/18 Javascript
详解如何在React组件“外”使用父组件的Props
2018/01/12 Javascript
vue移动端路由切换实例分析
2018/05/14 Javascript
vue实现简单loading进度条
2018/06/06 Javascript
JavaScript实现五子棋游戏的方法详解
2019/07/08 Javascript
Vue的transition-group与Virtual Dom Diff算法的使用
2019/12/09 Javascript
[03:17]2014DOTA2 国际邀请赛中国区预选赛 四强专访
2014/05/23 DOTA
Python json 错误xx is not JSON serializable解决办法
2017/03/15 Python
Python 比较两个数组的元素的异同方法
2017/08/17 Python
Python3之文件读写操作的实例讲解
2018/01/23 Python
Python基于opencv的图像压缩算法实例分析
2018/05/03 Python
python如何实现从视频中提取每秒图片
2020/10/22 Python
python爬虫开发之PyQuery模块详细使用方法与实例全解
2020/03/09 Python
python实现图像拼接功能
2020/03/23 Python
python db类用法说明
2020/07/07 Python
Python使用lambda抛出异常实现方法解析
2020/08/20 Python
Gweniss格温妮丝女包官网:英国纯手工制造潮流包包品牌
2018/02/07 全球购物
耐克波兰官方网站:Nike波兰
2019/09/03 全球购物
检查机关领导群众路线教育实践活动个人整改措施
2014/10/28 职场文书
先进人物事迹材料
2014/12/29 职场文书
退休职工欢送会致辞
2015/08/01 职场文书
工作一年自我鉴定
2019/06/20 职场文书
python实现的web监控系统
2021/04/27 Python
PyTorch 如何检查模型梯度是否可导
2021/06/05 Python
python实现简单的三子棋游戏
2022/04/28 Python