Python使用urllib模块的urlopen超时问题解决方法


Posted in Python onNovember 08, 2014

在新的公司开始上班,今天工作的主题内容是市场部门需要抓取一些论坛用户的邮箱,以便发送营销邮件。

于是用了一个python脚本来执行,前面抓了几个都没有什么问题,后来碰到一个论坛,在执行urlopen的地方总是提示超时,百度了一下,因为我使用的是urllib不是urllib2,所以无法直接在urlopen里面加timeout参数,只能是设置全局脚本的超时时间

首先:

import socket

然后:

socket.setdefaulttimeout(60)

设置全局的超时时间为60s。

之后再执行脚本的时候就没有什么大问题了。

Python 相关文章推荐
Python安装第三方库的3种方法
Jun 21 Python
Java Web开发过程中登陆模块的验证码的实现方式总结
May 25 Python
Python如何import文件夹下的文件(实现方法)
Jan 24 Python
使用Python读取安卓手机的屏幕分辨率方法
Mar 31 Python
Pandas时间序列重采样(resample)方法中closed、label的作用详解
Dec 10 Python
Windows10+anacond+GPU+pytorch安装详细过程
Mar 24 Python
python selenium xpath定位操作
Sep 01 Python
Python自动化xpath实现自动抢票抢货
Sep 19 Python
python调用百度API实现人脸识别
Nov 17 Python
python搜索算法原理及实例讲解
Nov 18 Python
python xlwt模块的使用解析
Apr 13 Python
pytorch 实现多个Dataloader同时训练
May 29 Python
Python set集合类型操作总结
Nov 07 #Python
数据挖掘之Apriori算法详解和Python实现代码分享
Nov 07 #Python
Python的subprocess模块总结
Nov 07 #Python
Python实现的监测服务器硬盘使用率脚本分享
Nov 07 #Python
Python实现的简单发送邮件脚本分享
Nov 07 #Python
Python获取Linux系统下的本机IP地址代码分享
Nov 07 #Python
零基础写python爬虫之使用Scrapy框架编写爬虫
Nov 07 #Python
You might like
深入PHP异步执行的详解
2013/06/03 PHP
php调用mysql存储过程实例分析
2014/12/29 PHP
php实现登录tplink WR882N获取IP和重启的方法
2016/07/20 PHP
PHP+MySQL实现输入页码跳转到指定页面功能示例
2018/06/01 PHP
使用laravel的Eloquent模型如何获取数据库的指定列
2019/10/17 PHP
Node.js和PHP根据ip获取地理位置的方法
2014/03/14 Javascript
js类定义函数时用prototype与不用的区别示例介绍
2014/06/10 Javascript
javascript event在FF和IE的兼容传参心得(绝对好用)
2014/07/10 Javascript
jQuery中:first选择器用法实例
2014/12/30 Javascript
详解jQuery向动态生成的内容添加事件响应jQuery live()方法
2015/11/02 Javascript
jQuery实现的AJAX简单弹出层效果代码
2015/11/26 Javascript
使用getBoundingClientRect方法实现简洁的sticky组件的方法
2016/03/22 Javascript
JavaScript入门教程之引用类型
2016/05/04 Javascript
JS实现点击事件统计的简单实例
2016/07/10 Javascript
javascript和jQuery中的AJAX技术详解【包含AJAX各种跨域技术】
2016/12/15 Javascript
微信小程序 UI与容器组件总结
2017/02/21 Javascript
基于webpack.config.js 参数详解
2018/03/20 Javascript
javascript少儿编程关于返回值的函数内容
2018/05/27 Javascript
vue使用代理解决请求跨域问题详解
2019/07/24 Javascript
vue深度监听(监听对象和数组的改变)与立即执行监听实例
2020/09/04 Javascript
在项目vue中使用echarts的操作步骤
2020/09/07 Javascript
vue实现表格合并功能
2020/12/01 Vue.js
在Python的Django框架中实现Hacker News的一些功能
2015/04/17 Python
基于python实现的抓取腾讯视频所有电影的爬虫
2016/04/22 Python
python中怎么表示空值
2020/06/19 Python
HTML5+CSS3 诱人的实例:3D立方体旋转动画实例
2016/12/30 HTML / CSS
美国批发零售网站:GearXS
2016/07/26 全球购物
DataReader和DataSet的异同
2014/12/31 面试题
毕业生的自我鉴定
2013/10/29 职场文书
保安队长职务说明书
2014/02/23 职场文书
人事代理委托书
2014/09/27 职场文书
公司年会开场白
2015/06/01 职场文书
独生子女证明范本
2015/06/19 职场文书
2016党员干部政治学习心得体会
2016/01/23 职场文书
八年级地理课件资料及考点知识分享
2019/08/30 职场文书
详解Go语言中配置文件使用与日志配置
2022/06/01 Golang