python采用requests库模拟登录和抓取数据的简单示例


Posted in Python onJuly 05, 2014

如果你还在为python的各种urllib和urlibs,cookielib 头疼,或者还还在为python模拟登录和抓取数据而抓狂,那么来看看我们推荐的requests,python采集数据模拟登录必备利器!

这也是python推荐的HTTP客户端库:

本文就以一个模拟登录的例子来加以说明,至于采集大家就请自行发挥吧。

代码很简单,主要是展现python的requests库的简单至极,代码如下:

s = requests.session()
data = {'user':'用户名','passdw':'密码'}
#post 换成登录的地址,
res=s.post('http://www.xxx.net/index.php?action=login',data);
#换成抓取的地址
s.get('http://www.xxx.net/archives/155/');

看!仅仅4行代码,即可模拟登录。

Python 相关文章推荐
Python专用方法与迭代机制实例分析
Sep 15 Python
改进Django中的表单的简单方法
Jul 17 Python
Python编程中对文件和存储器的读写示例
Jan 25 Python
Python实现学生成绩管理系统
Apr 05 Python
python list元素为tuple时的排序方法
Apr 18 Python
利用Python写一个爬妹子的爬虫
Jun 08 Python
如何在Python中实现goto语句的方法
May 18 Python
python进程和线程用法知识点总结
May 28 Python
Pytorch实现GoogLeNet的方法
Aug 18 Python
python的命名规则知识点总结
Oct 04 Python
python 按钮点击关闭窗口的实现
Mar 04 Python
Python进行统计建模
Aug 10 Python
浅析python 中__name__ = '__main__' 的作用
Jul 05 #Python
python在windows下实现备份程序实例
Jul 04 #Python
python调用短信猫控件实现发短信功能实例
Jul 04 #Python
Python实现类继承实例
Jul 04 #Python
Django集成百度富文本编辑器uEditor攻略
Jul 04 #Python
一个小示例告诉你Python语言的优雅之处
Jul 04 #Python
教你如何将 Sublime 3 打造成 Python/Django IDE开发利器
Jul 04 #Python
You might like
解析thinkphp基本配置 convention.php
2013/06/18 PHP
php中foreach结合curl实现多线程的方法分析
2016/09/22 PHP
PHP时间处理类操作示例
2018/09/05 PHP
Javascript 表单之间的数据传递代码
2008/12/04 Javascript
表单元素事件 (Form Element Events)
2009/07/17 Javascript
JavaScript数据库TaffyDB用法实例分析
2015/07/27 Javascript
js实现简单秒表走动的时钟特效
2020/03/25 Javascript
在Mac OS上安装使用Node.js的项目自动化构建工具Gulp
2016/06/18 Javascript
easyui form validate总是返回false的原因及解决方法
2016/11/07 Javascript
Jquery EasyUI Datagrid右键菜单实现方法
2016/12/30 Javascript
bootstrap fileinput组件整合Springmvc上传图片到本地磁盘
2017/05/11 Javascript
详解VueJs前后端分离跨域问题
2017/05/24 Javascript
Vue filters过滤器的使用方法
2017/07/14 Javascript
vue项目中用cdn优化的方法
2018/01/03 Javascript
vue 标签属性数据绑定和拼接的实现方法
2018/05/17 Javascript
详解vue axios用post提交的数据格式
2018/08/07 Javascript
Vue实现一个图片懒加载插件
2019/03/11 Javascript
JavaScript中十种一步拷贝数组的方法实例详解
2019/04/22 Javascript
[01:09:23]KG vs TNC 2019国际邀请赛小组赛 BO2 第一场 8.15
2019/08/16 DOTA
详解Python的Django框架中的中间件
2015/07/24 Python
Apache如何部署django项目
2017/05/21 Python
python中yaml配置文件模块的使用详解
2018/04/27 Python
python脚本实现验证码识别
2018/06/07 Python
Python使用gRPC传输协议教程
2018/10/16 Python
Django框架模板语言实例小结【变量,标签,过滤器,继承,html转义】
2019/05/23 Python
python面试题Python2.x和Python3.x的区别
2019/05/28 Python
python3常用的数据清洗方法(小结)
2019/10/31 Python
美国主要的特色咖啡和茶公司:Peet’s Coffee
2020/02/14 全球购物
AJAX的全称是什么
2012/11/06 面试题
优秀的茶餐厅创业计划书
2014/01/03 职场文书
酒鬼酒广告词
2014/03/21 职场文书
项目经理任命书内容
2014/06/06 职场文书
工作业绩不及格检讨书
2014/10/28 职场文书
大学军训心得体会800字
2016/01/11 职场文书
python自然语言处理之字典树知识总结
2021/04/25 Python
利用Redis实现点赞功能的示例代码
2022/06/28 Redis