Python大数据之网络爬虫的post请求、get请求区别实例分析


Posted in Python onNovember 16, 2019

本文实例讲述了Python大数据之网络爬虫的post请求、get请求区别。分享给大家供大家参考,具体如下:

在JetBrains PyCharm 2016.3软件中编写代码前,需要指定python和编码方式:

#!user/bin/python

编码方式 :#coding=utf-8 或者 #-*-coding:utf-8-*-

post请求:

#导入工具,内置的库
import urllib
import urllib2
#加一个\可以换行
#response = \
  #urllib2.urlopen("https://hao.360.cn/?wd_xp1")
#print response.read()
request = urllib2.Request('http://www.baidu.com')
#response = urllib2.urlopen(request)
#构造post请求
params={}
params['account']='jredu'
params['pwd']=''
#对数据进行编码
data = urllib.urlencode(params)
response = urllib2.urlopen(request,data)
print response.url
print response.code
print response.read()

get请求:

#导入工具,内置的库
import urllib
import urllib2
#加一个\可以换行
#response = \
  #urllib2.urlopen("https://hao.360.cn/?wd_xp1")
#print response.read()
url='http://www.baidu.com'
#response = urllib2.urlopen(request)
#构造post请求
params={}
params['account']='jredu'
params['pwd']=''
#对数据进行编码
data = urllib.urlencode(params)
request = urllib2.Request(url+"?"+data)
response = urllib2.urlopen(request)
print response.url
print response.code
print response.read()

更多关于Python相关内容可查看本站专题:《Python Socket编程技巧总结》、《Python正则表达式用法总结》、《Python数据结构与算法教程》、《Python函数使用技巧总结》、《Python字符串操作技巧汇总》、《Python入门与进阶经典教程》及《Python文件与目录操作技巧汇总》

希望本文所述对大家Python程序设计有所帮助。

Python 相关文章推荐
python连接oracle数据库实例
Oct 17 Python
简单介绍Python中用于求最小值的min()方法
May 15 Python
Python二叉搜索树与双向链表转换实现方法
Apr 29 Python
使用Python绘制图表大全总结
Feb 11 Python
Python2.7.10以上pip更新及其他包的安装教程
Jun 12 Python
详解python中的Turtle函数库
Nov 19 Python
pygame游戏之旅 python和pygame安装教程
Nov 20 Python
Python3模拟登录操作实例分析
Mar 12 Python
python [:3] 实现提取数组中的数
Nov 27 Python
Python钉钉报警及Zabbix集成钉钉报警的示例代码
Aug 17 Python
2020年10款优秀的Python第三方库,看看有你中意的吗?
Jan 12 Python
No module named ‘win32gui‘ 的解决方法(踩坑之旅)
Feb 18 Python
基于python实现雪花算法过程详解
Nov 16 #Python
Python大数据之使用lxml库解析html网页文件示例
Nov 16 #Python
Python大数据之从网页上爬取数据的方法详解
Nov 16 #Python
简单了解Pandas缺失值处理方法
Nov 16 #Python
python selenium 执行完毕关闭chromedriver进程示例
Nov 15 #Python
浅谈Django2.0 加xadmin踩的坑
Nov 15 #Python
Django 实现xadmin后台菜单改为中文
Nov 15 #Python
You might like
随时给自己贴的图片加文字的php代码
2007/03/08 PHP
自动把纯文本转换成Web页面的php代码
2009/08/27 PHP
php实现阳历阴历互转的方法
2015/10/28 PHP
jQuery 使用手册(二)
2009/09/23 Javascript
用函数模板,写一个简单高效的 JSON 查询器的方法介绍
2013/04/17 Javascript
javascript 处理null及null值示例
2014/06/09 Javascript
同一个网页中实现多个JavaScript特效的方法
2015/02/02 Javascript
JavaScript中的return语句简单介绍
2015/12/07 Javascript
javascript中数组和字符串的方法对比
2016/07/20 Javascript
javascript之IE版本检测超简单方法
2016/08/20 Javascript
JS判断是否手机或pad访问实现方法
2016/12/09 Javascript
JavaScript获取当前时间向前推三个月的方法示例
2017/02/04 Javascript
基于vue的fullpage.js单页滚动插件
2017/03/20 Javascript
Node.js实现文件上传的示例
2017/06/28 Javascript
使用Vue的slot插槽分发父组件内容实现高度复用、更加灵活的组件(推荐)
2018/05/01 Javascript
Node.js系列之连接DB的方法(3)
2019/08/30 Javascript
支付宝小程序实现省市区三级联动
2020/06/21 Javascript
Python中super的用法实例
2015/05/28 Python
Python使用redis pool的一种单例实现方式
2016/04/16 Python
Python的Tornado框架实现图片上传及图片大小修改功能
2016/06/30 Python
Python实现一个简单的验证码程序
2017/11/03 Python
python3中os.path模块下常用的用法总结【推荐】
2018/09/16 Python
对python中的高效迭代器函数详解
2018/10/18 Python
详解python中的Turtle函数库
2018/11/19 Python
在win10和linux上分别安装Python虚拟环境的方法步骤
2019/05/09 Python
python调用pyaudio使用麦克风录制wav声音文件的教程
2019/06/26 Python
Python实现汇率转换操作
2020/05/03 Python
CSS实现限制字数功能当对象内文本溢出时显示省略标记
2014/08/20 HTML / CSS
中国宠物用品商城:E宠商城
2016/08/27 全球购物
瑞典最好的运动鞋专卖店:Sneakersnstuff
2016/08/29 全球购物
Diamondback自行车:拥有你的冒险
2019/04/22 全球购物
爱情检讨书大全
2014/01/21 职场文书
生产部厂长助理职位说明书
2014/03/03 职场文书
校长竞聘演讲稿
2014/05/16 职场文书
大学生求职信例文
2014/06/29 职场文书
小人国观后感
2015/06/11 职场文书