python爬虫教程之爬取百度贴吧并下载的示例


Posted in Python onMarch 07, 2014

测试url:http://tieba.baidu.com/p/27141123322?pn=
begin  1
end   4

import string ,urllib2
def baidu_tieba(url,begin_page,end_page):
    for i in range(begin_page, end_page+1):
        sName = string.zfill(i,5)+ '.html'
        print '正在下载第' + str(i) + '个网页,并将其存储为' + sName + '..........'
        f = open (sName,'w+')
        m = urllib2.urlopen(url + str(i)).read()
        f.write(m)
        f.close()

bdurl = str(raw_input('url:  \n'))
begin_page = int(raw_input('begin :\n'))
end_page = int(raw_input('end : \n'))
baidu_tieba(bdurl,begin_page,end_page)
Python 相关文章推荐
Python学习笔记_数据排序方法
May 22 Python
17个Python小技巧分享
Jan 23 Python
Django的session中对于用户验证的支持
Jul 23 Python
使用python调用zxing库生成二维码图片详解
Jan 10 Python
python实现感知器算法详解
Dec 19 Python
django使用LDAP验证的方法示例
Dec 10 Python
[机器视觉]使用python自动识别验证码详解
May 16 Python
python实现图片压缩代码实例
Aug 12 Python
Python之数据序列化(json、pickle、shelve)详解
Aug 30 Python
Python Django view 两种return的实现方式
Mar 16 Python
python json.dumps中文乱码问题解决
Apr 01 Python
粗暴解决CUDA out of memory的问题
May 22 Python
python处理json数据中的中文
Mar 06 #Python
Python中针对函数处理的特殊方法
Mar 06 #Python
python连接mysql调用存储过程示例
Mar 05 #Python
python益智游戏计算汉诺塔问题示例
Mar 05 #Python
python连接mysql并提交mysql事务示例
Mar 05 #Python
python遍历文件夹并删除特定格式文件的示例
Mar 05 #Python
python的三目运算符和not in运算符使用示例
Mar 03 #Python
You might like
Zerg兵种介绍
2020/03/14 星际争霸
用PHP连接MySQL代码的参数说明
2008/06/07 PHP
PHP的拦截器实例分析
2014/11/03 PHP
Nigma vs Liquid BO3 第一场2.13
2021/03/10 DOTA
excel操作之Add Data to a Spreadsheet Cell
2007/06/12 Javascript
如何减少浏览器的reflow和repaint
2015/02/26 Javascript
jQuery读取XML文件内容的方法
2015/03/09 Javascript
JavaScript整除运算函数ceil和floor的区别分析
2015/04/14 Javascript
JS实现转动随机数抽奖特效代码
2020/04/16 Javascript
js行号显示的文本框实现效果(兼容多种浏览器 )
2015/10/23 Javascript
JavaScript中字符串与Unicode编码互相转换的实现方法
2015/12/18 Javascript
nodejs修复ipa处理过的png图片
2016/02/17 NodeJs
json对象转为字符串,当做参数传递时加密解密的实现方法
2016/06/29 Javascript
easyui datagrid 大数据加载效率慢,优化解决方法(推荐)
2016/11/09 Javascript
jquery 仿锚点跳转到页面指定位置的实例
2017/02/14 Javascript
Bootstrap弹出框之自定义悬停框标题、内容和样式示例代码
2017/07/11 Javascript
jQuery实现的页面详情展开收起功能示例
2018/06/11 jQuery
微信小程序云开发之云函数详解
2019/05/16 Javascript
Vue 用Vant实现时间选择器的示例代码
2019/10/25 Javascript
Python中__name__的使用实例
2015/04/14 Python
Python应用03 使用PyQT制作视频播放器实例
2016/12/07 Python
python 数据提取及拆分的实现代码
2019/08/26 Python
python 计算方位角实例(根据两点的坐标计算)
2020/01/17 Python
Django模型中字段属性choice使用说明
2020/03/30 Python
Pycharm pyuic5实现将ui文件转为py文件,让UI界面成功显示
2020/04/08 Python
用Python爬取LOL所有的英雄信息以及英雄皮肤的示例代码
2020/07/13 Python
css3气泡 css3关键帧动画创建的动态通知气泡
2013/02/26 HTML / CSS
注塑工厂厂长岗位职责
2013/12/02 职场文书
会计专业自我鉴定
2014/02/10 职场文书
企业指导教师评语
2014/04/28 职场文书
社区健康教育工作方案
2014/06/03 职场文书
优秀教师个人总结
2015/02/11 职场文书
python实战之用emoji表情生成文字
2021/05/08 Python
python之基数排序的实现
2021/07/26 Python
解决MySQL报“too many connections“错误
2022/04/19 MySQL
python实现学生信息管理系统(面向对象)
2022/06/05 Python