python使用BeautifulSoup分页网页中超链接的方法


Posted in Python onApril 04, 2015

本文实例讲述了python使用BeautifulSoup分页网页中超链接的方法。分享给大家供大家参考。具体如下:

python通过BeautifulSoup分页网页中的超级链接,这段python代码输出3water.com主页上所有包含了3water的url链接

from BeautifulSoup import BeautifulSoup
import urllib2
import re
url = urllib2.urlopen("https://3water.com")
content = url.read()
soup = BeautifulSoup(content)
for a in soup.findAll('a',href=True):
  if re.findall('sharejs', a['href']):
    print "Found the URL:", a['href']

希望本文所述对大家的Python程序设计有所帮助。

Python 相关文章推荐
12步入门Python中的decorator装饰器使用方法
Jun 20 Python
python获取指定时间差的时间实例详解
Apr 11 Python
Python 实现异步调用函数的示例讲解
Oct 14 Python
[原创]Python入门教程3. 列表基本操作【定义、运算、常用函数】
Oct 30 Python
python 使用装饰器并记录log的示例代码
Jul 12 Python
python使用minimax算法实现五子棋
Jul 29 Python
Django继承自带user表并重写的例子
Nov 18 Python
pd.DataFrame统计各列数值多少的实例
Dec 05 Python
使用pytorch完成kaggle猫狗图像识别方式
Jan 10 Python
Python数据分析之绘图和可视化详解
Jun 02 Python
Python编程编写完善的命令行工具
Sep 15 Python
关于Python使用turtle库画任意图的问题
Apr 01 Python
python实现分析apache和nginx日志文件并输出访客ip列表的方法
Apr 04 #Python
python使用BeautifulSoup分析网页信息的方法
Apr 04 #Python
python使用webbrowser浏览指定url的方法
Apr 04 #Python
用Python编写一个简单的俄罗斯方块游戏的教程
Apr 03 #Python
用Python代码来绘制彭罗斯点阵的教程
Apr 03 #Python
利用Python演示数型数据结构的教程
Apr 03 #Python
简洁的十分钟Python入门教程
Apr 03 #Python
You might like
使用php将某个目录下面的所有文件罗列出来的方法详解
2013/06/21 PHP
PHP中判断变量为空的几种方法小结
2013/11/12 PHP
使用PHPMailer实现邮件发送代码分享
2014/10/23 PHP
PHP中的命名空间相关概念浅析
2015/01/22 PHP
php微信公众号开发模式详解
2016/11/28 PHP
PHP实现redis限制单ip、单用户的访问次数功能示例
2018/06/16 PHP
PDO::quote讲解
2019/01/29 PHP
发现的以前不知道的函数
2006/09/19 Javascript
javascript实现 在光标处插入指定内容
2007/05/25 Javascript
jQuery向上遍历DOM树之parents(),parent(),closest()之间的区别
2013/12/02 Javascript
用原生JS获取CLASS对象(很简单实用)
2014/10/15 Javascript
javascript异步编程代码书写规范Promise学习笔记
2015/02/11 Javascript
jQuery UI Bootstrap是什么?
2016/06/17 Javascript
jQuery Validate插件实现表单验证
2016/08/19 Javascript
vue.js指令v-model实现方法
2016/12/05 Javascript
Vue.js 中的 $watch使用方法
2017/05/25 Javascript
jQuery常见面试题之DOM操作详析
2017/07/05 jQuery
原生JS实现Ajax跨域请求flask响应内容
2017/10/24 Javascript
element-ui的回调函数Events的用法详解
2018/10/16 Javascript
在vue和element-ui的table中实现分页复选功能
2019/12/04 Javascript
python实现壁纸批量下载代码实例
2018/01/25 Python
Python中循环后使用list.append()数据被覆盖问题的解决
2018/07/01 Python
python递归全排列实现方法
2018/08/18 Python
django小技巧之html模板中调用对象属性或对象的方法
2018/11/30 Python
使用python实现学生信息管理系统
2021/02/25 Python
详解css3 Transition属性(平滑过渡菜单栏案例)
2017/09/05 HTML / CSS
重新定义牛仔布,100美元以下:Warp + Weft
2018/07/25 全球购物
可以在一个PHP文件里面include另外一个PHP文件两次吗
2015/05/22 面试题
车间主管岗位职责
2013/11/14 职场文书
运动会表扬稿大全
2014/01/16 职场文书
行政人事岗位职责
2014/03/17 职场文书
2014年五一劳动节社区活动总结
2014/04/14 职场文书
出纳岗位职责范本
2015/03/31 职场文书
神秘岛读书笔记
2015/07/01 职场文书
vue实现简单数据双向绑定
2021/04/28 Vue.js
pnpm对npm及yarn降维打击详解
2022/08/05 Javascript