python使用BeautifulSoup分页网页中超链接的方法


Posted in Python onApril 04, 2015

本文实例讲述了python使用BeautifulSoup分页网页中超链接的方法。分享给大家供大家参考。具体如下:

python通过BeautifulSoup分页网页中的超级链接,这段python代码输出3water.com主页上所有包含了3water的url链接

from BeautifulSoup import BeautifulSoup
import urllib2
import re
url = urllib2.urlopen("https://3water.com")
content = url.read()
soup = BeautifulSoup(content)
for a in soup.findAll('a',href=True):
  if re.findall('sharejs', a['href']):
    print "Found the URL:", a['href']

希望本文所述对大家的Python程序设计有所帮助。

Python 相关文章推荐
PYTHON压平嵌套列表的简单实现
Jun 08 Python
Python中执行存储过程及获取存储过程返回值的方法
Oct 07 Python
Python用for循环实现九九乘法表
May 31 Python
opencv实现图片模糊和锐化操作
Nov 19 Python
介绍一款python类型检查工具pyright(推荐)
Jul 03 Python
把django中admin后台界面的英文修改为中文显示的方法
Jul 26 Python
在python3中实现更新界面
Feb 21 Python
Python新手学习标准库模块命名
May 29 Python
python判断是空的实例分享
Jul 06 Python
python使用re模块爬取豆瓣Top250电影
Oct 20 Python
python将YUV420P文件转PNG图片格式的两种方法
Jan 22 Python
Python first-order-model实现让照片动起来
Jun 25 Python
python实现分析apache和nginx日志文件并输出访客ip列表的方法
Apr 04 #Python
python使用BeautifulSoup分析网页信息的方法
Apr 04 #Python
python使用webbrowser浏览指定url的方法
Apr 04 #Python
用Python编写一个简单的俄罗斯方块游戏的教程
Apr 03 #Python
用Python代码来绘制彭罗斯点阵的教程
Apr 03 #Python
利用Python演示数型数据结构的教程
Apr 03 #Python
简洁的十分钟Python入门教程
Apr 03 #Python
You might like
php防止恶意刷新与刷票的方法
2014/11/21 PHP
Jquery 学习笔记(一)
2009/10/13 Javascript
jQuery 获取URL参数的插件
2010/03/04 Javascript
腾讯与新浪的通过IP地址获取当前地理位置(省份)的接口
2010/07/26 Javascript
jquery中push()的用法(数组添加元素)
2014/11/25 Javascript
JavaScript中setFullYear()方法的使用详解
2015/06/11 Javascript
详解JavaScript的Date对象(制作简易钟表)
2020/04/07 Javascript
jQuery自定义滚动条完整实例
2016/01/08 Javascript
基于js对象,操作属性、方法详解
2016/08/11 Javascript
JS公共小方法之判断对象是否为domElement的实例
2016/11/25 Javascript
微信小程序动态显示项目倒计时效果
2017/06/13 Javascript
VUE DEMO之模拟登录个人中心页面之间数据传值实例
2019/10/31 Javascript
[55:25]2018DOTA2亚洲邀请赛3月29日 小组赛A组 VG VS OG
2018/03/30 DOTA
python基础教程之对象和类的实际运用
2014/08/29 Python
介绍Python的Django框架中的QuerySets
2015/04/20 Python
深入理解 Python 中的多线程 新手必看
2016/11/20 Python
windows下Virtualenvwrapper安装教程
2017/12/13 Python
python中的for循环
2018/09/28 Python
Python中时间datetime的处理与转换用法总结
2019/02/18 Python
PyCharm中代码字体大小调整方法
2019/07/29 Python
使用python绘制温度变化雷达图
2019/10/18 Python
Spring实战之使用util:命名空间简化配置操作示例
2019/12/09 Python
Python自动采集微信联系人的实现示例
2020/02/28 Python
html5+css3之CSS中的布局与Header的实现
2014/11/21 HTML / CSS
详解CSS3中强大的filter(滤镜)属性
2017/06/29 HTML / CSS
CSS3实现可翻转的hover效果
2018/05/23 HTML / CSS
three.js模拟实现太阳系行星体系功能
2019/09/03 HTML / CSS
意大利奢侈品购物网站:Giglio
2018/01/05 全球购物
EJB3推出JPA的原因
2013/10/16 面试题
事业单位个人应聘自荐信
2013/09/21 职场文书
会计专业应届生自荐信
2014/02/07 职场文书
出生公证委托书
2014/04/03 职场文书
三严三实对照检查材料
2014/08/25 职场文书
个性发展自我评价2015
2015/03/09 职场文书
课改心得体会范文
2016/01/25 职场文书
JAVA长虹键法之建造者Builder模式实现
2022/04/10 Java/Android