python使用BeautifulSoup分页网页中超链接的方法


Posted in Python onApril 04, 2015

本文实例讲述了python使用BeautifulSoup分页网页中超链接的方法。分享给大家供大家参考。具体如下:

python通过BeautifulSoup分页网页中的超级链接,这段python代码输出3water.com主页上所有包含了3water的url链接

from BeautifulSoup import BeautifulSoup
import urllib2
import re
url = urllib2.urlopen("https://3water.com")
content = url.read()
soup = BeautifulSoup(content)
for a in soup.findAll('a',href=True):
  if re.findall('sharejs', a['href']):
    print "Found the URL:", a['href']

希望本文所述对大家的Python程序设计有所帮助。

Python 相关文章推荐
python实现的登录和操作开心网脚本分享
Jul 09 Python
Python中转换角度为弧度的radians()方法
May 18 Python
Python中使用strip()方法删除字符串中空格的教程
May 20 Python
python买卖股票的最佳时机(基于贪心/蛮力算法)
Jul 05 Python
基于Django静态资源部署404的解决方法
Jul 28 Python
Tensorflow矩阵运算实例(矩阵相乘,点乘,行/列累加)
Feb 05 Python
Python处理mysql特殊字符的问题
Mar 02 Python
Python实现王者荣耀自动刷金币的完整步骤
Jan 22 Python
Python list去重且保持原顺序不变的方法
Apr 03 Python
numpy数据类型dtype转换实现
Apr 24 Python
python 爬取哔哩哔哩up主信息和投稿视频
Jun 07 Python
pandas进行数据输入和输出的方法详解
Mar 23 Python
python实现分析apache和nginx日志文件并输出访客ip列表的方法
Apr 04 #Python
python使用BeautifulSoup分析网页信息的方法
Apr 04 #Python
python使用webbrowser浏览指定url的方法
Apr 04 #Python
用Python编写一个简单的俄罗斯方块游戏的教程
Apr 03 #Python
用Python代码来绘制彭罗斯点阵的教程
Apr 03 #Python
利用Python演示数型数据结构的教程
Apr 03 #Python
简洁的十分钟Python入门教程
Apr 03 #Python
You might like
电脑硬件及电脑配置知识大全
2020/03/17 数码科技
PHP的开合式多级菜单程序
2006/10/09 PHP
laravel安装和配置教程
2014/10/29 PHP
thinkphp制作404跳转页的简单实现方法
2016/09/22 PHP
php发送http请求的常用方法分析
2016/11/08 PHP
PHP长连接实现与使用方法详解
2018/02/11 PHP
javascript 按回车键相应按钮提交事件
2009/11/02 Javascript
JS关键字变色实现思路及代码
2013/02/21 Javascript
String.prototype实现的一些javascript函数介绍
2013/11/22 Javascript
基于promise.js实现nodejs的promises库
2014/07/06 NodeJs
JavaScript的各种常见函数定义方法
2014/09/16 Javascript
javascript使用switch case实现动态改变超级链接文字及地址
2014/12/16 Javascript
javascript中offset、client、scroll的属性总结
2015/08/13 Javascript
浅谈JavaScript的push(),pop(),concat()方法
2016/06/03 Javascript
深入浅析JS的数组遍历方法(推荐)
2016/06/15 Javascript
Bootstrap的modal拖动效果
2016/12/25 Javascript
基于vue+ bootstrap实现图片上传图片展示功能
2017/05/17 Javascript
微信小程序开发教程之增加mixin扩展
2017/08/09 Javascript
基于js粘贴事件paste简单解析以及遇到的坑
2017/09/07 Javascript
vue单页应用加百度统计代码(亲测有效)
2018/01/31 Javascript
JS实现随机生成10个手机号的方法示例
2018/12/07 Javascript
JavaScript模板引擎原理与用法详解
2018/12/24 Javascript
详解Vue中Axios封装API接口的思路及方法
2020/10/10 Javascript
[01:12:27]EG vs Secret 2018国际邀请赛淘汰赛BO3 第二场 8.22
2018/08/23 DOTA
python处理cookie详解
2014/02/07 Python
python制作填词游戏步骤详解
2019/05/05 Python
python 如何快速复制序列
2020/09/07 Python
Python监听剪切板实现方法代码实例
2020/11/11 Python
严选全球尖货,立足香港:Bonpont宝盆
2018/07/24 全球购物
英国顶级水晶珠宝零售商之一:Tresor Paris
2019/04/27 全球购物
劳资专员岗位职责
2013/12/27 职场文书
教师求职自荐书
2014/06/14 职场文书
高考升学宴答谢词
2015/01/20 职场文书
销售区域经理岗位职责
2015/04/10 职场文书
SQL Server基本使用和简单的CRUD操作
2021/04/05 SQL Server
pytorch 一行代码查看网络参数总量的实现
2021/05/12 Python