编程 Python

python获取指定网页上所有超链接的方法

Posted in Python onApril 04, 2015

本文实例讲述了python获取指定网页上所有超链接的方法。分享给大家供大家参考。具体如下：

这段python代码通过urllib2抓取网页，然后通过简单的正则表达式分析网页上的全部url地址

import urllib2
import re
#connect to a URL
website = urllib2.urlopen(url)
#read html code
html = website.read()
#use re.findall to get all the links
links = re.findall('"((http|ftp)s?://.*?)"', html)
print links

希望本文所述对大家的python程序设计有所帮助。

python获取指定网页上所有超链接的方法

- Author -

令狐不聪

声明：登载此文出于传递更多信息之目的，并不意味着赞同其观点或证实其描述。

Python 相关文章推荐

pycharm 使用心得（九）解决No Python interpreter selected的问题

Jun 06 Python

python实现无证书加密解密实例

Oct 27 Python

Python面向对象之接口、抽象类与多态详解

Aug 27 Python

使用python的pandas为你的股票绘制趋势图

Jun 26 Python

使用Python中的reduce()函数求积的实例

Jun 28 Python

对python中assert、isinstance的用法详解

Nov 27 Python

在python中计算ssim的方法（与Matlab结果一致）

Dec 19 Python

浅析Django 接收所有文件,前端展示文件（包括视频，文件，图片）ajax请求

Mar 09 Python

详解Python3中的 input() 函数

Mar 18 Python

浅析python 字典嵌套

Sep 29 Python

利用Python判断整数是否是回文数的3种方法总结

Jul 07 Python

Django框架中视图的用法

Jun 10 Python

python中字典dict常用操作方法实例总结

Apr 04 #Python

python随机生成指定长度密码的方法

Apr 04 #Python

python统计字符串中指定字符出现次数的方法

Apr 04 #Python

python使用sorted函数对列表进行排序的方法

Apr 04 #Python

python实现的简单猜数字游戏

Apr 04 #Python

python使用BeautifulSoup分页网页中超链接的方法

Apr 04 #Python

python实现分析apache和nginx日志文件并输出访客ip列表的方法

Apr 04 #Python

You might like

php5新改动之短标记启用方法

2008/09/11 PHP

php解析字符串里所有URL地址的方法

2015/04/03 PHP

php实现html标签闭合检测与修复方法

2015/07/09 PHP

农历与西历对照

2006/09/06 Javascript

jQuery文本框(input textare)事件绑定方法教程

2013/04/24 Javascript

jquery中html、val与text三者属性取值的联系与区别介绍

2013/12/29 Javascript

js和jquery如何获取图片真实的宽度和高度

2014/09/28 Javascript

jquery实现垂直和水平菜单导航栏

2020/08/27 Javascript

jQuery中$.ajax()方法参数解析

2016/10/22 Javascript

jQuery表单插件ajaxForm实例详解

2017/01/17 Javascript

JavaScript无阻塞加载和defer、async详解

2017/02/26 Javascript

jquery如何实现点击空白处隐藏元素

2017/12/05 jQuery

javaScript中的空值和假值

2017/12/18 Javascript

JS脚本实现网页自动秒杀点击

2018/01/11 Javascript

Vue实现点击导航栏当前标签后变色功能

2020/08/19 Javascript

JS遍历树层级关系实现原理解析

2020/08/31 Javascript

python中使用OpenCV进行人脸检测的例子

2014/04/18 Python

关于你不想知道的所有Python3 unicode特性

2014/11/28 Python

Python中Collections模块的Counter容器类使用教程

2016/05/31 Python

基于Python对象引用、可变性和垃圾回收详解

2017/08/21 Python

python实现读Excel写入.txt的方法

2018/04/29 Python

Python Tkinter模块实现时钟功能应用示例

2018/07/23 Python

[原创]Python入门教程5. 字典基本操作【定义、运算、常用函数】

2018/11/01 Python

用python实现刷点击率的示例代码

2019/02/21 Python

python 解决Fatal error in launcher:错误问题

2020/05/21 Python

解决Keyerror ''acc'' KeyError: ''val_acc''问题

2020/06/18 Python

CSS3 实现图形下落动画效果

2020/11/13 HTML / CSS

h5网页水印SDK的实现代码示例

2019/02/19 HTML / CSS

美国领先的男士和女士内衣购物网站：Freshpair

2019/02/25 全球购物

欧克利英国官网：Oakley英国

2019/08/24 全球购物

扬州个园导游词

2015/02/06 职场文书

大学生自荐信范文

2015/03/05 职场文书

工程技术员岗位职责

2015/04/11 职场文书

考试后的感想

2015/08/07 职场文书

教师远程研修感悟

2015/11/18 职场文书

CSS3实现的文字弹出特效

2021/04/16 HTML / CSS