用Python实现校园通知更新提醒功能


Posted in Python onNovember 23, 2019

前言

这个项目实已经在一个月前已经完成了,一直都想写一篇博客来总结这个过程中遇到的一些问题。但最近一个月来都比较忙,所以一直拖到了现在。

首先说说起因吧,我没事的时候,总喜欢依次点开学校主页、教务处、图书馆以及学院的网站,看看有没有什么新通知,虽然大多与我无关。恰逢最近正在学Python,经常听到别人说用Python写爬虫很简单,但自己尚未接触过爬虫。于是抱着试一试的心态看了几篇关于Python爬虫的博客,发现实现起来的确很简单。于是,便一边看着官方的文档说明,一边看着别人的博客,终于完成了自己的第一次爬虫。

简介

使用urllib.request库获取到目标url(各个网站的'更多通知'页)的源代码,然后利用Python的re库进行正则匹配,提取到通知相关信息后,与文件中存取的上一次爬取到的信息进行对比。

若检测到有新的通知,则利用twilio库向指定手机号码发送SMS,利用smtplib库向指定邮箱发送提醒信息。

此外,还具有发送日志以及异常日志的功能。

目前仅支持本校的通知提醒,后续会逐步提高项目的通用性。

源码:

Github地址:School_Notice

准备工作

安装twilio库:pip install twilio

注册twilio账号:Twilio

验证手机号:用来接收短信提醒的号码必须在twilio上进行验证

遇到的问题

邮件发送

若用名为msg的变量来保存邮件文本,则msg['From']以及msg['To']必须为实际的发件人地址,否则可能会出现异常:SMTPDataError(code, resp).如必须写作:msg['From'] = 'xxxxx@qq.com'.我是使用的QQ邮箱来发邮件,至于其他邮箱需不需要这样写还不清楚。

原本想用一个for循环来实现多人发送,后来发现smtplib库的sendmail方法支持多人发送,但参数应为一个list,故可用str.split(',')将字符串转为list。

我使用的是Windows下的Python,若计算机名为中文,则有可能会导致出现异常,可通过右击此电脑->属性,修改计算机名。

程序代码中使用的邮箱密码不是QQ密码,应在邮箱设置->账户->SMTP服务处,获取授权码。

其他问题

有时候会接收不到Twilio发送的短信,给10086打电话也没问出个所以然,可能是因为短信中有敏感词(如:学校名),修改短信内容后就可以了

对上述几个网站的源码使用re.findall后返回的列表中的每个元组中的元素的顺序均为时间、标题、链接,但对学生处网站的源码正则匹配后的元素顺序并不是按照上述顺序的。所以应单独进行调整,但直接修改一个元组中的元素,会出现异常:error:tuple' object does not support item assignment。

解决方法是:

if(subject_EN == 'snnu_xsc'):
 new_data = []
 for item in data:
  temp = (item[1], item[2], item[0])
  new_data.append(temp)
 data = new_data

Python3中的print函数是自动换行的,若不需要自动换行,则可写作:print(str,end='')

不同网站的编码格式可能不同,应按照各自的编码方式进行解码。若均采用utf-8的方式,则可能会出现各种编码问题,如:

UnicodeDecodeError: ‘utf-8' codec can't decode byte 0xc9 in position 167

解决方法是:

if find1 == -1 & find2 == -1:
 Coding = 'utf-8'
else:
 # 教务处网页源码编码格式为为gbk
 # 学生处网页源码编码格式为gb2312
 Coding = 'gbk'
data = response.read().decode(Coding)

Python程序打包为exe(Pyinstaller)

安装及使用

使用pip install pywin32安装pywin32

使用pip install PyInstaller安装Pyinstaller

使用pyinstaller -F main.py即可将Python程序打包为exe程序

注意事项

打包之前应将用到的第三方库(此项目仅用到Twilio)复制到与要打包的py文件同一目录下。

可使用pyinstaller -F -i logo.ico main.py,为生成的exe程序添加图标

使用的ico文件像素不能过小,否则有可能出现:打包后的程序图标只有在资源管理器中设置为以小图标查看的情况下才显示的是自己的图标,其他情况仍未默认图标

使用截图

用Python实现校园通知更新提醒功能

用Python实现校园通知更新提醒功能

用Python实现校园通知更新提醒功能

以上这篇用Python实现校园通知更新提醒功能就是小编分享给大家的全部内容了,希望能给大家一个参考,也希望大家多多支持三水点靠木。

Python 相关文章推荐
Python socket.error: [Errno 98] Address already in use的原因和解决方法
Aug 25 Python
Python fileinput模块使用介绍
Nov 30 Python
Python实现把json格式转换成文本或sql文件
Jul 10 Python
django开发之settings.py中变量的全局引用详解
Mar 29 Python
Django读取Mysql数据并显示在前端的实例
May 27 Python
python高效过滤出文件夹下指定文件名结尾的文件实例
Oct 21 Python
利用python提取wav文件的mfcc方法
Jan 09 Python
pycharm 安装JPype的教程
Aug 08 Python
创建Shapefile文件并写入数据的例子
Nov 26 Python
如何从csv文件构建Tensorflow的数据集
Sep 21 Python
Python 文本滚动播放器的实现代码
Apr 25 Python
PYTHON使用Matplotlib去实现各种条形图的绘制
Mar 22 Python
利用Python的turtle库绘制玫瑰教程
Nov 23 #Python
Python input函数使用实例解析
Nov 22 #Python
python循环输出三角形图案的例子
Nov 22 #Python
Python-Flask:动态创建表的示例详解
Nov 22 #Python
python flask中动态URL规则详解
Nov 22 #Python
Python之——生成动态路由轨迹图的实例
Nov 22 #Python
python:动态路由的Flask程序代码
Nov 22 #Python
You might like
Email+URL的判断和自动转换函数
2006/10/09 PHP
QQ登录 PHP OAuth示例代码
2011/07/20 PHP
Yii使用Captcha验证码的方法
2015/12/28 PHP
浅谈PHP中的
2016/04/23 PHP
PHP查询大量数据内存耗尽问题的解决方法
2016/10/28 PHP
浅谈PHP SHA1withRSA加密生成签名及验签
2019/03/18 PHP
php use和include区别总结
2019/10/13 PHP
PHP连接MySQL数据库的三种方式实例分析【mysql、mysqli、pdo】
2019/11/04 PHP
接收键盘指令的脚本
2006/06/26 Javascript
jquery中对表单的基本操作代码
2010/07/29 Javascript
jQuery对象和Javascript对象之间转换的实例代码
2013/03/20 Javascript
JQuery设置文本框和密码框得到焦点时的样式
2013/08/30 Javascript
js实现屏幕自适应局部代码分享
2015/01/30 Javascript
JS验证邮件地址格式方法小结
2015/12/01 Javascript
解决js页面滚动效果scrollTop在FireFox与Chrome浏览器间的兼容问题的方法
2015/12/03 Javascript
js实现刷新页面后回到记录时滚动条的位置【两种方案可选】
2016/12/12 Javascript
jQuey将序列化对象在前台显示地实现代码(方法总结)
2016/12/13 Javascript
微信小程序自定义toast实现方法详解【附demo源码下载】
2017/11/28 Javascript
Express下采用bcryptjs进行密码加密的方法
2018/02/07 Javascript
总结js函数相关知识点
2018/02/27 Javascript
基于jQuery.i18n实现web前端的国际化
2018/05/04 jQuery
详解如何在vue项目中使用eslint+prettier格式化代码
2018/11/10 Javascript
浅谈redux, koa, express 中间件实现对比解析
2019/05/23 Javascript
JS实现随机抽取三人
2019/11/06 Javascript
分享一下Python 开发者节省时间的10个方法
2015/10/02 Python
WINDOWS 同时安装 python2 python3 后 pip 错误的解决方法
2017/03/16 Python
Python给你的头像加上圣诞帽
2018/01/04 Python
华为2019校招笔试题之处理字符串(python版)
2019/06/25 Python
Keras 在fit_generator训练方式中加入图像random_crop操作
2020/07/03 Python
俄罗斯Sportmarket体育在线商店:用于旅游和户外活动
2019/11/12 全球购物
过程装备与控制工程专业个人的求职信
2013/12/01 职场文书
小学少先队活动方案
2014/02/18 职场文书
家长会主持词
2014/03/26 职场文书
应届毕业生求职信范文
2014/07/07 职场文书
Django分页器的用法你都了解吗
2021/05/26 Python
html中显示特殊符号(附带特殊字符对应表)
2021/06/21 HTML / CSS