python 每天如何定时启动爬虫任务(实现方法分享)


Posted in Python onMay 21, 2018

python2.7环境下运行

安装相关模块

想要每天定时启动,最好是把程序放在linux服务器上运行,毕竟linux可以不用关机,即定时任务一直存活;

#coding:utf8
import datetime
import time
def doSth():
 # 把爬虫程序放在这个类里
 print(u'这个程序要开始疯狂的运转啦')
# 一般网站都是1:00点更新数据,所以每天凌晨一点启动
def main(h=1,m=0):
 while True:
  now = datetime.datetime.now()
  # print(now.hour, now.minute)
  if now.hour == h and now.minute == m:
   break
  # 每隔60秒检测一次
  time.sleep(60)
 doSth()
main()

以上这篇python 每天如何定时启动爬虫任务(实现方法分享)就是小编分享给大家的全部内容了,希望能给大家一个参考,也希望大家多多支持三水点靠木。

Python 相关文章推荐
linecache模块加载和缓存文件内容详解
Jan 11 Python
Python中列表与元组的乘法操作示例
Feb 10 Python
DRF跨域后端解决之django-cors-headers的使用
Jan 27 Python
Python3模拟登录操作实例分析
Mar 12 Python
Python常用模块之requests模块用法分析
May 15 Python
django formset实现数据表的批量操作的示例代码
Dec 06 Python
python使用建议与技巧分享(二)
Aug 17 Python
基于Python正确读取资源文件
Sep 14 Python
python统计mysql数据量变化并调用接口告警的示例代码
Sep 21 Python
Python中读取文件名中的数字的实例详解
Dec 25 Python
基于python的matplotlib制作双Y轴图
Apr 20 Python
Pyhton模块和包相关知识总结
May 12 Python
对python抓取需要登录网站数据的方法详解
May 21 #Python
深入浅析python 中的匿名函数
May 21 #Python
python3 selenium 切换窗口的几种方法小结
May 21 #Python
python selenium 对浏览器标签页进行关闭和切换的方法
May 21 #Python
pytorch cnn 识别手写的字实现自建图片数据
May 20 #Python
pytorch 把MNIST数据集转换成图片和txt的方法
May 20 #Python
Python安装lz4-0.10.1遇到的坑
May 20 #Python
You might like
php学习笔记 面向对象的构造与析构方法
2011/06/13 PHP
前端必学之PHP语法基础
2016/01/01 PHP
PHP 实现手机端APP支付宝支付功能
2018/06/07 PHP
php微信开发之音乐回复功能
2018/06/14 PHP
lnmp安装多版本PHP共存的方法详解
2018/08/02 PHP
golang实现php里的serialize()和unserialize()序列和反序列方法详解
2018/10/30 PHP
PHP防止sql注入小技巧之sql预处理原理与实现方法分析
2019/12/13 PHP
再谈IE中Flash控件的自动激活 ObjectWrap
2007/03/09 Javascript
jquery 插件 web2.0分格的分页脚本,可用于ajax无刷新分页
2008/12/25 Javascript
Javascript 二维数组
2009/11/26 Javascript
js+css 实现遮罩居中弹出层(随浏览器窗口滚动条滚动)
2013/12/11 Javascript
JS实现仿百度输入框自动匹配功能的示例代码
2014/02/19 Javascript
zepto中使用swipe.js制作轮播图附swipeUp,swipeDown不起效果问题
2015/08/27 Javascript
jquery动态导航插件dynamicNav用法实例分析
2015/09/06 Javascript
JS+CSS实现的经典圆角下拉菜单效果代码
2015/10/21 Javascript
angular2+node.js express打包部署的实战
2017/07/27 Javascript
addeventlistener监听scroll跟touch(实例讲解)
2017/08/04 Javascript
jQuery实现的form转json经典示例
2017/10/10 jQuery
node微信开发之获取access_token+自定义菜单
2019/03/17 Javascript
JS中getElementsByClassName与classList兼容性问题解决方案分析
2019/08/07 Javascript
JavaScript 斐波那契数列 倒序输出 输出100以内的质数代码实例
2019/09/11 Javascript
详解Vue之事件处理
2020/07/10 Javascript
python实现2014火车票查询代码分享
2014/01/10 Python
python进程类subprocess的一些操作方法例子
2014/11/22 Python
Python 3.x 连接数据库示例(pymysql 方式)
2017/01/19 Python
Python中的__slots__示例详解
2017/07/06 Python
python3 中的字符串(单引号、双引号、三引号)以及字符串与数字的运算
2019/07/18 Python
详解Django配置优化方法
2019/11/18 Python
Python如何在bool函数中取值
2020/09/21 Python
如何从一个文件档案的尾端新增记录
2016/12/02 面试题
中专三年学习的个人自我评价
2013/12/12 职场文书
给校长的建议书300字
2014/05/16 职场文书
安全标语大全
2014/06/10 职场文书
网络营销实训总结
2015/08/03 职场文书
小学中队长竞选稿
2015/11/20 职场文书
学者《孟子》名人名言
2019/08/09 职场文书