python 每天如何定时启动爬虫任务(实现方法分享)


Posted in Python onMay 21, 2018

python2.7环境下运行

安装相关模块

想要每天定时启动,最好是把程序放在linux服务器上运行,毕竟linux可以不用关机,即定时任务一直存活;

#coding:utf8
import datetime
import time
def doSth():
 # 把爬虫程序放在这个类里
 print(u'这个程序要开始疯狂的运转啦')
# 一般网站都是1:00点更新数据,所以每天凌晨一点启动
def main(h=1,m=0):
 while True:
  now = datetime.datetime.now()
  # print(now.hour, now.minute)
  if now.hour == h and now.minute == m:
   break
  # 每隔60秒检测一次
  time.sleep(60)
 doSth()
main()

以上这篇python 每天如何定时启动爬虫任务(实现方法分享)就是小编分享给大家的全部内容了,希望能给大家一个参考,也希望大家多多支持三水点靠木。

Python 相关文章推荐
python创建线程示例
May 06 Python
Python中的二叉树查找算法模块使用指南
Jul 04 Python
Python实现SMTP发送邮件详细教程
Mar 02 Python
Python遍历文件夹和读写文件的实现方法
May 10 Python
python 限制函数执行时间,自己实现timeout的实例
Jan 12 Python
python中嵌套函数的实操步骤
Feb 27 Python
Python中的asyncio代码详解
Jun 10 Python
python的debug实用工具 pdb详解
Jul 12 Python
多版本python的pip 升级后, pip2 pip3 与python版本失配解决方法
Sep 11 Python
在pytorch中动态调整优化器的学习率方式
Jun 24 Python
python爬虫如何解决图片验证码
Feb 14 Python
python区块链持久化和命令行接口实现简版
May 25 Python
对python抓取需要登录网站数据的方法详解
May 21 #Python
深入浅析python 中的匿名函数
May 21 #Python
python3 selenium 切换窗口的几种方法小结
May 21 #Python
python selenium 对浏览器标签页进行关闭和切换的方法
May 21 #Python
pytorch cnn 识别手写的字实现自建图片数据
May 20 #Python
pytorch 把MNIST数据集转换成图片和txt的方法
May 20 #Python
Python安装lz4-0.10.1遇到的坑
May 20 #Python
You might like
兼容性比较好的PHP生成缩略图的代码
2011/01/12 PHP
PHP中去除换行解决办法小结(PHP_EOL)
2011/11/27 PHP
php进行支付宝开发中return_url和notify_url的区别分析
2014/12/22 PHP
smarty中改进truncate使其支持中文的方法
2016/05/30 PHP
PHP实现生成模糊图片的方法示例
2017/12/21 PHP
JavaScript继承方式实例
2010/10/29 Javascript
Js操作树节点自动折叠展开的几种方法
2014/05/05 Javascript
setTimeout()递归调用不加引号出错的解决方法
2014/09/05 Javascript
深入分析Cookie的安全性问题
2015/03/01 Javascript
原生JS实现仿淘宝网左侧商品分类菜单效果代码
2015/09/10 Javascript
Jquery Easyui菜单组件Menu使用详解(15)
2016/12/18 Javascript
jq stop()和:is(:animated)的用法及区别(详解)
2017/02/12 Javascript
JQuery查找子元素find()和遍历集合each的方法总结
2017/03/07 Javascript
微信小程序多张图片上传功能
2017/06/07 Javascript
原JS实现banner图的常用功能
2017/06/12 Javascript
vue操作下拉选择器获取选择的数据的id方法
2018/08/24 Javascript
详解Vue CLI3配置解析之css.extract
2018/09/14 Javascript
写给新手同学的vuex快速上手指北小结
2020/04/14 Javascript
在Vue中获取自定义属性方法:data-id的实例
2020/09/09 Javascript
用Python将一个列表分割成小列表的实例讲解
2018/07/02 Python
python实现Excel文件转换为TXT文件
2019/04/28 Python
详解用python写一个抽奖程序
2019/05/10 Python
基于Python把网站域名解析成ip地址
2020/05/25 Python
Python3实现建造者模式的示例代码
2020/06/28 Python
详解如何使用CSS3中的结构伪类选择器和伪元素选择器
2020/01/06 HTML / CSS
Java方面的关于数组和继承的笔面试题
2015/09/18 面试题
异步传递消息系统的作用
2016/05/01 面试题
初始化了一个没有run()方法的线程类,是否会出错?
2014/03/27 面试题
会计师事务所审计实习自我鉴定
2013/09/20 职场文书
经典而简洁的婚礼主持词
2014/03/13 职场文书
建筑工程质量通病防治方案
2014/06/08 职场文书
具结保证书
2015/01/17 职场文书
工作失误检讨书范文
2015/01/26 职场文书
创业计划书之家教托管
2019/09/25 职场文书
教你漂亮打印Pandas DataFrames和Series
2021/05/29 Python
php实现自动生成验证码的实例讲解
2021/11/17 PHP