python 每天如何定时启动爬虫任务(实现方法分享)
作者：大蛇王 发布时间：2022-11-28 21:14:35
标签：python,爬虫,定时
python2.7环境下运行
安装相关模块
想要每天定时启动，最好是把程序放在linux服务器上运行，毕竟linux可以不用关机，即定时任务一直存活；
#coding:utf8
import datetime
import time
def doSth():
# 把爬虫程序放在这个类里
print(u'这个程序要开始疯狂的运转啦')
# 一般网站都是1:00点更新数据，所以每天凌晨一点启动
def main(h=1,m=0):
while True:
now = datetime.datetime.now()
# print(now.hour, now.minute)
if now.hour == h and now.minute == m:
break
# 每隔60秒检测一次
time.sleep(60)
doSth()
main()
来源：https://blog.csdn.net/t8116189520/article/details/78832548
0
投稿猜你喜欢
- Memento备忘录模式 备忘录模式一个最好想象的例子：undo! 它对对象的一个状态进行了'快照'， 在你需要的时候恢复原
- 本文给出了MySQL数据库中定义外键的必要性、具体的定义步骤和相关的一些基本操作，供大家参考！定义数据表假如某个电脑生产商，它的数据库中保存
- 类的定义Python中，定义类是通过class关键字，例如我们定义一个存储学生信息的类：class Student(object):pass
- 这是一个第三方库，可以处理xlsx格式的Excel文件。pip install openpyxl安装。如果使用Aanconda，应该自带了。
dotnet run 介绍dotnet 相关命令是属于 .NET Core command-line (CLI) 的一部分，Microsof- 前言开发过程中有时需要使用路径数据，虽然python有自己的svg或其他矢量库，但这里只是出于实验的目的，没必要深入研究，所以采用一些简单的
- 正则表达式中的符号例子 | 是或的关系，只要存在就会被捕获匹配到的数据只按字符串顺序返回，而不是按照匹配规则返回In [18]:
- 分页一般和表格一起用，分页链接作为表格的一部分，将分页链接封装成一个独立的组件，然后作为子组件嵌入到表格组件中，这样比较合理。效果：代码：1
- #coding=gbkfrom xml.dom import minidom,Nodeimport urllib2,re,osdef rea
- 初识defaultdict之前在使用字典的时候, 用的比较随意, 只是简单的使用dict.然而这样在使用不存在的key的时候发生KeyErr
- PEP 3107引入了功能注释的语法，PEP 484 加入了类型检查标准库 typing 为类型提示指定的运行时提供支持。示例：def f(
- 1.前言：将测试数据全部敲入数据库非常繁琐，而且如果与合作伙伴一起开发，部署，那么他们肯定也不想把时间花在一个一个录入数据的繁琐过程中，这时
- template 概述最近在做脚手架相关的内容, 研究了一下 Go 的 text/template 包, 接下来跟大家分享下 templat
- 随着网络的发展，越来越多的网络平台应运而生。如何获得更多的流量，吸引更多的眼球已经成为网络平台生存、发展的必要条件。现在网络平台最常见的一种
- pyecharts 是一个用于生成 Echarts 图表的类库。Echarts 是百度开源的一个数据可视化 JS 库。这篇文章重点给大家介绍
- 首先，我想说一下Javascript的装载和执行。通常来说，浏览器对于Javascript的运行有两大特性：1）载入后马上执行，2）执行时会
- springboot数据库查询时出现的时区差异最近项目中使用到多数据源将MySQL库中的数据迁移到mongo库中，发现取出后的数据与原数据时
- 鉴于最近一段时间一直在折腾的CNN网络效果不太理想，主要目标是为了检测出图像中的一些关键点，可以参考人脸的关键点检测算法。但是由于从数据集的
- 教你配置属于自己的PYcharm界面色彩风格，PYthon学习必备 GO第一步，换成深色背景，保护视力PyCharm默认的背景是白色的，比较
- python可以简单优美，也很有趣，下面是收集的例子：1.一句话开始一个http的文件服务器:$ python -m SimpleHTTPS
