python<win10下使用定时任务执行爬虫程序>

来源:互联网 发布:nga 数据库 编辑:程序博客网 时间:2024/05/16 17:51

公司有一个需求,每天定时执行一次爬虫以便得到目标数据。一下是定时任务的配置过程以及一个大坑(花费了我两个小时)。

1.打开任务计划程序

这里写图片描述

2.创建基本任务

这里写图片描述

3.填写触发器出发时间

这里写图片描述

这里写图片描述

4.定义定时任务的操作为“启动程序”

这里写图片描述

5.选择启动程序

这里写图片描述
选择你的脚本

这里有一个大坑
别看“起始于”那个参数是可选的,如果不填的话就会报0x2的错误,导致定时任务执行失败:

第一个填写你的脚本的绝对路径+脚本名称,
第二个参数填写的是你的脚本的绝对路径;

这里写图片描述

以下是我的脚本:(.bat文件,只用一行代码)

python video.py

以下是video.py:

# -*- coding: utf-8 -*-import osimport timecommand3 = 'scrapy crawl tencent3_spider -o '+str(time.strftime('%Y-%m-%d', time.localtime(time.time())))+'_show_tencent.csv'os.chdir('C:\\Users\\geekp\\Desktop\\1\\1\\tencent_show')os.system(command3)print '******************'print '******************'print 'success'

6.在“当点击完成时打开任务对话框”处打勾

这里写图片描述

7,配置出选择windows10

这里写图片描述

最后是点击确定,这时候会让你输入密码,输完密码你的任务就可以执行了。
这里写图片描述