python运行爬虫程序时间如何控制?，python运行爬虫程序,问题如标题所说，用scr
python运行爬虫程序时间如何控制?，python运行爬虫程序,问题如标题所说，用scr
问题如标题所说，用scrapy框架写了几个爬虫，由于一些原因，需要实时或者说是隔几十秒左右跑一遍，查了一下好像 time.stop（）能实现，但是我这边加了之后没效果。请求支援
我的解决方案是用crontab。不知道和你想的方法是否匹配。
可以用quartz来调度scrapy
scrapy当队列里面没有任务的时候就会退出。
所以你这样就可以 用crontab计划任务一下
编橙之家文章，
相关内容
- Python禁止生成pyc文件解决方法是什么，pythonpyc,使用py
- Django搭建网站二级目录内网页没有CSS样式求解决方式，
- Python部署方式最好用的是哪几种，python部署方式几种
- Python js计算0.7+0.1结果是什么，python0.7,今天在写 JS 的时
- Python BeautifulSoup解析html时部分源码丢失怎么办?，,在处
- python2字节码编码问题求助，python2字节码,# -*- coding
- python pip安装路径是放到/usr/lib or /usr/lib64，piplib64,/usr
- 批量缩进python项目重新格式化什么方法好，缩进python项
- Python与PHP哪个学习周期更短呢？，pythonphp周期,0 基础
- windows8.1系统在本机python搭建dns服务器可行吗?，windows
评论关闭