1
xhinliang 2017-12-16 23:50:32 +08:00
用 Scrapyd 啊,调度方面可以看下 Scrapy-redis
|
2
golmic 2017-12-17 00:14:37 +08:00 via Android
加群 t.me/datapy 问,代码在电脑上,明天记得的话给你贴上来。不过需要提醒我一下。
|
3
hcnhcn012 2017-12-17 00:51:40 +08:00 via iPhone
马克,一模一样的调度需求,有好东西了告诉我下
|
4
azh7138m 2017-12-17 01:46:25 +08:00
Scrapy-redis 其实可以满足需求
|
5
zhijiansha 2017-12-17 12:25:43 +08:00 via iPhone
马克,目前用的自定义命令,运行全部的 spider
|