避免重复爬网
我相信你正在寻找的是“持久性支持”,以暂停和恢复爬网。
要启用它,你可以执行以下操作:
scrapy crawl somespider -s JOBDIR=crawls/somespider-1
你尚未登录,登录后可以
和开发者交流问题的细节
关注并接收问题和回答的更新提醒
参与内容的编辑和改进,让解决方法与时俱进
联系我
602392714
清零编程群