Я хочу, чтобы мой паук запускался каждые три часа.
У меня есть файл конфигурации scrapy, расположенный в папке c:/scrapyd
.
Я изменил poll_interval
на 100
паук работает, но не повторяется каждые 100 секунд.
как это сделать пожалуйста?
Я хочу, чтобы мой паук запускался каждые три часа.
У меня есть файл конфигурации scrapy, расположенный в папке c:/scrapyd
.
Я изменил poll_interval
на 100
паук работает, но не повторяется каждые 100 секунд.
как это сделать пожалуйста?
Возможно, вам следует выполнить задание cron, которое выполняется каждые три часа и выполняет вызов curl для Scrapyd, чтобы запланировать задание.