pyspider - 如何每次执行脚本时, 把先前的Results清空

问题描述

问 题

想自动抓取一个每天都会更新的网站, 因为资料有立即性, 所以前一天抓取的旧资料可以完全清除,

目前已完成抓取方面的程序, 但不知道要如何才能清除先前在results内所留下的资料, 有办法可以达成吗?

解决方案

那你就不要存嘛，直接消息队列给你自己的程序。

这篇关于pyspider - 如何每次执行脚本时, 把先前的Results清空的文章就介绍到这了，希望我们推荐的答案对大家有所帮助，也希望大家多多支持IT屋！