pyspider 如何调用函数创建新任务
本文介绍了pyspider 如何调用函数创建新任务的处理方法,对大家解决问题具有一定的参考价值,需要的朋友们下面随着小编来一起学习吧!
问题描述
问 题
我要爬取网站用户登录后的数据,有很多的账号。我想每个账号都开一个爬虫来爬,逻辑都是一样的,就是登录时用的账号密码不一样。
或者说,pyspider有没有这样一个函数,给它传一些参数进去,然后启动新任务?
解决方案
self.crawl 有什么问题吗?
这篇关于pyspider 如何调用函数创建新任务的文章就介绍到这了,希望我们推荐的答案对大家有所帮助,也希望大家多多支持IT屋!
查看全文