python - Scrapy爬虫函数回调报错
本文介绍了python - Scrapy爬虫函数回调报错的处理方法,对大家解决问题具有一定的参考价值,需要的朋友们下面随着小编来一起学习吧!
问题描述
问 题
在写一个微信爬虫,用来抓取公众号的评论、点赞量等信息,是用Scrapy框架来做的。程序截图如下:
parse_starturl函数是用来从历史消息界面源代码中获得文章的链接,再从文章链接中得到评论的链接
parse_comment函数则是从评论界面抓取评论内容,点赞量等信息
但是在parse_starturl回调parse_comment函数时似乎有错误,导致运行报错如下图:
错误是 assert callable(callback)
AssertionError
由于自己才开始学习python,对python的回调不是很熟悉,希望有朋友帮我看看,指出这是什么错误,该如何改正
解决方案
callback后面写错,应该是self.parse_comment
这篇关于python - Scrapy爬虫函数回调报错的文章就介绍到这了,希望我们推荐的答案对大家有所帮助,也希望大家多多支持IT屋!
查看全文