python - pyspider抓取知乎出现500 Server Error错误，其它网站正常

问题描述

问 题

刚上手玩pyspider，起了localhost:5000后用知乎页面(https://www.zhihu.com/questio...做测试，报错：

但是用其它网址测试都是正常的，比如用谷歌首页(https://www.google.com):

解决方案

你应该设置User-Agent

这篇关于python - pyspider抓取知乎出现500 Server Error错误，其它网站正常的文章就介绍到这了，希望我们推荐的答案对大家有所帮助，也希望大家多多支持IT屋！