java - 知乎爬虫问题
本文介绍了java - 知乎爬虫问题的处理方法,对大家解决问题具有一定的参考价值,需要的朋友们下面随着小编来一起学习吧!
问题描述
问 题
爬虫新手求助。
知乎关注的人的列表,是一个下拉加载方式的分页。
不明白怎么获取下一页的。用post和get带上右下脚的FormData请求,都是403。
next是什么方法
解决方案
next不是什么方法,next只是Form Data中method字段的值。如果请求返回403,看看是否需要带上User-Agent、Referer或Cookie信息
这篇关于java - 知乎爬虫问题的文章就介绍到这了,希望我们推荐的答案对大家有所帮助,也希望大家多多支持IT屋!
查看全文