网页爬虫 - Python爬虫返回状态码与实际情况不符？

问题描述

问 题

import urllib2

opener = urllib2.build_opener()

html = None
response = None

response = opener.open('http://www.sxxrcs.com/was5/web/')
html = response.code
print html

比如这个爬虫，输出状态码是200。

可是直接访问http://www.sxxrcs.com/was5/web/是404，抓包响应的也是404，请问这是为什么？

解决方案

用requests吧

import requests

r = requests.get('http://www.sxxrcs.com/was5/web/')
print r.status_code
print r.text

这篇关于网页爬虫 - Python爬虫返回状态码与实际情况不符？的文章就介绍到这了，希望我们推荐的答案对大家有所帮助，也希望大家多多支持IT屋！