python - SAE运行爬虫,BeautifulSoup无法加载lxml?

查看:221
本文介绍了python - SAE运行爬虫,BeautifulSoup无法加载lxml?的处理方法,对大家解决问题具有一定的参考价值,需要的朋友们下面随着小编来一起学习吧!

问题描述

问 题

整个代码在本地没有问题,当上传到SAE后就出现错误。

然后我又把lxml库上传到了根目录下的site-packages中,结果仍然如此。

我个人猜测是BeautifulSoup在使用这个解析器并不是简单的导入lxml模块

解决方案

我看了BeautifulSoup的源码,一路追溯,发现确实是因为有包没有导入。如果BeautifulSoup用html5lib来解析,一共需要导入BeautifulSoup的包,html5lib的包,在html5lib中又导入了six.px和warings.py。由于在BeautifulSoup中用try...catch...导入html5lib相关的包的。所以即便没有那个six.py和warings.py,也没有给出具体的提示。

这篇关于python - SAE运行爬虫,BeautifulSoup无法加载lxml?的文章就介绍到这了,希望我们推荐的答案对大家有所帮助,也希望大家多多支持IT屋!

查看全文
登录 关闭
扫码关注1秒登录
发送“验证码”获取 | 15天全站免登陆