python - SAE运行爬虫,BeautifulSoup无法加载lxml?
本文介绍了python - SAE运行爬虫,BeautifulSoup无法加载lxml?的处理方法,对大家解决问题具有一定的参考价值,需要的朋友们下面随着小编来一起学习吧!
问题描述
问 题
整个代码在本地没有问题,当上传到SAE后就出现错误。
然后我又把lxml库上传到了根目录下的site-packages中,结果仍然如此。
我个人猜测是BeautifulSoup在使用这个解析器并不是简单的导入lxml模块
解决方案
我看了BeautifulSoup的源码,一路追溯,发现确实是因为有包没有导入。如果BeautifulSoup用html5lib来解析,一共需要导入BeautifulSoup的包,html5lib的包,在html5lib中又导入了six.px和warings.py。由于在BeautifulSoup中用try...catch...导入html5lib相关的包的。所以即便没有那个six.py和warings.py,也没有给出具体的提示。
这篇关于python - SAE运行爬虫,BeautifulSoup无法加载lxml?的文章就介绍到这了,希望我们推荐的答案对大家有所帮助,也希望大家多多支持IT屋!
查看全文