urllib2相关内容

如何发送添加空格的 urllib2 请求

我正在尝试发送请求以打开使用空格的网页 url,以便我可以从该页面下载文件.在普通浏览器(即 chrome)中,当您在地址栏中输入 url 时,文件会自动生成并要求您下载. 每次我想要一组日志时都不必加载 Web 浏览器,而是尝试创建一个可以运行的 Python 脚本,该脚本将为我完成所有繁重的工作. 示例: url = http (ip-address)/supportlog.xm ..
发布时间:2021-09-15 18:39:56 Python

代理背后的Python urllib urlretrieve

我查看了 urllib 的文档,但我在代理上找到的所有内容都与 urlopen 有关.但是,我想从给定的 URL 下载 PDF 并将其存储在本地,但使用某个代理服务器.到目前为止,我的方法不起作用: 导入 urllib2代理 = {'http': 'http://123.96.220.2:81'}opener = urllib2.FancyURLopener(代理)下载 = opener.url ..
发布时间:2021-09-15 18:39:53 Python

urllib2 连接超时错误

我正在尝试使用 urllib2 打开一个页面,但我不断收到连接超时错误. 我正在使用的线路是:f = urllib2.urlopen(url) 确切的错误是: URLError: 解决方案 urllib2 尊重 robots.txt.许多站点阻止默认的User-Agent. 尝试添加一个新的 User-Agent,通过创建 Request 对象 &使用它们作为 urlo ..
发布时间:2021-09-15 18:39:50 Python

使用 urllib3 进行多部分表单编码和发布

我正在尝试将 csv 文件上传到 本网站.但是,我遇到了一些问题,我认为这源于不正确的mimetype(可能). 我正在尝试通过 urllib2 手动发布文件,因此我的代码如下所示: 导入urllib导入 urllib2导入 mimetools, mimetypes导入操作系统,统计从 cStringIO 导入 StringIO#============================# ..
发布时间:2021-09-15 18:39:47 Python

在 urllib2 中使用 certifi 模块?

我在使用 urllib2 模块下载 https 页面时遇到问题,这似乎是由于 urllib2 无法访问系统的证书存储所致. 要解决此问题,一种可能的解决方案是使用 certifi 模块下载带有 pycurl 的 https 网页.以下是这样做的示例: def download_web_page_with_curl(url_website):from pycurl import Curl, ..
发布时间:2021-09-15 18:39:44 Python

Python - 从 aspx 表单下载文件

我正在尝试从该站点自动获取一些数据:http://www.casablanca-bourse.com/bourseweb/en/Negociation-History.aspx?Cat=24&IdLink=225 在 python 中使用 urllib2,我成功地得到了一个 html 文件,就好像我在这个网站上点击了“提交"按钮一样. 但是,当我模拟点击“下载数据"链接的行为时,我得到 ..
发布时间:2021-09-15 18:39:41 C#/.NET

当连接中断时,读取由 urllib2 制作的流永远不会恢复

在尝试使我的一个 Python 应用程序在连接中断的情况下更加健壮时,我发现调用 urllib2 生成的 http 流的读取函数可能会永远阻止脚本. 我认为读取函数会超时并最终引发异常,但在读取函数调用期间连接中断时,情况并非如此. 这是导致问题的代码: 导入 urllib2为真:尝试:流 = urllib2.urlopen('http://www.google.de/images/ ..
发布时间:2021-09-15 18:39:35 Python

在 JavaScript 执行后在 python 中加载网页

我正在尝试根据用户输入的内容获得西班牙语单词的定义(如字典).这个想法是: >>>你好'1.中间U. como salutación 熟悉. 我第一次尝试使用 urllib2,但是由于定义是在 JS 执行之后出现的(有道理,废话)它没有用.我也试过硒,但据我所知,它必须打开一个导航窗口,对吗?我需要它像 urllib2 一样,不可见. 如果你想试试,我搜索定义的页面是http://l ..
发布时间:2021-09-15 18:39:30 Python

使用 urllib2 和 PySocks 的 SOCKS5 代理

我正在尝试使用 urllib2 和 PySocks 连接到 SOCKS5 代理.我的代理有一个用户名和密码,我使用下面的代码,但是我总是得到一个 socks.SOCKS5Error: 0x02: Connection not allowed by ruleset message 当我尝试连接时.有谁知道我做错了什么..? 导入套接字进口袜子导入 urllib2socks.set_default_ ..
发布时间:2021-09-15 18:39:27 其他开发

使用 Python urllib2 登录网站表单

我一直在尝试学习在 Python 中使用 urllib2 包.我尝试以学生身份(左侧表单)登录到数学学生的注册页面:http://reg.maths.lth.se/.我已经检查了代码(使用 Firebug),显然应该使用 POST 调用左边的表单,使用一个名为 pnr 的键,它的值应该是一个 10 个字符长的字符串(最后一部分可能无法从HTML 代码,但它基本上是我的社会安全号码,所以我知道它应该 ..
发布时间:2021-09-15 18:39:24 Python

下载 Python 中的互联网资源并将其保存在我想要的位置

我是 Python 新手,我正在使用 urllib2 通过互联网下载文件.我正在使用此代码 导入 urllib2response = urllib2.urlopen('http://www.example.com/myfile.zip')... 这段代码实际上是将 zip 文件保存在我的临时文件夹中,我不想那样,我想将它保存在我想要的位置.可能吗? 解决方案 您可以使用 urllib. ..
发布时间:2021-09-15 18:39:12 Python

urllib2 错误没有给出主机

编辑:(已解决)当我从我的文件中读取值时,一个换行符被添加到末尾.(\n)这是在那时拆分我的请求字符串.我认为这与我首先将值保存到文件中的方式有​​关.非常感谢. 我有以下代码: results = 'http://www.myurl.com/'+str(mystring)打印 str(结果)请求 = urllib2.Request(结果)request.add_header('User- ..
发布时间:2021-09-15 18:39:03 Python

python urllib2 和 unicode

我想从搜索引擎给出的结果中收集信息.但是查询部分只能写文本,不能写unicode. 导入 urllib2a = "바둑"a = a.decode("utf-8")类型(一)#Out[35]: Unicodeurl = "http://search.naver.com/search.naver?where=nexearch&query=%s" %(a)url2 = urllib2.urlopen( ..
发布时间:2021-09-15 18:39:00 Python

urllib2.urlopen() 是否实际获取页面?

当我使用 urllib2.urlopen() 时,我在考虑它是否只是读取标题,还是它实际上带回了整个网页? IE 是否真的通过 urlopen 调用或 read() 调用获取 HTML 页面? handle = urllib2.urlopen(url)html = handle.read() 我问的原因是为了这个工作流程... 我有一个网址列表(其中一些提供短网址服务) 如果我以 ..
发布时间:2021-09-15 18:38:57 Python

Python urllib2 返回一个空字符串

我正在尝试检索以下 URL:http://www.winkworth.co.uk/sale/property/flat-for-sale-in-masefield-court-london-n5/HIH140004. 导入 urllib2response = urllib2.urlopen('http://www.winkworth.co.uk/rent/property/terraced-ho ..
发布时间:2021-09-15 18:38:54 Python

同时使用 urllib2.urlopen() 的多个请求

我的问题是这样的;是否可以同时请求两个不同的 URL? 我想要做的是使用 Python 脚本同时调用来自两个不同 URL 的请求.使两个 PHP 脚本同时运行(在不同的服务器上,运行终端命令).我的问题是我不能一个接一个地做它们,因为它们每个都需要特定的时间来做某事,并且需要同时运行,同时结束. 这可以使用 urllib2.urlopen 吗?如果是这样,我将如何去做? 如果没有 ..
发布时间:2021-09-15 18:38:51 Python