urllib2相关内容

使用urllib2上传文件

我是python的新手,我正在编写一个使用urllib2上传文件的代码,但是我无法完成它。 这是代码: class Get(object): handlers = list() def __init __(self,url) : self.url = url self.request = urllib2.Request(url) self.request.add_head ..
发布时间:2017-11-07 22:17:53 Python

无法使用urllib和urllib2发送数据(python)

大家好(首先在这里发帖)。 我试图发送数据到一个网页。如果一切正常,这个网页要求两个字段(一个文件和一个电子邮件地址),网页返回一个页面,说“一切正常”,并发送一个文件到提供的电子邮件地址。我执行下面的代码,我的电子邮件帐户里什么也没有。 pre $ ur $ b $ ur $ $ $ b params = urllib.urlencode({'uploaded':open('fil ..
发布时间:2017-11-07 21:38:53 Python

将大型二进制文件与urllib2流文件

fp = open(file, 'wb') req = urllib2.urlopen(url) 在req中的行: fp.write(行) fp.close() 这个工作,但它下载相当慢。有更快的方法吗? (文件很大,所以我不想让它们在内存中。) 解决方案 没有理由一行一行(小块并且需要Python找到你的线路结束!),只是在更大的块中块,例如: from ..
发布时间:2017-10-26 19:39:25 Python

Python urllib2中的自定义Opener到底是什么?

问 题 不明白build_opener(), install_opener(),也不明白OpenerDirector到底是什么。 不知道怎么用,有什么用处。希望大家指教,谢谢。 解决方案 都是用来配置参数,cookie,认证这些的,建议你用requests吧,urllib2用起来比较复杂,requests精简了太多 ..
发布时间:2017-09-06 10:06:10 Python

网络爬虫 - python urlopen.read()不完整

这个目的说来有点不忍启齿....不过抱着解决问题的态度,我还是提了这个问题: 这个是原网页 https://movie.douban.com/tag/%E6%83%85%E8%89%B2?start=0&type=T 这个网页有20个电影,但我抓取的结果只有17个,我调试发现的问题是出在刚开始urlopen.read()就没读全整个网页,不知道是不是因为标签使用不合法导致的没读到。 这 ..
发布时间:2017-09-06 09:15:40 Python

读取使用urllib2检索的Excel对象

我正在使用urllib2获取一个Excel文件,并保存到下面的响应中。我想要使​​用xlrd或类似的方式处理这个excel文件。我在下面列出了一些信息,让我知道如果我能提供更多的信息。如何将响应对象转换成可以播放的对象? response = ..
发布时间:2017-09-04 02:28:52 Python

Python:在urllib2中禁用http_proxy

我正在使用代理集作为环境变量(export http_proxy = example.com)。对于一个使用urllib2的调用,我需要暂时禁用这个,即。取消设置http_proxy。我已经尝试了文档和interwebs中提出的各种方法,但到目前为止还没有取消设置代理。到目前为止,我试过: #不工作 req = urllib2.Request('http:// www.google.com ..
发布时间:2017-08-25 18:43:45 Python

python urllib2 utf-8编码

b 片段: opener = urllib2.build_opener() opener.addheaders = [('代理','Mozilla / 5.0')] opener.addheaders = [('Accept-Charset','utf-8')] f = opener.open(url) doc = f.read()。decode('utf-8') ..
发布时间:2017-08-16 22:55:46 Python

Python / Urllib2 /线程:单个下载线程比多个下载线程更快。为什么?

我正在处理一个需要我创建多个线程来下载大型远程文件的项目。我已经完成了这一点,但是我不明白,而仅使用单个线程,需要更长的时间才能下载多个线程的文件。我使用我的xampp本地主机进行时间测试。我想知道它是否正常的行为,或者是因为我没有尝试从真正的服务器下载。 感谢 肯尼迪 解决方案 在一个月内结合起来做一个婴儿。如果你有10个线程,那么它们每个线程只有一个线程的带宽只有10%,并且还 ..
发布时间:2017-07-13 13:09:22 Python

使用多个线程下载单个文件

我正在为Linux创建一个“下载管理器”,让我可以使用多个线程下载一个文件。这是我要做的: 通过指定偏移量将要下载的文件分成不同的部分 将不同的部分下载到临时位置 将它们合并到一个文件中。 步骤2和3是可解的,而在步骤#1,我被卡住了。下载文件时如何指定偏移量? 使用沿着 open(“/ path / to / file”,“wb”)行的东西write(urllib2.url ..
发布时间:2017-07-13 11:47:35 Python

在Python中使用urllib2。我如何获取我正在下载的文件的名称?

我是一个python初学者。我正在使用urllib2下载文件。当我下载文件时,我指定一个文件名用于将下载的文件保存在我的硬盘驱动器上。但是,如果我使用浏览器下载文件,则会自动提供默认文件名。 以下是我的代码的简化版本: def downloadmp3(url): webFile = urllib2.urlopen(url) filename ='temp.zip' localF ..
发布时间:2017-07-13 11:45:59 Python

python urllib2下载大小

我想用urllib2下载一个文件,同时我想显示一个进度条.. 但是如何获得实际下载的文件大小? 我当前的代码是 ul = urllib2.urlopen('www.file.com/blafoo.iso') data = ul.get_data() 或 ()$($)$ $ $ $ $ $ $ $ $ $ $ $ $ $ $ $ $ $ $ $ p> ..
发布时间:2017-07-13 11:40:14 Python

Python:使用url从google驱动器下载文件

我正在尝试从谷歌驱动器下载文件,我所有的都是驱动器的URL。 我已经阅读了关于一些drive_service和MedioIO的google api,这也需要一些凭据(主要是json文件/ oauth)。但是我无法了解它的工作原理。 另外,尝试urllib2 urlretrieve,但我的情况是从驱动器获取文件。尝试'wget'也没有用。 试过pydrive库。它有很好的上传功能驱 ..
发布时间:2017-07-13 11:33:03 Python

从YouTube下载flv格式的视频。

我不明白YouTube如何提供视频,但是我一直在阅读我可以看到的东西,似乎旧的方法get_video现在已经过时了,不能再被使用,因为我正在询问是否有另一个pythonic和简单的方法来收集YouTube视频。 解决方案 你可能有一些运气与youtube-dl http://rg3.github.com/youtube-dl /documentation.html 我不知道是否 ..
发布时间:2017-07-13 10:57:31 Python