wget相关内容

Wget &Python/无用户选项

我使用 python 库 wget: import wgetwget.download("https://example.com") 它给了我以下错误: IOError: ('http error', 401, 'Unauthorized', ) 发生这种情况是因为我应该使用 user & 选项密码以获取文件. 有什么选择吗?如果没有，使用用户和密码从外部存储库下载 python 文 ..
发布时间：2021-09-24 20:13:52 Python

网页抓取和 robots.txt

我使用 wget 来“下载"一个站点. wget -r http://www.xyz.com i) 它返回一个 .css 文件、一个 .js 文件、index.php 和一个图像 img1.jpg ii) 但是，xyz.com 下还有更多图片.我输入了www.xyz.com/Img2.jpg，因此是 有一张图片. iii) 但是 index.php 指的是单个图像，即 ..
发布时间：2021-09-24 20:13:49 PHP

wget 无法正常工作.

我对 wget 命令有些怀疑.这是我想要实现的目标.我想从这个链接“http://snapshots.linaro.org/oneiric/lt-origen-oneiric/20120321/0/images/hwpack/hwpack_linaro-lt-origen_20120321-0_armel_supported.tar.gz"下载一个tar包.. 当我在浏览器中使用它下载软件包时，此 ..
发布时间：2021-09-24 20:13:46 其他开发

用于更改 URL 的脚本

我在编写执行以下操作的流程或脚本时遇到了一些麻烦: 我需要从以下网址获取数据: nomads.ncep.noaa.gov/dods/gfs_hd/gfs_hd20140430/gfs_hd_00z 但是文件 URL(日期和模型运行发生变化)，因此它必须为变量假定此基本结构. Y - 年M - 月D - 日C - 模型预测/初始化时间F-模型帧小时 像这样: nomads.ncep. ..
发布时间：2021-09-24 20:13:40 Python

wget - HTML 重定向问题

我无法让 wget 在以下链接上工作.(似乎是 HTML 重定向) http://www.limesurvey.org/en/stable-release/finish/25-latest-stable-release/407-limesurvey192plus-build120418targz 在这里找到_http://www.limesurvey.org/en/stable-rel ..
发布时间：2021-09-24 20:13:37 服务器开发

如何捕获wget进程的错误?

我正在使用 c# 中的 wget 进程进行下载图像的应用程序.但是在下载图像时，我提供了图像类型，即 .jpeg 或 .png.通过 wget 命令.如果在下载时我正在传递 .jpeg 并且如果 .jpeg 不存在，那么我想通过进程类捕获错误“找不到文件".但这并没有发生. 我的代码如下: class TrapProcessError{私有进程 process = new Process( ..
发布时间：2021-09-24 20:13:34 C#/.NET

在 shell_exec 中使用 wget 下载和保存文件

我想从命令行下载文件当我在 shell 中运行命令时，它会起作用，但是当我想在 PHP 中执行它时，没有结果 $cmd='wget http://cvs.snort.org/viewcvs.cgi/snort/rules/dns.rules'$output=shell_exec($cmd);echo " $output "; 我只是想从这个网站下载 任何帮助将不胜感激 ..
发布时间：2021-09-24 20:13:31 PHP

如何从网站获取所有图像?

当这些图像未存储在同一域中时，如何从站点获取所有图像? 解决方案 我建议你看看 此链接 应该是这样的； wget -r -A.jpg http://url-to-webpage-with-images/ 我之前做过的另一种方式， 1) 获取文档的html源 2) 解析链接 3) 将链接保存在 .txt 文件中 4) 然后使用 wget -i fil ..
发布时间：2021-09-24 20:13:22 其他开发

从 R 控制台窗口相当于 wget

嗨，我想知道 wget 的 Windows 等价物是什么 我目前在 R 中有一个具有命令的函数 system("wget www.random.url.com/file") 从运行 R 的 mac/unix 机器上从 Internet 下载文件...Windows 中的 R 等价物是什么? 解决方案 查看 download.file 将文件下载到您的计算机.这适用于所有操作系统， ..
发布时间：2021-09-24 20:13:19 其他开发

wget 代理身份验证错误

尝试使用 wget 通过代理连接到 http URL 时出现以下错误 错误: wget "http://pro.fastmarkets.com/feeds/default.aspx?usr=anzbank&pwd=587345bv98735vb2b56&feed=physicals-csv" -O/tmp/test.csv**wget:第 3 行/home/acdbaqa/.wgetrc ..
发布时间：2021-09-24 20:13:16 其他开发

如何使用 --accept-regex 选项通过 wget 下载网站?

我正在尝试使用 wget 下载我网站的存档 - 3dsforums.com，但有数百万我不想下载的页面，所以我试图告诉 wget 只下载匹配特定 URL 模式的页面，但我遇到了一些障碍. 举个例子，这是一个我想下载的网址: http://3dsforums.com/forumdisplay.php?f=46 ...所以我尝试使用 --accept-regex 选项: wget ..
发布时间：2021-09-24 20:13:13 其他开发

面临“wget"的问题在蟒蛇

我对python非常陌生.我面临着“wget"和“urllib.urlretrieve(str(myurl),tail)"的问题 当我运行脚本时它正在下载文件但文件名以“?"结尾 我的完整代码: 导入操作系统导入 wget导入 urllib导入子流程将 open('/var/log/na/na.access.log') 作为输入文件，将 open('/tmp/reddy_log.tx ..
发布时间：2021-09-24 20:13:07 Python

R 中的 download.file 包括先决条件

我正在尝试使用 download.file 来获取一些网页，包括嵌入的图像等.我认为使用 wget 它相当于 -p -k 选项，但我不知道该怎么做... 如果我这样做: download.file("http://guardian.co.uk","test.html") 这显然有效，但我收到此错误: 警告信息:1:运行命令 'wget -p -k "http://guardian.co ..
发布时间：2021-09-24 20:13:04 其他开发

使用 wget 从 b2drop.eudat 共享链接下载文件

以下链接:https://b2drop.eudat.eu/s/DfQlm5J42nEGnH7 持有文件和文件夹(可公开访问).我想使用 wget 将它们下载到我的控制台中.在浏览器上点击下载 https://b2drop.eudat.eu/s/DfQlm5J42nEGnH7/download 链接下载一个包含所有文件的 .tar 文件. 我遵循了以下指南:https://stackoverf ..
发布时间：2021-09-24 20:13:00 其他开发

向此表单提交数据的 wget 命令是什么?

我正在尝试将姓名、电子邮件地址和消息发布到此页面: http://zenlyzen.com/test1/index.php?main_page=contact_us 使用 wget.这个命令: wget --post-data 'contactname=test&email=a@a.com&enquiry=testmessage' http://www.zenlyzen.com/te ..
发布时间：2021-09-24 20:12:58 其他开发

带有python时间限制的wget

我有一个很大的 URL 文本文件，我必须通过 wget 下载.我写了一个小的 python 脚本，它基本上遍历每个域名并使用 wget (os.system("wget "+URL)) 下载它们.但问题是，如果远程服务器在连接后没有回复，wget 就会挂起连接.在这种情况下如何设置时间限制?如果远程服务器在连接后没有回复，我想在一段时间后终止 wget. 问候， 解决方案 这似乎不是 ..
发布时间：2021-09-24 20:12:55 Python