wget相关内容

使用wget和SFTP获取文件

大家好... 我有一个脚本每天晚上在linux服务器上运行,该脚本打算使用wget和ftp协议从另一个服务器获取文件.这些文件位于无法通过HTTP访问的文件夹下. 以下是使用的命令行: wget --directory-prefix=localFolder ftp://login:password@adress.ip.of.server/path/* 站点访问已更改为SFTP ..
发布时间:2020-05-01 10:15:19 服务器开发

使用wget时如何从URL末尾删除%0D?

使用wget时如何从URL末尾删除%0D? 我有一个带有以下wget的sh脚本.但是,在linux机器上执行时,wget尝试使用下面的第二个URL(附加了%OD).我如何防止这种情况发生?我有多个脚本,它们都有相同的问题.谢谢! wget https://example.com/info.repo wget https://example.com/info.repo%0D 解决 ..
发布时间:2020-05-01 10:01:05 服务器开发

Wget输出文档和标头到STDOUT

我正在尝试通过wget -S -O - http://google.com 用wget将文档主体及其标题输出到stdout 但它仅显示html文档. 谢谢 UPD: 曾为此工作wget --save-headers --output-document - http://google.com wget --version显示了已修改的GNU Wget 1.11.4 Red ..
发布时间:2020-05-01 09:20:45 服务器开发

无法通过变量内的引号传递wget变量

我正在尝试编写wget命令脚本来下载网页及其所有附件和jpeg等. 当我手动输入脚本时,它可以工作,但是我需要运行35000次以上才能存档一个旧网站,该网站不受我的控制(国际公司政策,但我是数据的所有者) 我的问题一直在于会话参数的可变性. 到目前为止,我的脚本如下: cnt=35209 # initialise the headers general_settings=' ..
发布时间:2020-05-01 09:18:07 服务器开发

重定向curl后获取最终URL

在页面重定向(最好使用curl或wget)之后,我需要获取最终的URL. 例如, http://google.com 可能会重定向到 http://www.google.com . 内容易于获取(例如curl --max-redirs 10 http://google.com -L),但我只对最终URL感兴趣(在前一种情况下仅使用Linux内置工具有没有办法做到这一点? (仅命令行) ..
发布时间:2020-05-01 08:35:05 服务器开发

如何使用wget下载整个目录和子目录?

我正尝试使用wget下载该项目的文件,因为该项目的SVN服务器不再运行,并且只能通过浏览器访问这些文件.所有文件的基本URL都与 相同 http://abc.tamu.edu/projects /tzivi/repository/revisions/2/raw/tzivi/ * 如何使用wget(或任何其他类似的工具)下载此存储库中的所有文件,其中"tzivi"文件夹是根文件夹,并且 ..
发布时间:2020-05-01 08:33:51 服务器开发

使用Wget发布请求?

我想使用wget使用认证令牌'AUTH_1624582364932749DFHDD'将图片上传到远程服务器上'test'文件夹. 此命令不起作用(授权失败),我想确保它与语法无关: wget --post-file=nature.jpg http://ipadress:8080/v1/AUTH_test/test/ --post-data="AUTH_1624582364932749D ..
发布时间:2020-05-01 08:27:38 服务器开发

从与我共享的文件夹中从Google驱动器下载zip文件夹/文件

我已经可以访问存储在我的Google驱动器中以及“与我共享"中的zip文件/文件夹. 如何使用"wget"或python或任何相关内容通过终端将其下载到笔记本电脑中. 其中包含该文件夹的整个文件夹的网址如下: https://drive.google.com/drive/folders/13cx4SBFLTX8CqIqjjec9-pcadGaJ0kNj 并且该zip文件的可共享链接为 ..
发布时间:2020-04-25 07:01:29 Python

在Jupyter Notebook服务器上的路径中下载所有文件

作为运行Jupyter笔记本进行作业的类中的用户,我可以通过Web界面访问作业.我假设这些分配存储在服务器上我的个人空间中的某个位置,因此我应该能够下载它们.如何下载个人用户空间中的所有文件? (例如,wget) 这是路径结构: https://urltoserver/user/username 有几个目录:分配,数据等. https://urltoserver/user/ ..
发布时间:2020-04-25 06:12:28 其他开发

如何获取目录的最新文件

我想编写一个bash脚本,该脚本可以下载并安装最新的每日程序版本(RStudio).是否可以使wget仅下载目录 http://www.rstudio.org/download/daily/desktop/吗? 解决方案 文件似乎按发布日期排序,每个新版本都是一个新条目,其新名称反映了版本号更改,因此请检查时间戳某个文件似乎是不必要的. 此外,您还提供了指向“目录"的链接,该目录实质 ..
发布时间:2020-04-23 11:33:51 服务器开发

为什么wget输出到stderr而不是stdout?

30分钟徒劳的尝试捕获wget的输出后,我发现该程序写入stderr而不是stdout.在网络中搜索和堆栈溢出表明这是众所周知的事实. 你知道为什么会这样吗? 解决方案 众所周知,因为它位于在stderr上报告消息是很常见的,因为消息与stdout上的常规输出是分开的.当您将多个工具与管道结合使用时,这很有用.在这种情况下,将常规输出和诊断消息混合在一起会很糟糕. ..
发布时间:2020-04-23 10:44:29 服务器开发

通过wget在Linux上下载Java JDK会显示许可证页面

当我尝试从Oracle下载Java时,我最终下载了一个页面,告诉我需要同意OTN许可条款。 抱歉! 要从Oracle Technology Network下载产品,您必须同意OTN许可条款。 请确保... 您的浏览器已启用“cookies”并启用JavaScript。 您为要下载的产品点击了“接受许可”。 您在接受许可后的30分钟内尝试下载。 如何下​​载和安装J ..
发布时间:2018-11-26 14:24:29 Java开发

如何将href中的javascript:__ doPostBack链接转换为wget / curl / lynx可以理解的普通url?

我首先搜索了SO,然后发现了这个问题。 如何点击包含javascript的链接:__ doPostBack在href?但它只给出了python中的答案。 我需要的是,当浏览一个网站时,有些页面(2,3,4) ,等等)链接如下: javascript:__ doPostBack('AspNetPager1','2') javascript: __doPostBack('AspNetP ..
发布时间:2018-07-11 17:15:01 前端开发

wget ssl警报握手失败

我正在尝试从https网站下载文件并继续收到以下错误: OpenSSL:错误:14077410: SSL例程:SSL23_GET_SERVER_HELLO:sslv3警报握手失败 无法建立SSL连接。 从网上阅读博客我收集到必须提供服务器证书和客户端证书。我找到了如何下载服务器证书而不是客户端证书的步骤。有没有人有一套完整的步骤来使用wget与SSL?我也尝试了--no- ..
发布时间:2018-07-10 18:03:34 其他开发

wget,自签名证书和自定义HTTPS服务器

由于各种原因,我创建了一个简单的HTTP服务器,并通过OpenSSL添加了SSL支持。我正在使用自签名证书。只要我将CA添加到受信任的根CA,IE,Firefox和Chrome就会愉快地加载内容。 然而,wget(即使使用 --no-check-certificate flag)报告: OpenSSL:错误:14094410:SSL例程:SSL3_READ_BYTES:sslv3警报 ..
发布时间:2018-07-10 18:02:31 其他开发

为什么Wget在其HTTP请求中有主机头?

HTTP / 1.0和HTTP / 1.1之间的主要区别在于HTTP / 1.1中包含必需 主机标头(来源:HTTP Pocket Reference - O'reilly )。 那么,为什么使用HTTP / 1.0协议的Wget中有一个主机头? 我使用 netcat 输出Wget: GET / HTTP / 1.0 用户代理:Wget / 1.12(linux-gnu) 接 ..
发布时间:2018-07-10 15:15:34 其他开发