有没有一种方法或工具可以自动访问我网站的所有页面 [英] Is there a way or a tool to automatically visit all pages of my site

问题描述

我想自动访问/爬网我网站上的所有页面以生成缓存文件。有什么方法或工具可以做到这一点？

I want to automatically visit / crawl all the pages on my site in order to generate a cache file. Is there any way or tool to do this?

推荐答案

只要使用任何下载整个页面的机器人即可：

Just use any robot that downloads your entire page:

https://superuser.com/ Questions / 14403 /如何下载整个网站

例如wget：

wget -r --no-parent http://site.com/songs/

这篇关于有没有一种方法或工具可以自动访问我网站的所有页面的文章就介绍到这了，希望我们推荐的答案对大家有所帮助，也希望大家多多支持IT屋！