网站镜像命令-Linux website mirror command

xuyaowen

发布于 2021-01-29 15:17:48

1.9K0

发布于 2021-01-29 15:17:48

命令备忘：

1. wget

wget -m -e robots=off -k -E "https://cgra-me.ece.utoronto.ca/docs/"

-m 镜像，整站抓取
-e robots=off 忽略robots协议，强制抓取
-k 将绝对URL链接转换为本地相对URL
-E 将所有text/html文档以.html扩展名保存

2. HTTrack

保持更新；

本文参与腾讯云自媒体分享计划，分享自作者个人站点/博客。

原始发表：2021-01-25 ，如有侵权请联系 cloudcommunity@tencent.com 删除

本文分享自作者个人站点/博客前往查看

如有侵权，请联系 cloudcommunity@tencent.com 删除。

本文参与腾讯云自媒体分享计划，欢迎热爱写作的你一起参与！

登录后参与评论

0 条评论

热度