命令备忘:
1. wget
wget -m -e robots=off -k -E "https://cgra-me.ece.utoronto.ca/docs/"
-m 镜像,整站抓取
-e robots=off 忽略robots协议,强制抓取
-k 将绝对URL链接转换为本地相对URL
-E 将所有text/html文档以.html扩展名保存
2. HTTrack
保持更新;
扫码关注腾讯云开发者
领取腾讯云代金券
Copyright © 2013 - 2025 Tencent Cloud. All Rights Reserved. 腾讯云 版权所有
深圳市腾讯计算机系统有限公司 ICP备案/许可证号:粤B2-20090059 深公网安备号 44030502008569
腾讯云计算(北京)有限责任公司 京ICP证150476号 | 京ICP备11018762号 | 京公网安备号11010802020287
Copyright © 2013 - 2025 Tencent Cloud.
All Rights Reserved. 腾讯云 版权所有