一上午搬空一个网站WebSite-Downloader 让整站离线下载不再依赖网络【免费下载链接】WebSite-DownloaderA website downloader written with Python项目地址: https://gitcode.com/gh_mirrors/web/WebSite-Downloader你收藏的文章突然 404、喜欢的教程一夜消失……与其坐等网页蒸发不如用 WebSite-Downloader——一个纯 Python 编写的网站下载器把整个网站连结构带资源完完整整搬回自己的硬盘。凌晨两点我收藏的网页没了半夜整理收藏夹随手点开半年前存下的一篇技术长文屏幕上只有冷冰冰的404 Not Found。顺着链接再翻作者域名已经过期评论区一片哀嚎谁有备份那一刻我突然意识到收藏夹只是目录不是保险柜。于是我开始找能把整站搬回家的工具。试了几个图形软件不是收费就是卡死最后在 GitCode 上撞见了 WebSite-Downloader。它做的事很纯粹——把网页、样式、脚本、图片全部下载到本地再自动改写链接让整个网站断网也能正常打开。没有花哨界面就一个 Python 文件干净利落。它其实是个数字搬家公司怎么理解 WebSite-Downloader 呢把它想成一个尽职的搬家公司你报一个地址网站首页它派出 8 个工人子线程挨个房间搬运把家具、挂画、电线HTML、CSS、图片、脚本全部装箱运回你指定的仓库本地文件夹连每件东西摆在哪面墙上链接相对路径都替你复原。它能做到它做不到下载整站 HTML、CSS、JS、图片、字体、音视频抓取纯 JavaScript 动态渲染的内容自动改写链接离线浏览不破图越过登录墙与验证码多线程并发下载速度可观拉取外站 CDN 上的跨域资源内置日志每次失败都有据可查替你判断哪些内容该不该保存所以它最适合这几类人想给博客定期备份的作者、要搭建离线知识库的学生、以及想把资料站冷冻下来的普通用户。跟随我把第一个网站搬回家先说环境电脑里只要有 Python 3.6 及以上版本就够不需要安装任何第三方依赖整个项目就两个文件上手压力几乎为零。第一步把仓库克隆到本地git clone https://gitcode.com/gh_mirrors/web/WebSite-Downloader第二步打开 WebSite-Downloader.py翻到文件末尾会看到两行示例代码。把网址换成你想下载的站点比如我拿一个文档站测试manager Manager(https://example-docs.net/) # 换成你的目标网站 manager.start()第三步在终端运行python WebSite-Downloader.py控制台会实时滚动每个链接的处理状态。等全部结束后工作目录下会出现xxx-site/文件夹。这里有个小彩蛋程序结束时会连续响铃十声提示你搬完了第一次跑别被吓到。打开文件夹里的 index.html你会看到和线上几乎一模一样的页面图片、样式、站内跳转全都正常工作。那一刻的安心感就像把散落在云端的回忆一件件收进了自己的抽屉。三个让它更趁手的玩法网速快就把工人加到 16 个默认开 8 个线程并发下载。如果你的网络好、目标服务器也扛得住可以把range(8)改成range(16)提速。但别贪心线程开太猛容易把对方服务器惹毛得不偿失。想存更多格式往集合里加后缀源码中的other_suffixes已经覆盖了常见类型。要是遇到没被收录的格式——比如某种冷门字体或文档后缀只要在这个集合里追加一个扩展名它就能被识别并下载。服务器不稳调高重试上限max_tries默认是 3 次遇到慢吞吞的站点把它改大能明显提高成功率。每一条失败记录都会写进log.log出问题时先翻日志比瞎猜高效得多。这些坑我替你踩过了Q下载到一半就不动了A先看log.log。多半是目标站点超时把重试次数调高、或换个网络环境再跑一次基本能解决。Q本地打开网页图片全裂、样式全乱A八成是资源挂在外部 CDN 上而 WebSite-Downloader 只搬站内资源。要么手动补下载要么优先选择资源自托管的站点。Q页面抓下来是空白骨架A这通常是单页应用或 JS 动态渲染的站点下载到的 HTML 本身就是空壳。遇到这类网站换个静态内容的站点下更实在。Q担心磁盘被塞爆A大型站点动辄几个 G。建议先拿一个小频道或子页面试跑估算体积再决定要不要全量下载。把重要内容握在自己手里说到底WebSite-Downloader 不只是个玩具而是你数字资产的备份工具。把常看的文档、维护的站点定期搬一次家就算哪天服务器宕机、域名过期你的内容都还在自己的硬盘上安然无恙。最后提醒一句动手之前请先确认目标网站允许被镜像尊重版权、遵守 robots.txt也别把下载频率调得太狠。工具是拿来安心的不是拿来惹麻烦的。下次再刷到喜欢的网页别只点收藏了——把它带回家吧。【免费下载链接】WebSite-DownloaderA website downloader written with Python项目地址: https://gitcode.com/gh_mirrors/web/WebSite-Downloader创作声明：本文部分内容由AI辅助生成（AIGC），仅供参考
