使用 Cloudflare Markdown for Agents 抓取站点并将每个页面导出为 Markdown。
网站爬虫并导出 asSite Crawler 到 Markdown v1.0
Site Crawler to Markdown v1.0 是一款 Chrome 扩展程序，可使用 Cloudflare 的 Page-to-Markdown 功能将 Web 内容转换为结构化 Markdown 文件。它允许用户抓取整个网站或导出单个页面，将分散的 Web 内容转换为干净、有组织的 .md 档案，以供文档、AI 工作流程或离线参考。
该扩展在设计时充分考虑了性能，通过按受控批次处理大型网站来避免浏览器内存的大量使用。由于内置的暂停和恢复控件以及自动分段下载，即使是具有数千个页面的网站也可以顺利导出。
🔑 主要特点
全站 Markdown 爬行
抓取站点内所有可访问的页面。
将页面转换为符合 Cloudflare 标准的 Markdown 格式。
在结构化文件夹中输出多个 .md 文件。
大型网站的批处理
批量下载 100 页内容。
防止大型爬网期间内存过载。
每次下载后自动继续下一批。
暂停和恢复下载
随时暂停长时间的爬行会话。
从最后完成的页面继续，无需重新启动。
自定义 Markdown 下载位置
用户可以定义文件在本地保存的位置。
按项目或站点组织导出的内容。
单页 Markdown 导出
一键选项仅转换当前页面。
对于快速捕获而不启动完整爬行很有用。
结构化文件输出
干净的命名和有组织的文件夹结构。
更轻松地导航和重用导出的内容。
版本：v1.0
初始版本侧重于可扩展的爬行、批量下载和 Markdown 导出稳定性。
