dsh-web-snapshot:把网页转成带来源和时间的 Markdown
dsh-web-snapshot 是一个 DSH 插件,把网页 URL 转换成 Markdown 文件,包含标题、正文、来源、抓取时间、状态码等元数据。支持单个 URL、批量文件和 sitemap 抓取,过滤导航、广告等干扰元素,不依赖浏览器渲染,纯 Node 内置 fetch,适合离线调试和流水线使用。
阅读全文dsh-web-snapshot 是一个 DSH 插件,把网页 URL 转换成 Markdown 文件,包含标题、正文、来源、抓取时间、状态码等元数据。支持单个 URL、批量文件和 sitemap 抓取,过滤导航、广告等干扰元素,不依赖浏览器渲染,纯 Node 内置 fetch,适合离线调试和流水线使用。
阅读全文