文章获取爬虫:从政务与新闻站点采集 AI 与数字化政策资讯

文章获取爬虫(@user_6ed3129a/capoocat,v1.0.0)是 SkillHub 社区 data-analysis 类 Skill,无需 API Key。面向中国政府与新闻网站,按人工智能、数字化、信息化等关键词抓取并排除招标公示类噪声,输出 original_articles、article_links 与 crawled_links.json。可通过 skillhub install 安装到 Cursor 等 skills 目录,或在对话中让 Agent 按场景触发;亦可 pip 安装 requests、beautifulsoup4、lxml 后运行 crawler_skill.py。

阅读全文