在 DSH 的插件生態中，處理 HTTP 請求往往需要面對反爬蟲與限流的挑戰。dsh-sxs-anti-bot-http 是一款針對該場景的專用工具插件，旨在封裝通用的反爬與限流策略，降低智能體開發中聯網功能的維護成本。
插件介紹¶
該插件由用戶 yangyunsong023 開發。它基於 SXS 採集體系（每日數百萬級請求實戰）提煉策略，採用純 Node 實現，具備零運行時依賴的特性。插件本身開源免費，許可證爲 MIT。
核心功能¶
插件主要提供以下能力：
- UA 池輪換：內置 5 組瀏覽器 UA，打破固定指紋，模擬真實瀏覽器訪問。
- 指數退避重試：在網絡錯誤或服務器返回 5xx 錯誤時自動重試，防止因瞬時抖動導致請求失敗。
- 反爬牆檢測：識別驗證碼、安全驗證、滑動驗證、Cloudflare challenge、阿里雲 WAF 等常見反爬特徵。
- 站點級自適應限流：根據站點響應動態調整請求間隔。連續失敗時，間隔按 30s→60s→120s→240s→480s 指數退避；請求恢復後自動回落，防止封禁 IP。
安裝與啓用¶
使用官方提供的命令將插件添加到 DSH 配置中：
dsh plugin --profile web add git+https://github.com/yangyunsong023/dsh-sxs-anti-bot-http.git
安裝完成後，插件即可在 web 上下文中使用。
典型用法¶
插件提供了三個核心工具函數：
sxs_fetch：反爬 GET 請求，返回網頁文本。sxs_fetch_json：反爬 GET 請求，自動解析 JSON 響應。sxs_rate_status：查看各站點的自適應限流狀態。
示例代碼：
// 抓取網頁文本
sxs_fetch(url="https://example.com/news", referer="https://example.com/")
// 抓取 JSON 接口
sxs_fetch_json(url="https://api.example.com/data")
適用場景與注意¶
- 適用場景：適合需要頻繁訪問外部網站，且目標站點具備一定反爬能力的 DSH 智能體開發。
- 權限與安全：插件以當前 DSH 進程權限運行。在安裝前，建議開發者檢查源碼與許可證，確保符合自身需求。
- 依賴說明：該插件需要 GitHub 賬號認證才能通過 npm 包安裝，但通過 Git 鏈接安裝通常不依賴此限制。
總結¶
dsh-sxs-anti-bot-http 爲 DSH 插件體系提供了一套經過實戰驗證的反爬解決方案。通過 UA 輪換、指數退避和自適應限流，它能夠有效提升 HTTP 請求的穩定性與成功率。更多細節可查閱插件目錄或項目源碼。
