前言¶
做數據採集的人大多經歷過這個過程:先寫腳本抓頁面,再補反爬,最後手工把字段拼回表裏。三件事散落在臨時代碼、調試筆記和聊天記錄裏,換個站點或換個負責人就要重來一遍。
爬蟲數據採集專家要解決的就是這件事:把「數據採集 + 數據清洗」打包成一個有明確觸發詞的方案,讓 Agent 在接到採集類需求時按固定流程走,而不是每次從零寫腳本。
本文基於 2026-10-30 抓取的官方資料寫成。官方頁面與接口在寫作時均無法訪問(返回抓取失敗),因此下列事實一律以預抓取資料爲準,未覈實的內容直接不寫。
這是什麼¶
一句話定位:一個面向企業與個人的爬蟲數據採集與清洗方案 Skill。
- 名稱:爬蟲數據採集專家
- 座標:@kunlungrowth/kunlun-da-664
- 版本:1.0.0
- 來源(source):enterprise
- 分類:data-analysis
- 發佈者:崑崙增長
- 官方地址:https://api.skillhub.cn/kunlungrowth/kunlun-da-664
- SkillHub 頁面:https://www.skillhub.cn/skills/kunlungrowth/kunlun-da-664
解決的問題:採集與清洗長期靠一次性腳本,缺少統一的觸發條件、流程和輸出約定。該 Skill 用 Trigger on 關鍵詞定義觸發時機,把流程固定下來。
頁面快照數據(抓取時間 2026-10-30):評分 100000,下載 1189,安裝 0。安裝數爲 0 意味着目前沒有公開的採用記錄可參考,本文也不引用任何用戶反饋。
核心能力¶
資料中可覈對的能力只有簡介裏明確寫的兩條:
1、數據採集:從目標站點抓取所需數據。
2、數據清洗:對抓取結果做清洗,形成可用數據集。
觸發方式是關鍵詞驅動。官方簡介給出的 Trigger on 關鍵詞爲四個:
數據採集 / 爬蟲 / 數據抓取 / 數據清洗
也就是說,當請求命中這四個詞之一時,Skill 被激活,按採集與清洗的流程執行,而不是把它當成普通問答。
另一個值得注意的字段是標籤 requires_api_key=false,含義是調用該 Skill 不需要額外配置 API Key。對不想維護密鑰的企業或個人來說,這是門檻上的優勢。
需要提醒的是:資料裏沒有出現反爬策略、代理池、調度、增量抓取、JS 渲染等實現細節,也沒有列出支持的數據源類型。這些能力是否存在,本文不做推斷。
安裝與啓用¶
這裏必須如實說明:已抓取的資料中沒有出現任何安裝命令、目錄路徑或配置文件字段,官方頁面在寫作時無法訪問,因此本文不給出具體安裝指令。
可以覈對的只有入口本身:
https://api.skillhub.cn/kunlungrowth/kunlun-da-664
https://www.skillhub.cn/skills/kunlungrowth/kunlun-da-664
該 Skill 基於通用 SKILL.md 格式。這類格式的 Skill 在支持 skills 的 Agent 宿主裏通常以目錄形式加載,即把 SKILL.md 放進宿主的 skills 目錄,由宿主在匹配到觸發詞時讀取。如果你使用的是 Cursor、Codex CLI 或 Claude Code,具體目錄名、加載命令與配置方式各不相同,而這三者的差異在已抓取資料中都沒有出現。
因此建議的操作順序是:先打開官方地址確認安裝方式,再按宿主文檔配置,不要照搬其他 Skill 的路徑。若你的宿主完全不支持 SKILL.md 加載,這個 Skill 就無法啓用,它的關鍵詞觸發機制也就不會生效。
典型用法¶
官方資料給出的可復現示例只有觸發方式,沒有附帶示例腳本或樣例數據。下面是按 Trigger on 關鍵詞組織的用法。
場景一:命中「數據抓取」
幫我抓取某站點商品列表頁,把標題、價格、上架時間取下來
這條請求含「抓取」,命中觸發詞,Skill 進入採集流程。
場景二:命中「數據清洗」
把剛纔抓到的商品數據清洗一下,去掉重複行,統一價格爲數字類型
這條請求含「清洗」,同樣命中觸發詞,Skill 進入清洗流程。
場景三:同時命中,走完整鏈路
採集這批數據並清洗成可直接入庫的格式
「採集」與「清洗」都在觸發詞表裏,Skill 按採集到清洗的順序執行。
使用上的約束:觸發依賴關鍵詞匹配,所以請求裏最好明確出現「採集」「抓取」「爬蟲」「清洗」這類詞。只說「我要這批數據」而不用觸發詞,Skill 未必被激活。另外,採集目標是否合規、站點 robots 與訪問頻率限制是否滿足,都需要使用者在調用前自行判斷,官方資料對此沒有給出說明。
適用場景與注意¶
適合的場景:
1、團隊或個人需要一個固定流程來跑採集與清洗,不希望每次重寫腳本。
2、需求命中採集或清洗關鍵詞,且希望 Agent 按方案執行而不是自由發揮。
3、不想爲調用單獨申請和配置 API Key 的情況。
限制與坑:
1、實現細節不透明。資料裏沒有反爬、代理、併發、重試、JS 渲染等說明,遇到複雜站點前需要先確認能力邊界。
2、安裝數爲 0,缺少公開採用反饋,遇到問題時沒有社區案例可查,只能回到官方地址提需求。
3、關鍵詞觸發是字符串匹配,措辭偏離觸發詞時可能不激活,建議在需求描述裏顯式帶上「採集/抓取/清洗」。
4、合規責任在使用方。採集範圍、頻率、數據用途需要自行評估,Skill 不會替你判斷目標站點是否允許抓取。
結尾¶
爬蟲數據採集專家的價值不在反爬或清洗算法上,而在把採集與清洗的流程和觸發條件固定成一套可複用的方案,降低每次採集需求的啓動成本。它不需要 API Key,觸發條件清楚,但實現細節與安裝方式在公開資料裏都沒有展開,需要先打開官方地址覈實。
官方地址:https://api.skillhub.cn/kunlungrowth/kunlun-da-664
SkillHub 頁面:https://www.skillhub.cn/skills/kunlungrowth/kunlun-da-664