爬蟲狀態
三層爬蟲架構 · 每 10 秒自動更新
爬蟲架構
L1文章列表收集
目標: PTT 八卦版前 3 頁
觸發: 每 1 分鐘自動執行
間隔: 10 秒 + 隨機 3 秒
L2文章內容與推文
目標: 文章本文、推文、IP
觸發: L1 自動排隊 / 手動重爬
間隔: 30 秒 + 隨機 2 秒
L3作者歷史調查
目標: pttweb.cc 作者發文紀錄
觸發: L2 發現新作者自動排隊 / 手動重爬
間隔: 60 秒 + 隨機 3 秒
L1 → 發現文章排入 L2 隊列(優先級 0)→ L2 發現新作者排入 L3 隊列(優先級 2)→ L3 發現新文章排回 L2(優先級 1)。隊列支援優先級排序和去重,失敗最多重試 3 次。
載入中...