#AI 爬蟲
5 篇文章
AI 爬蟲進店先看什麼？一天半內 robots.txt 16 次、sitemap 3 次、llms.txt 0 次
把網站當儀器，逐筆記錄機器檔被拉取的實況：爬蟲搶著看 robots.txt，偶爾翻 sitemap，特地為 AI 準備的 llms.txt 沒人拿。單站、短窗，不做全稱斷言；但標配的優先序，這扇窗已經給出方向。
#llms.txt#AEO#AI 爬蟲一天 426 次、之後安靜：看懂 Meta AI 爬蟲的批次讀法
km.idaeo.ai 自建觀測開機第一天，Meta 的 meta-externalagent 到訪 426 次，之後停手。它讀新聞事實卡、也讀作者頁，快取幾乎全未命中，等於真回源搬內容。單站、儀器僅 1.5 天，本文只做行為側寫，不做行業…
#AI 爬蟲#數據專欄#AI能見度
我們怎麼記這本帳：AI 爬蟲系列的方法論與限制
數字怎麼算、身分怎麼驗、哪些帳有已知限制——AI 爬蟲系列的方法論，含三筆自查更正。
#方法論#AI 爬蟲#資料透明#可驗證性#IDAEO
AI 爬蟲流量是聲量：3,000 萬次，帶來 476 次真人點擊
搬貨最多的，不是帶客人來的那個。用一家店的帳本，看懂 AI 時代誰值得你招待。
#AI 行銷#AI 爬蟲#AEO#AI 引用#內容策略#llms.txt
看不見的讀者：12 隻 AI 爬蟲現形
AI 沒讀過你的網站，就永遠不會推薦你——不是排名低，是根本不存在。3,000 萬次爬蟲到訪紀錄拆開看：想要客人，餵索引型；想被記得，餵訓練型；看到真人代抓，代表你已經做對了。
#數據專欄#AI 爬蟲#AI能見度