Understand how AI reads the web.

從 AI Crawler、AEO、GEO 到 Agentic Web,建立給人與機器都能理解的技術知識庫。

這個站回答一類具體問題:AI 系統怎麼取得網頁、怎麼理解它、以及什麼情況下會引用它。內容以官方文件與第一手伺服器記錄為準,不做預測,也不販售保證。

從這裡開始

這個站的資料從哪裡來

爬蟲目錄的觀測欄位不是抄自官方文件,而是來自實際的伺服器端存取記錄——2 個正式站台、2026-06-18 至 2026-09-08、累計 18,097 筆 AI 爬蟲請求。

這件事有實際差別:官方文件的 UA 範例常常過期。例如 GPTBot 在本觀測期間實際送出的版本是 GPTBot/1.4,而多數教學文章仍寫著 1.0。如果你的日誌比對規則是照文件寫死的,就會漏掉。

觀測資料的限制:樣本來自兩個特定站台,流量規模與主題會影響哪些爬蟲來、來多少。這些數字用來理解「有哪些爬蟲、長什麼樣子」很合適,但不適合當作全網路的市佔或排名。

這個站不做什麼