24 小時內誰在爬你的網站:Bing 303 次、Google 只有 120 次的爬蟲紀錄

我們操盤的一個客戶站接了 Cloudflare,可以看到過去 24 小時實際被誰抓取。我們把資料拉出來看了一次,結果不是原本以為的樣子。

過去 24 小時,這個站被搜尋引擎與 AI 的爬蟲送出了 773 次允許的請求,前幾名分別是:

  • Bing(Copilot 用的就是這個索引):303 次
  • Common Crawl(AI 訓練用,不會帶流量給你):140 次
  • Google:120 次
  • OpenAI(ChatGPT 的搜尋與讀取):83 次
  • Perplexity:45 次
  • Anthropic(Claude):43 次
  • Apple:39 次
Cloudflare AI Crawl Control 過去24小時爬蟲組成
圖:本站(客戶站,匿名)Cloudflare AI Crawl Control,過去 24 小時的爬蟲組成(Cloudflare 截圖,統計期間為過去 24 小時)。圖上總請求為允許的請求 773 次、未成功的請求 238 次;上面各家的次數是「允許的請求」欄位。這張圖能支持「這段時間各爬蟲的抓取次數比較」,不能直接當成訪客數或流量機會的比例。

Google 大約只佔一成五

用允許的請求當分母,Google 120 次 ÷ 773 次,大約 15.5%。抓最兇的是 Bing,不是 Google;而 ChatGPT、Perplexity、Claude、Apple 這四家加起來,也比 Google 還多。這足以支持「值得同時觀察其他搜尋與 AI 入口」,但請求次數不是獨立訪客數,也不是流量機會或市場占比,不能直接推論「只看 Google 會漏看九成流量」。

網站需要穩定的新文章?

想持續更新網站,又沒有時間每篇從頭準備?文開花替你安排選題、撰稿與檢查。先看示範內容,再判斷適不適合你的生意。

看看文開花怎麼做 →

順帶一提,Common Crawl 那 140 次屬於爬蟲請求,不是一般訪客點擊;這類網頁蒐集資料可能供研究、搜尋或模型等用途,單憑請求紀錄不能判定每次抓取的後續用途。

我們另外一個站的爬蟲組成跟這個完全不一樣——排在前面的是另一批爬蟲,Bing 反而排得很後面。但 Google 一樣是第三名,占比也差不多。兩個性質完全不同的站,同一個方向的觀察:真正在抓網站的角色,早就不是只有 Google 一個了。

Bing 比 Google 早起量

另一組歷史成效截圖來自同一客戶站,但完整自訂起訖日期未留存,不能確認兩份報表完全同期間。當時記錄為:Google 帶進 2,041 次點擊、7.26 萬次曝光,點閱率 2.8%;Bing 帶進約 4,500 次點擊、6.17 萬次曝光,點閱率 7.3%。這些是歷史報表數字,不宜據此比較兩個平台的實際導流效率。

GSC 歷史成效:2041點擊 7.26萬曝光 CTR2.8%
圖:本站(同一客戶站)Google Search Console 歷史成效,2,041 次點擊、7.26 萬次曝光、點閱率 2.8%(GSC 截圖,統計區間為自訂日期,完整起訖日未留存)。點擊與曝光的單位為次;點閱率以該報表曝光數為分母。這張圖能支持「該歷史報表的 Google 表現」,不能單獨證明起量原因。
Bing Webmaster 全期:4500點擊 6.17萬曝光 CTR7.3%
圖:本站(同一客戶站)Bing 網站管理員工具歷史成效,約 4,500 次點擊、6.17 萬次曝光、點閱率 7.3%(Bing 截圖,統計區間為自訂日期,完整起訖日未留存;Bing 圖面顯示為約數,非精確匯出數字)。這張圖能支持「該歷史報表的 Bing 表現」,不能單獨證明兩份報表統計區間完全對齊。

爬蟲請求與搜尋點擊是不同指標,不能互相代替;這些記錄支持把 Bing 納入觀察,尚不能解釋點擊變化的原因。

另有觀察到的 AI 引用紀錄

Bing Webmaster Tools AI Performance:近 3 個月引用 4.6K 次、平均每日被引用 6 頁
圖:自家站(非客戶站)的 Bing 站長工具 AI Performance 報表,來源 Microsoft Copilots and Partners,期間標示為 3 個月,完整起訖日期未留存。引用 4.6K 次、平均每天 6 個頁面被引用。單位是 AI 答案引用次數,不是點擊;能支持「內容有被 AI 拿去當答案來源」,不能推論帶來多少訪客或訂單。

這是我們自己一個站近 3 個月的 AI 引用紀錄:被 Microsoft Copilot 系列引用約 4,600 次,平均每天有 6 個頁面被引用。要先說清楚:引用次數不等於點擊,也不等於訂單——它算的是內容被 AI 拿去當答案來源的次數,屬於能見度的資料,不是流量的資料。

網站需要穩定的新文章?

想持續更新網站,又沒有時間每篇從頭準備?文開花替你安排選題、撰稿與檢查。先看示範內容,再判斷適不適合你的生意。

看看文開花怎麼做 →

更新至 2026-09-12

2026-09-12 查核留存的逐日資料:Google 實際涵蓋 2026-01-12 至 2026-09-08;Bing 涵蓋 2026-01-13 至 2026-09-09。各自範圍內累計為:Google 5,158 次點擊、181,357 次曝光、點閱率 2.84%;Bing 5,837 次點擊、81,476 次曝光。兩份資料的日期範圍與平台統計方法不同,不能把累計值當成同條件的成效比較。

在各自平台的逐月資料中可觀察到:Bing 從 3 月開始明顯拉升(132→678 次點擊),Google 則是 6 月才開始起量(19→345 次點擊),起量之後 Google 才逐漸追上、8 月一度反超 Bing。

客戶站 Google 與 Bing 逐月點擊,2026-01 至 2026-09
圖:客戶站(同一站,匿名)Google 與 Bing 逐月點擊,Google:2026-01-12~2026-09-08;Bing:2026-01-13~2026-09-09(9 月 12 日查核的 API 匯出資料;圖面截止標示以本說明更正)。篩選:搜尋類型網路。單位:點擊次數。能支持:兩邊起量時間點不同、Bing 較早、Google 較晚且幅度較大。不能推論:兩份報表的統計方法完全相同、可以逐日對齊比較。

9 月資料分別僅到 8 日及 9 日,都是不完整月份,不能與完整的 8 月直接比較或據此判斷流量下滑;也不能證明下降完全由截止日造成。

再拉一次同一個客戶站近 24 小時的機器人請求,這次依 Cloudflare 匯出中的 User-Agent 名稱及回應狀態整理(跟本文開頭「AI Crawl Control」的分類方式不同,兩組數字的統計口徑不一樣,不能拿來相減或直接比大小,只能各自看各自的排序):Bingbot 466 次、PerplexityBot 78 次、Googlebot 69 次、Applebot 43 次、ClaudeBot 22 次、GPTBot 與 CCBot 皆為 0 次;同一個 24 小時窗口,站上總請求數是 13,628 次(含一般訪客,不是全部都是機器人)。

客戶站近 24 小時各指定 User-Agent 請求數長條圖
圖:客戶站(同一站)近 24 小時各指定 User-Agent 請求數,2026-09-10T18:13~2026-09-11T18:13(UTC)(Cloudflare GraphQL Analytics API,維度 userAgent+回應狀態)。篩選:僅列出的 7 個 User-Agent 名稱;未取得已驗證身分的欄位證據。單位:請求次數(包含成功及未成功回應)。同時段全站共 13,628 次請求,包含非上述分類,並非人數。能支持:這個時間窗口內,標示 Bingbot 的請求次數最多,但 User-Agent 名稱不能單獨證明真實身分,GPTBot、CCBot 這個窗口內為 0。不能推論:機器人排序等於流量或訂單機會,也不能跟本文開頭「AI Crawl Control」的分類數字直接相減比較——兩次用的分類方式不同。

AI 引用的現況(2026-09-12 截圖)

本次 AI Performance 資料採用站長工具報表截圖。自家站近 3 個月被引用約 4,500 次、平均每天 6 個頁面被引用,與舊圖約 4,600 次的數字接近,但舊圖完整日期未留存,不能據此判斷持平;客戶站近 3 個月約 5,500 次、平均每天 20 個頁面。一樣要提醒:這是「被 AI 拿去當答案來源」的次數,不是點擊,也不是訂單。

自家站 Bing AI Performance:近 3 個月引用 4.5K 次、平均每日被引用 6 頁
圖:自家站,Bing 站長工具 AI Performance,來源 Microsoft Copilots and Partners,區間標示「3 M」,完整起訖以報表為準,未另留存精確日期,截圖 2026-09-12。單位是 AI 答案引用次數。能支持「內容持續被 AI 引用」,不能推論訪客或成交。
客戶站 Bing AI Performance:近 3 個月引用 5.5K 次、平均每日被引用 20 頁
圖:客戶站,同類報表,區間標示「3 M」,截圖 2026-09-12。平均每天有 20 個不同頁面被引用,不能據此認定文章數是差異主因。能支持「這張報表記錄的引用與頁數」,不能推論帶來多少流量。

這就是為什麼我們兩邊都做

我們替客戶的站做 Google 與 Bing 雙邊驗證與提交,文章上架時用 IndexNow 主動通知搜尋引擎,協助引擎得知更新;是否及何時檢索、建立索引,仍由各引擎決定。請求次數不等於訪客數,也不等於流量機會;但多數人做 SEO 只盯著 Google 看,可能較少觀察其他入口的表現,仍應依自己站台的實際資料判斷。

想知道自己的站最近被誰抓過,如果站台有接 Cloudflare,可以在機器人分析裡查看該方案與報表可提供的請求紀錄;Bing 網站管理員工具的 AI Performance 報表看的是 AI 答案引用,不是抓取紀錄,兩者不要混用。

網站需要穩定的新文章?

想持續更新網站,又沒有時間每篇從頭準備?文開花替你安排選題、撰稿與檢查。先看示範內容,再判斷適不適合你的生意。

看看文開花怎麼做 →