Facebot

Facebot是Facebook使用的網路爬蟲程式,用於抓取和索引網頁內容以支援Facebook平臺上的連結預覽、內容展示和其他功能。

Facebot會定期訪問網際網路上的網頁,抓取頁面的後設資料、圖片和其他相關資訊,並將這些內容儲存在Facebook的資料庫中。這樣,當使用者在Facebook分享一個連結時,Facebot就會去抓取該連結的內容,並在Facebook上生成一個連結預覽,包括標題、摘要和圖片等資訊,讓使用者可以更好地瞭解連結的內容。

不過對於國內網站來說不會帶來什麼流量,可以選擇robots.txt協議禁止。

User-agent: Facebot

Disallow: /

如果還是禁止不了,可以選擇nginx規則禁止訪問,如下:

if ($http_user_agent ~* "Facebot") {

 return 403;

}

補充糾錯
上一蜘蛛: WellKnownBot
下一蜘蛛: YouBot