DotBot

DotBot蜘蛛是國外Moz旗下連結分析網站opensiteexplorer的,DotBot蜘蛛專門用來分析網站的外鏈資料。

DotBot蜘蛛有用嗎?

DotBot蜘蛛主要還是給國外網站服務的,如果你的網站是做外貿的,那麼DotBot蜘蛛對你的網站可能還有點用處,如果你的網站是中文網站,使用者也主要是國內的,那麼DotBot蜘蛛對你基本是沒有用處的,也不要指望DotBot蜘蛛能夠為你的網站帶來流量,它對你來說就是一個垃圾蜘蛛。

DotBot蜘蛛需要遮蔽嗎?

DotBot蜘蛛的存在感其實比較低,一般對網站的影響也幾乎沒有,所以我們完全可以不用管它,它要抓取就讓它抓取好了。如果你的網站伺服器效能比較差,擔心DotBot蜘蛛對你的速度產生負面影響,那麼你可以選擇把它遮蔽。

DotBot蜘蛛遮蔽方法如下:

在你的網站robot.txt檔案中新增如下內容

User-agent: DotBot

Disallow: /

補充糾錯
上一蜘蛛: Rogerbot
下一蜘蛛: MauiBot