DataForSeoBot

DataForSeoBot是來自DataForSEO(DataForSearchEngineOptimization)的網路爬蟲。DataForSEO是一家提供搜尋引擎最佳化資料和工具的公司,他們的爬蟲被用於收集搜尋引擎結果頁面(SERP)資料、關鍵詞資料以及其他與搜尋引擎最佳化相關的資訊。

這個爬蟲主要用於幫助網站所有者、營銷人員和SEO專家獲取搜尋引擎結果資料,並用於分析和最佳化他們的網站。透過DataForSEO的服務,使用者可以獲取關於搜尋引擎排名、關鍵詞競爭情況等方面的有用資料,以輔助其制定營銷策略和最佳化網站內容。

不過對於國內網站來說不會帶來什麼流量,可以選擇robots.txt協議禁止。

User-agent: DataForSeoBot

Disallow: /

如果還是禁止不了,可以選擇nginx規則禁止訪問,如下:

if ($http_user_agent ~* "DataForSeoBot") {

 return 403;

}

補充糾錯
上一蜘蛛: RepoLookoutBot
下一蜘蛛: WellKnownBot