Coccocbot-web是一種網路爬蟲,由越南的Cốc Cốc搜尋引擎(Cốc Cốc)開發和維護。這個網路爬蟲主要用於抓取網頁內容,索引資訊,併為Cốc Cốc搜尋引擎提供相關資料,以幫助使用者在Cốc Cốc搜尋引擎上獲取準確和全面的搜尋結果。
Cốc Cốc是越南本土的一家搜尋引擎公司,類似於谷歌等全球知名搜尋引擎。Coccocbot-web網路爬蟲的主要任務是幫助Cốc Cốc搜尋引擎建立和更新其搜尋索引,確保使用者可以在搜尋時找到他們需要的資訊。
不過對於國內網站來說不會帶來什麼流量,可以選擇robots.txt協議禁止。
User-agent: Coccocbot-web
Disallow: /
如果還是禁止不了,可以選擇nginx規則禁止訪問,如下:
if ($http_user_agent ~* "Coccocbot-web") {
return 403;
}