Swiftbot

Swiftype是一個為你的網站定製的搜尋引擎。它結合了 “最好的搜尋技術、演算法、內容攝取框架、客戶端和分析工具”。

Swiftype是一個可以為你的網站搜尋提供動力的軟體

如果你有一個有許多頁面的複雜網站，Swiftype提供了一個有用的介面，為你的所有頁面編目和索引。

Swiftbot是Swiftype的網路爬行器。然而，與其他機器人不同，Swiftbot只抓取他們的客戶要求的網站。

不過對於國內網站來說不會帶來什麼流量，可以選擇robots.txt協議禁止。

User-agent: Swiftbot

Disallow: /

如果還是禁止不了，可以選擇nginx規則禁止訪問，如下：

if ($http_user_agent ~* "Swiftbot") {

 return 403;

}