RankionBot
RankionBot pobiera strony internetowe w imieniu klientów Rankion: do audytów stron, analiz treści i sprawdzania, co asystenci AI mówią o marce. Czyta wyłącznie publiczne strony.
Jak go rozpoznać
Każde żądanie zawiera ten user agent:
Mozilla/5.0 (compatible; RankionBot/1.0; +https://rankion.ai/bot)
Jak go dopuścić
Jeśli zapora, ochrona przed botami lub limit żądań blokuje crawlera, w audycie zabraknie stron lub mapy witryny. Pobiera z tych adresów:
152.53.139.2522a0a:4cc0:c0:f779:6429:f7ff:fe14:2345
W formacie maszynowym dla reguł zapory: /bot/ips.json
Niektóre żądania, które muszą w pełni wyrenderować stronę, przechodzą przez usługę renderowania o zmiennych adresach. Nie da się ich dopuścić za pomocą listy.
Jak go zablokować
Audyt strony przestrzega pliku robots.txt. Ten wpis wyklucza crawlera:
User-agent: RankionBot Disallow: /