Поисковый робот SE Ranking используется в инструментах «Аудита сайта» и «SEO-проверки страницы». Наш бот всегда следует правилам, прописанным в файле robots.txt.
Юзерагент нашего краулера "SEBot-WA". Вы можете самостоятельно верифицировать, что используемый вашим сервером краулер действительно является SE Ranking Crawler, используя один из описанных ниже методов.
Метод обратного DNS
Рекомендуем в первую очередь использовать именно этот вариант. Все серверы, используемые нашим SE Ranking Crawler, имеют доменное имя, которое является поддоменом sr-srv.net (этот домен принадлежит и используется исключительно SE Ranking).
Чтобы проверить, что IP-адрес принадлежит SE Ranking Crawler, сделайте следующее:
Шаг 1: Выполните обратный просмотр DNS для IP-адреса, в котором вы сомневаетесь.
$ host 144.76.237.123
123.237.76.144.in-addr.arpa domain name pointer cloud106.sr-srv.net.
Шаг 2: Убедитесь, что обнаруженное доменное имя является поддоменом sr-srv.net.
Шаг 3: Выполните прямой просмотр DNS обнаруженного имени домена.
$ host cloud106.sr-srv.net.
cloud106.sr-srv.net has address 144.76.237.123
Шаг 4: Убедитесь, что обнаруженный IP-адрес не отличается от того, который вы проверяли на первом шаге.
Метод сопоставления IP-адресов
Чтобы убедиться, что IP-адрес принадлежит SE Ranking Crawler, сопоставьте его со списком IP-адресов, приведенным ниже:
144.76.237.123
162.55.90.109
162.55.94.175
195.201.82.119
142.132.195.214
168.119.139.232
148.251.139.87
46.4.23.25
138.201.137.152
116.202.175.208