Верификация SERankingBacklinksBot
Информация о SERankingBacklinksBot Crawler
Как управлять SERankingBacklinksBot
IP-адреса SERankingBacklinksBot
Другие вопросы
SERankingBacklinksBot сканирует Интернет, чтобы помогать собирать информацию о структуре ссылок сайтов и их взаимосвязях в сети, избегать технических и возможных юридических проблем. Идентификация SERankingBacklinksBot осуществляется через user-agent следующего вида:
Mozilla/5.0 (compatible; SERankingBacklinksBot/1.0; +https://seranking.com/backlinks-crawler)
SERankingBacklinksBot verification
SERankingBacklinksBot всегда использует указанный выше user-agent:
Mozilla/5.0 (compatible; SERankingBacklinksBot/1.0; +https://seranking.com/backlinks-crawler)
Этот метод идентификации может быть уязвим к попыткам подмены. Если вы подозреваете, что запросы подделываются, рассмотрите использование дополнительных методов, описанных в этом разделе.
Reverse DNS
Reverse DNS lookup по IP бота должен показывать один из поддоменов *.seranking.com (wildcard-запись домена).
SERankingBacklinksBot crawling behaviour
Ниже перечислены основные характеристики нашего бота, определяющие процесс его работы:
- SERankingBacklinksBot — дружелюбный к сайтам crawler. По умолчанию, если в robots.txt не указан Crawl-delay или файл недоступен (например, возвращает не 200 статус), стандартная задержка составляет 3 секунды.
- SERankingBacklinksBot всегда соблюдает правила, указанные в вашем robots.txt.
- SERankingBacklinksBot собирает только общедоступную информацию, доступную любому случайному посетителю. Если вы считаете, что crawler получает конфиденциальные данные, уберите их из публичного доступа.
- SERankingBacklinksBot не читает, не парсит, не собирает и не сохраняет никакую другую информацию с вашего сайта, кроме ссылок на ваших страницах. Это касается любых текстов, графических или видео материалов и любого другого контента на странице.
Если возникают проблемы, они могут быть вызваны особенностями вашего сайта или ошибкой на стороннем ресурсе, который содержит ссылку на вас. Если вы заметили любую проблему, связанную с SERankingBacklinksBot, пожалуйста, сообщите нам на crawler@seranking.com. Мы оперативно настроим индивидуальные параметры для вашего сайта, чтобы процесс сканирования никогда не влиял на его производительность.
Managing SERankingBacklinksBot with robots.txt
Убедитесь, что ваш robots.txt доступен и возвращает HTTP 200 OK. Если это не так, SERankingBacklinksBot, который имитирует поведение Google Bot, будет считать файл отсутствующим.
С помощью robots.txt вы можете настроить crawl delay для SERankingBacklinksBot или заблокировать доступ к частям сайта или ко всему сайту. Ниже приведены примеры. Мы рекомендуем сначала настроить crawl delay, чтобы сохранить производительность сайта, позволяя при этом SERankingBacklinksBot собирать необходимые данные о ссылках и улучшать видимость вашего сайта в Интернете.
How to slow down the Bot:
User-agent: SERankingBacklinksBot
Crawl-delay: 10
How to block specific sections of your site:
User-agent: SERankingBacklinksBot
Disallow: /private/
Disallow: /messages/
How to block an entire site:
User-agent: SERankingBacklinksBot
Disallow: /
Attention: После внесения изменений в robots.txt, пожалуйста, дайте crawler до одного дня, чтобы полностью остановить сканирование вашего сайта. Это связано с тем, что некоторые страницы могут уже находиться в очереди обработки, поэтому немедленное прекращение не гарантируется. Однако в течение суток сканирование полностью остановится.
Для общего ознакомления с протоколом robots.txt, пожалуйста, посетите http://www.robotstxt.org. Также рекомендуем ознакомиться со статьёй Wikipedia для дополнительных примеров и деталей о правилах robots.txt.
IP-адреса SERankingBacklinksBot
IP-адреса могут периодически меняться; обновления на веб-странице могут отображаться не сразу.
IPv4
- 5.9.120.100
- 5.9.120.135
- 5.9.120.220
- 5.9.120.41
- 5.9.120.8
- 5.9.120.88
- 37.27.51.131
- 37.27.51.139
- 37.27.51.140
- 37.27.51.141
- 37.27.51.142
- 37.27.51.143
- 37.27.51.144
- 37.27.51.145
- 37.27.51.146
- 37.27.51.147
- 37.27.55.110
- 37.27.55.74
- 37.27.59.134
- 37.27.59.176
- 65.109.100.155
- 65.109.100.157
- 95.217.114.145
- 95.217.114.159
- 95.217.114.173
- 95.217.114.179
- 135.181.166.38
- 135.181.166.58
- 135.181.3.228
- 135.181.3.246
- 144.76.19.11
- 144.76.19.146
- 144.76.19.147
- 144.76.19.148
- 144.76.19.149
- 144.76.19.157
- 144.76.19.24
- 144.76.19.27
- 144.76.19.28
- 144.76.19.3
- 144.76.19.70
- 144.76.19.72
- 144.76.19.75
- 144.76.19.9
- 144.76.32.114
- 144.76.32.117
- 144.76.32.120
- 144.76.32.140
- 144.76.32.145
- 144.76.32.148
- 144.76.32.151
- 144.76.32.187
- 144.76.32.188
- 144.76.32.189
- 144.76.32.190
- 144.76.32.235
- 144.76.32.236
- 144.76.32.237
- 144.76.32.238
- 144.76.32.239
- 144.76.32.241
- 144.76.32.242
- 144.76.32.246
- 144.76.32.248
- 144.76.32.72
- 144.76.32.76
- 144.76.32.94
- 144.76.33.36
- 144.76.33.42
- 144.76.33.48
- 144.76.33.52
- 144.76.33.62
IPv6
- 2a01:4f8:162:7002::2
- 2a01:4f8:162:7064::2
- 2a01:4f8:162:70c7::2
- 2a01:4f8:191:1113::2
- 2a01:4f8:191:1114::2
- 2a01:4f8:191:1118::2
- 2a01:4f8:191:118b::2
- 2a01:4f8:191:118c::2
- 2a01:4f8:191:118d::2
- 2a01:4f8:191:118f::2
- 2a01:4f8:191:2346::2
- 2a01:4f8:191:234e::2
- 2a01:4f8:191:2362::2
- 2a01:4f8:191:23a1::2
- 2a01:4f8:191:23a2::2
- 2a01:4f8:191:23a3::2
- 2a01:4f8:191:23a4::2
- 2a01:4f8:191:23e6::2
- 2a01:4f8:191:23ec::2
- 2a01:4f8:191:23f0::2
- 2a01:4f8:191:23f1::2
- 2a01:4f8:191:23f2::2
- 2a01:4f8:191:23f5::2
- 2a01:4f8:191:23f9::2
- 2a01:4f9:3080:25a9::2
- 2a01:4f9:3081:3a29::2
- 2a01:4f9:3081:3a2a::2
- 2a01:4f9:3081:3a2b::2
- 2a01:4f9:3081:3a2c::2
- 2a01:4f9:3081:3df0::2
- 2a01:4f9:3081:4214::2
- 2a01:4f9:3a:1da6::2
- 2a01:4f9:4a:301f::2
- 2a01:4f9:4a:3020::2
- 2a01:4f9:4b:50a0::2
Contact us
Мы очень серьёзно относимся к любым отзывам, связанным с работой Crawler бота, и реагируем на них быстро и корректно. Пожалуйста, свяжитесь с нами через crawler@seranking.com, если у вас возникли вопросы.