La “araña” o crawler de SE Ranking se utiliza para rastrear sitios web para las herramientas de Auditoría Web y Comprobación de SEO On-Page. El crawler de SE Ranking es un bot amable y siempre sigue las instrucciones especificadas en el archivo robots.txt.
El user agent de nuestro rastreador es "SEBot-WA". Puedes comprobar si uno de los rastreadores web que utilizan tu servidor es realmente el rastreador de SE Ranking mediante uno de los métodos que se especifican a continuación.
Método de DNS inverso
Este es el método de verificación preferido. Todos los servidores utilizados por el crawler de SE Ranking tienen un nombre de dominio que es un subdominio de sr-srv.net (este dominio es propiedad y de uso exclusivo por SE Ranking).
Para comprobar que la dirección IP pertenece a al crawler de SE Ranking, sigue estos pasos:
Paso 1: Ejecuta una búsqueda DNS inversa en la dirección IP en cuestión:
$ host 144.76.237.123
123.237.76.144.in-addr.arpa domain name pointer cloud106.sr-srv.net.
Paso 2: Verifica que el nombre de dominio resultante sea el subdominio de sr-srv.net.
Paso 3: Ejecuta una búsqueda DNS directa en el nombre de dominio resultante:
$ host cloud106.sr-srv.net.
cloud106.sr-srv.net has address 144.76.237.123
Paso 4: Comprueba que la dirección IP resultante sea la misma que la dirección IP original proporcionada en el Paso 1.
Método de coincidencia de IP
Para verificar que la dirección IP pertenece al crawler de SE Ranking, compárala con la lista de direcciones IP que se especifican a continuación:
144.76.237.123
162.55.90.109
162.55.94.175
195.201.82.119
142.132.195.214
168.119.139.232
148.251.139.87
46.4.23.25
138.201.137.152
116.202.175.208