Le Crawler SE Ranking est utilisé pour analyser les sites web via les outils d'Audit de Site Web et de Vérificateur SEO On-Page. Par défaut, le robot d’exploration SE Ranking suit les instructions définies dans le fichier robots.txt. Cependant, ce paramètre peut être modifié dans la configuration du projet.
L’agent utilisateur de notre crawler est "SEBot-WA". Vous pouvez vérifier si un crawler utilisant votre serveur est réellement un Crawler SE Ranking en utilisant l'une des méthodes spécifiées ci-dessous.
Méthode DNS inverse
C'est la méthode recommandée. Tous les serveurs du Crawler SE Ranking utilisent un sous-domaine de sr-srv.net (ce domaine appartient et est exclusivement utilisé par SE Ranking).
Pour confirmer que l'adresse IP appartient à SE Ranking, suivez les étapes ci-dessous :
Étape 1 : Exécutez une recherche DNS inverse sur l'adresse IP :
Étape 2 : Vérifiez que le nom de domaine est un sous-domaine de sr-srv.net.
Étape 3 : Effectuez une recherche DNS directe sur le nom de domaine obtenu :
$ host cloud106.sr-srv.netcloud106.sr-srv.net has address 144.76.237.123
Étape 4 : Assurez-vous que l'adresse IP obtenue est identique à l'adresse IP initiale de l'étape 1.
Méthode de correspondance d'IP
Pour vérifier que l'adresse IP appartient au Crawler SE Ranking, comparez-la avec la liste des adresses IP spécifiées ci-dessous :
Adresses IP actuelles du Crawler SE Ranking
- 5.9.48.208
- 46.4.23.25
- 46.4.81.149
- 136.243.103.47
- 136.243.147.42
- 138.201.137.152
- 142.132.128.37
- 142.132.195.214
- 144.76.14.242
- 144.76.15.151
- 144.76.69.81
- 144.76.159.253
- 144.76.164.62
- 144.76.237.123
- 162.55.94.175
- 162.55.94.176
- 162.55.244.19
- 168.119.139.232
- 168.119.64.236
- 176.9.74.49