Der SE Ranking Crawler wird verwendet, um Websites für das Website-Audit und den On-Page-SEO-Checker zu crawlen. Der SE Ranking Crawler ist ein höflicher Bot und befolgt immer die Anweisungen, die in der robots.txt-Datei angegeben sind.
Der User-Agent unseres Crawlers ist "SEBot-WA". Du kannst überprüfen, ob ein Web-Crawler, der deinen Server verwendet, tatsächlich ein SE Ranking Crawler ist, indem du eine der unten angegebenen Methoden verwendest.
Reverse DNS-Methode
Dies ist die bevorzugte Verifizierungsmethode. Alle von SE Ranking Crawler verwendeten Server haben einen Domainnamen, der eine Subdomain von sr-srv.net ist (diese Domain gehört SE Ranking und wird ausschließlich von SE Ranking verwendet).
Um zu überprüfen, ob die IP-Adresse zum SE Ranking Crawler gehört, befolge diese Schritte:
Schritt 1. Führe eine Reverse-DNS-Abfrage der fraglichen IP-Adresse durch:
$ host 144.76.237.123
123.237.76.144.in-addr.arpa domain name pointer cloud106.sr-srv.net.
Schritt 2. Überprüfe, ob der resultierende Domainname eine Subdomain von sr-srv.net ist.
Schritt 3. Führe eine Forward-DNS-Abfrage des resultierenden Domainnamens durch:
$ host cloud106.sr-srv.net.
cloud106.sr-srv.net has address 144.76.237.123
Schritt 4. Überprüfe, ob die resultierende IP-Adresse dieselbe ist wie die ursprüngliche IP-Adresse aus Schritt 1.
IP-Matching-Methode
Um zu überprüfen, ob die IP-Adresse zum SE Ranking Crawler gehört, vergleiche sie mit der unten angegebenen Liste von IP-Adressen:
144.76.237.123
162.55.90.109
162.55.94.175
195.201.82.119
142.132.195.214
168.119.139.232
148.251.139.87
46.4.23.25
138.201.137.152
116.202.175.208