Der SE Ranking Crawler wird verwendet, um Websites für die Tools Website-Audit und On-Page-SEO-Checker zu crawlen. Standardmäßig folgt der SE Ranking Crawler den Anweisungen in der robots.txt-Datei. Du kannst dieses Verhalten jedoch in den Projekteinstellungen ändern.
Der User-Agent unseres Crawlers ist SEBot-WA. Du kannst überprüfen, ob ein Web-Crawler, der deinen Server verwendet, tatsächlich der SE Ranking Crawler ist, indem du eine der unten angegebenen Methoden anwendest.
Reverse DNS-Methode (empfohlen)
Alle vom SE Ranking Crawler verwendeten Server haben einen Domainnamen, der eine Subdomain von sr-srv.net ist (diese Domain gehört SE Ranking und wird ausschließlich von SE Ranking verwendet).
So überprüfst du, ob eine IP-Adresse zum SE Ranking Crawler gehört:
Schritt 1: Führe eine Reverse-DNS-Abfrage der fraglichen IP-Adresse durch:
Schritt 2: Überprüfe, ob der resultierende Domainname eine Subdomain von sr-srv.net ist.
Schritt 3: Führe eine Forward-DNS-Abfrage des resultierenden Domainnamens durch:
$ host cloud106.sr-srv.netcloud106.sr-srv.net has address 144.76.237.123
Schritt 4: Überprüfe, ob die resultierende IP-Adresse mit der ursprünglichen IP-Adresse aus Schritt 1 übereinstimmt.
IP-Matching-Methode
Um zu überprüfen, ob die IP-Adresse zum SE Ranking Crawler gehört, vergleiche sie mit der unten angegebenen Liste von IP-Adressen:
Aktuelle IP-Adressen des SE Ranking Crawlers
- 5.9.48.208
- 46.4.23.25
- 46.4.81.149
- 136.243.103.47
- 136.243.147.42
- 138.201.137.152
- 142.132.128.37
- 142.132.195.214
- 144.76.14.242
- 144.76.15.151
- 144.76.69.81
- 144.76.159.253
- 144.76.164.62
- 144.76.237.123
- 162.55.94.175
- 162.55.94.176
- 162.55.244.19
- 168.119.139.232
- 168.119.64.236
- 176.9.74.49