- oen.de
- oenbot
oenbot
oenbot ruft Webseiten ab, wenn jemand ein Tool auf OEN.de nutzt. Es gibt kein automatisches Crawling im Hintergrund.
User-Agent
Mozilla/5.0 (compatible; oenbot/1.0; +https://oen.de/oenbot)
Fragen oder Probleme?
Wenn oenbot auf deinem Server Probleme verursacht, schreib uns über das Kontaktformular. Wir reagieren schnell.
KontaktWie arbeitet oenbot?
- Abrufe entstehen nur, wenn eine Person eine URL in eines unserer Tools eingibt. Wie ein Browser-Besuch.
- Pro Analyse werden die Seite selbst, robots.txt, Sitemap, die Host-Varianten und eine Stichprobe von bis zu 32 verlinkten Seiten abgerufen (meist per HEAD-Request).
- Für den KI-Check wird die Seite zusätzlich mit den User-Agents bekannter KI-Crawler abgerufen, um Sperren sichtbar zu machen.
- Ergebnisse werden höchstens 10 Minuten zwischengespeichert, wiederholte Prüfungen erzeugen in dieser Zeit keine neuen Abrufe.
- Pro Person gilt ein Limit, damit niemand OEN.de für massenhafte Abrufe missbrauchen kann.