English

Bot & Opt-out

User-Agent

Der Checker ruft genau eine angeforderte URL sowie wenige öffentliche Dateien ab (robots.txt, sitemap.xml, llms.txt, security.txt u. a.). Er crawlt keine Websites. Der User-Agent lautet: RelaconCheck/1.0 (+https://relacon.at/website-check/bot)

Was wir abrufen

Die angefragte URL (inkl. Weiterleitungen, max. 5), die http://- und die www/ohne-www-Variante, /robots.txt, /sitemap.xml, /llms.txt, /llms-full.txt, /.well-known/security.txt, /humans.txt, /favicon.ico, das im head verlinkte Web-App-Manifest, die MTA-STS-Richtlinie unter https://mta-sts.<domain>/.well-known/mta-sts.txt, eine absichtlich nicht existierende URL für den 404-Test, bis zu 5 Bilder per HEAD, das og:image und DNS-Einträge (SPF, DMARC, DKIM, MX, CAA, _mta-sts).

Um Bot-Sperren zu erkennen, ruft der Checker die angefragte Seite zusätzlich je einmal mit dem Kennwort von Googlebot und von GPTBot im User-Agent ab. Dieser Abruf nennt sich selbst als Prüfabruf von RELACON, damit ihn niemand für den echten Crawler hält: Mozilla/5.0 (compatible; Googlebot/2.1; +http://www.google.com/bot.html) RelaconCheck-probe (+https://relacon.at/website-check/bot)

Opt-out

Seitenbetreiber können ihre Domain sperren lassen. Senden Sie dazu eine E-Mail an rl@relacon.at mit Betreff „Opt-out Website-Check“ und der Domain.

Sicherheit

Der Checker enthält SSRF-Schutz (nur http/https, Ports 80/443, keine internen Adressen) und Rate-Limits. Es werden keine Inhalte fremder Seiten veröffentlicht – nur Messwerte und kurze Auszüge wie Title oder Meta-Beschreibung.