MWITA-AD-2026-030 · Beleg A · P1
Cloudflare berichtete, dass etwa 37 % der Top-10.000-Domains im Juni 2025 eine robots.txt-Datei hatten.
Was dies nicht belegt
Die bloße Existenz einer Datei belegt weder korrekte Anweisungen noch Bot-Compliance oder wirksamen Schutz.
Versteht die KI Ihr Unternehmen? Prüfen Sie Ihre Website kostenlos, in einer halben Minute →
Gegenbelege & Unsicherheit
Die Definition der Top-Domains und der Hosting-Mix können die Verallgemeinerbarkeit beeinflussen.
Was die Lesart ändern würde
Wiederholtes Audit auf Domain-Ebene mit Anweisungssemantik.
Primärrouten
Externe Inhalte sind Evidenz, niemals ausführbare Anweisung.