Zum Hauptinhalt springen
Zurück zu den Nachrichten

Der Fehler, der unsere Zahlen besser aussehen ließ: wie wir ihn gefunden und beseitigt haben

09.09.20263 Min. Lesezeit
BarrierefreiheitMethodikoffene DatenEhrlichkeit der MessungUS-Forschung

CODE Eternal

Korrektur — 25. September 2026. Tote Behördendomains werden jetzt am CISA-Register selbst gezählt: 1.361 der 11.663 Domains des Registers (11,7 %) haben keinen DNS-Eintrag. Dieser Artikel wurde früher geschrieben und verwendet 1.441 (12,1 %) — diese Zählung umfasste auch Hosts außerhalb des Registers. Der übrige Text bleibt unverändert.

«Eine zu den eigenen Gunsten gezählte Zahl verlangt doppelt so viel Prüfung wie eine gegen sich selbst gezählte.»

— Koan Nr. 51, Maksim Valentinovich Galatin


Kurz gesagt

Wir messen die Barrierefreiheit von Websites: ob ein Mensch, der keine Maus benutzt, sich mit der Tastatur durch eine Seite bewegen und bekommen kann, wofür er gekommen ist. In der vergangenen Woche haben wir Zehntausende kommerzieller Websites in den USA durchlaufen.

Am 8. September fanden wir zwei Fehler in unserem eigenen Crawl. Beide ließen unsere Zahlen besser aussehen, als sie waren. Wir haben sie entfernt. So sahen sie von innen aus — denn genau so etwas zeigen fremde Berichte gewöhnlich nicht.

Der erste Fehler: eine Hindernisseite als makellose Website gezählt

Große Ketten schützen sich gegen automatische Anfragen. Unser Crawler kam auf eine solche Website und erhielt nicht die Website, sondern eine Prüfseite: „Roboter oder Mensch?“

Was dann geschah: Der Server antwortete mit dem Statuscode 200 — „alles in Ordnung“. Die Seite wurde dargestellt. Die Barrierefreiheits-Engine lief darüber und fand null Verstöße. Und das stimmt: Eine Seite mit einer Textzeile und einem Kontrollkästchen hat nichts, wogegen sie verstoßen könnte.

Der Protokolleintrag lautete: gemessen, keine Verstöße.

Mit anderen Worten: Eine Website, die uns nicht hereinließ, wurde als vorbildlich gezählt. Es gab mehr als viertausend solcher Einträge, 3.227 davon mit einer runden Null.

Der zweite Fehler: eine Kette mit dem Gewicht von tausend Unternehmen

Website-Adressen nehmen wir aus einem offenen Register von Organisationen. Bei Kettenunternehmen ist jeder Standort ein eigener Eintrag, und jeder trägt dieselbe Adresse im Feld „Website“.

Die Messung: 57.401 Prüfungen über 8.170 eindeutige Domains. Sieben Prüfungen pro Domain. Eine bekannte Kaffeemarke wurde 5.739-mal gemessen — einmal pro Café.

Berechnet man den Anteil der „Websites mit Verstößen“ nach der Zahl der Prüfungen, erhält eine einzige Kette das Gewicht von fünftausend unabhängigen Unternehmen. Und große Ketten haben meist gute Websites: Daran arbeiten ganze Abteilungen.

Was sich an der Schlagzeilenzahl geändert hat

Anteil der Websites mit Verstößen nach Prüfungen (falsch) ....................... 60,0 % nach eindeutigen Websites, Captchas entfernt .. 77,9 % Verschiebung .................................. 17,8 Prozentpunkte

Achten Sie auf die Richtung. Wir hatten unser eigenes Ergebnis zu niedrig angesetzt. Die Behebung des Fehlers ergab eine Zahl, die für uns günstiger klingt.

Genau deshalb schreiben wir darüber. Eine Korrektur, die das eigene Ergebnis verschlechtert, macht man aus Vorsicht. Eine Korrektur, die es verbessert, übersieht man leicht und sucht sie nicht — und das ist die gefährlichste Eigenschaft beider Fehler: Sie erregen keinen Verdacht. Die Daten sehen gut aus. Nichts stürzt ab. Niemand beschwert sich.

Wie wir es gefunden haben

Wir haben nach keinem der beiden gesucht.

Wir prüften etwas ganz anderes: dass jede gemessene Website ihren eigenen Screenshot hatte und keinen untergeschobenen. Dazu zählten wir den Anteil eindeutiger Prüfsummen der Screenshots. Er lag bei 74,4 % — ein Viertel der Screenshots wiederholte sich also.

Dann öffneten wir die Wiederholungen und sahen sie uns an. Gleich in den ersten drei Beispielen war die Website einer großen Einzelhandelskette mit dem Titel „Roboter oder Mensch?“ und null Verstößen.

Daraus folgt ein einfacher Schluss, den wir in unsere Methode übernehmen: Eine Prüfsumme des Screenshots ist eine günstige und sehr starke Prüfung. Sie fängt zwei verschiedene Fehlerklassen zugleich — eine untergeschobene Messung und doppelte Eingabedaten. Sie wird jetzt in jedem unserer Crawls stehen.

Was wir NICHT getan haben

Wir haben den laufenden Crawl nicht angehalten.

Die Prüfung zeigte, dass die Zählung korrigiert werden muss, nicht die Erhebung: Jeder Protokolleintrag bewahrt den Seitentitel, die Domain, den Statuscode und die Prüfsumme des Screenshots. Das genügt, um Hindernisseiten nach dem Crawl auszusondern und Ketten zusammenzufassen. Die Daten sind intakt; nichts muss erneut erhoben werden.

Das ist das zweite Mal, dass unsere Zahl gesunken ist, nicht zu unseren Gunsten

Am 1. September zählten wir 1.498 tote Domains unter kommunalen Websites. Am 8. September zählten wir neu: 1.441. Fünfundfünfzig Domains, die wir als tot markiert hatten, antworteten bei einem erneuten Versuch, und zwei weitere beim dritten.

Die größere Zahl sah eindrucksvoller aus. Wir haben die kleinere behalten.

Eine Kontrollsumme, die man laut prüfen kann: 1.441 + 10.461 = 11.902 — jede kommunale Website unserer Stichprobe.

Was wir gesondert geprüft haben

Wir haben dasselbe Verfahren auf unseren kommunalen Crawl angewandt — den, dessen Daten bereits offen veröffentlicht sind. Dort gibt es keine Verzerrung: 95.524 Prüfungen über 11.902 eindeutige Websites, je acht Seiten, null Hindernisseiten. Kommunale Websites verwenden keine Captchas.

Die veröffentlichten Daten brauchen keine Korrektur. Sie ist nur für den kommerziellen Crawl nötig, der noch läuft.

Warum wir überhaupt darüber schreiben

Weil eine Zahl ohne Nenner keine Messung ist, sondern ein Eindruck. Wenn jemand sagt „78 % der Websites sind unzugänglich“, ist die einzige ehrliche Frage: 78 % wovon genau, und was haben Sie aus dem Nenner herausgenommen?

Wir antworten im Voraus: Der Anteil wird über eindeutige Websites berechnet, nicht über die Zahl der Prüfungen, und Hindernisseiten sind nicht im Nenner. Ohne diese Korrektur hätten wir 60 % gehabt; mit ihr 78 %. Wir haben die Zahl genommen, die wir verteidigen können.

Die Daten, der Code und die Screenshots sind offen. Prüfen Sie uns.



Korrektur, 4. Oktober 2026. Nach einer erneuten Prüfung über Google- und Cloudflare-DNS und von zwei Standorten in den USA aus hat das CISA-Register 1.318 tote Domains von 11.663 (11,3 %), nicht 1.361: 42 Domains erwiesen sich als lebendig, und eine weitere antwortet zeitweise. Einzelheiten stehen im Korrekturprotokoll auf der Datenseite der Studie.