Eine Studie aus dem Jahr 2020 befasst sich mit der Zuvelässigkeit von sieben automatischen Prüfwerkzeugen zu Barrierefreiheit von Websites. Geprüft wurden aChecker, ACCE, ABDI, axe, Mauve, TAW und Wave. Ziel war, verlässliche Testwerkzeuge zu empfehlen.
Die Ergebnisse zeigen, welche Barrieren mit welchem Werkzeug zuverlässig gefunden werden. Von 17 geprüften Barrieren wurden je nach Werkzeug zwischen 3 und 6 gefunden. Die Werkzeuge haben unterschiedliche Stärken, die auch differenziert ausgewertet werden. Die Autorinnen kommen allerdings zu dem Schluss,
„dass eine vollständig automatische Überprüfung nach dem jetzigen Stand der Tools nicht ausreichend ist.“
(S. 158) [1]
[1] Quelle: Saba Mateen, Sarah Voß-Nakkour und Linda Rustemeier: „Eine Studie zur Qualitätsbeurteilung von automatisierten Testwerkzeugen zur Prüfung auf Barrierefreiheit“ in Raphael Zender et al (Hrsg.): Die 18. Fachtagung Bildungstechnologien (DELFI), Bonn 2020, S. 158-168
Studie (PDF) bei der Gesellschaft für Informatik (GI) unter dl.gi.de/