EAAWatchStudy — our research crawler

EAAWatchStudy is the user agent of a study by EAA Watch: how accessible the home pages of online shops in Europe are, measured with automated WCAG 2.x checks (the open-source axe-core engine). We publish only aggregate statistics by country and rule — no shop names and no results of individual shops.

What it requests

The site's robots.txt and its home page — once per study wave. The home page is loaded once, as in a desktop browser, with its own scripts, styles and images.
No other pages, no logins, no forms. Cookie banners are neither accepted nor closed.
One site at a time, at a slow pace, from one address; no proxies.

What we respect

robots.txt (RFC 9309): if it disallows / for EAAWatchStudy or for all agents, or cannot be read (other than 404 or 410), the site is skipped.
A 403 or 429 answer or a bot challenge counts as a refusal: no retries and no workarounds.
A text and data mining reservation (a tdm-reservation header or meta tag, or a TDM notice on the home page) excludes the site from the statistics.

What we keep

Per domain: the identifiers of the failed axe-core rules, their counts, the HTTP status and sampling data from public sources (country, shop platform, category). No page text, images, screenshots or personal data. Records are kept until the report is published and for about 12 months after; then only aggregates remain.

How to opt out

Add to your robots.txt:

User-agent: EAAWatchStudy
Disallow: /

or write to us — we stop and delete the records of your domain.

Operator: Roman Sorokin · romansorokin73@gmail.com

User agent: … EAAWatchStudy/0.2 (+https://eaa.steadyrobots.com/bot/)

Deutsch: EAAWatchStudy — unser Forschungs-Crawler

EAAWatchStudy ist der User-Agent einer Studie von EAA Watch: Wie barrierefrei sind die Startseiten von Onlineshops in Europa, gemessen mit automatischen WCAG-2.x-Prüfungen (Open-Source-Engine axe-core)? Veröffentlicht werden nur zusammengefasste Statistiken nach Land und Regel — keine Shopnamen und keine Ergebnisse einzelner Shops.

Abgerufen werden robots.txt und die Startseite — einmal pro Studienwelle; die Startseite wird einmal geladen wie in einem Desktop-Browser.
Keine weiteren Seiten, keine Logins, keine Formulare; Cookie-Banner werden weder akzeptiert noch geschlossen.
robots.txt (RFC 9309) wird beachtet; 403, 429 oder eine Bot-Abfrage gelten als Ablehnung — ohne Wiederholung. Ein Nutzungsvorbehalt für Text und Data Mining (tdm-reservation, § 44b UrhG) schließt die Website aus der Statistik aus.
Gespeichert werden je Domain nur die IDs der nicht bestandenen axe-Regeln, ihre Anzahl, der HTTP-Status und Stichprobendaten aus öffentlichen Quellen (Land, Shopsystem, Kategorie) — keine Texte, Bilder, Screenshots oder personenbezogenen Daten; bis zur Veröffentlichung des Berichts und etwa 12 Monate danach, dann nur noch Aggregate.
Widerspruch: in robots.txt die beiden Zeilen oben eintragen oder uns schreiben — wir stoppen und löschen die Daten Ihrer Domain.

Betreiber: Roman Sorokin · romansorokin73@gmail.com