Vad roboten hämtar
- robots.txt, startsidan, webbplatskartan och tre produktsidor
- sidorna om frakt och retur
- filen /.well-known/ucp, där AI-agenter läser vad butiken kan ta emot
Vi gör också några testanrop mot startsidan och en produktsida. Där använder vi samma namn som AI-tjänsternas egna robotar, till exempel OpenAI:s, Anthropics och Perplexitys. Det visar om butiken släpper in dem. Anropen kommer från oss, inte från tjänsterna.
Så tar roboten hänsyn
- Den följer robots.txt. Säger filen nej till TodasDatastudie hämtar vi inget mer.
- Den gör högst ett anrop varannan sekund per butik.
- Den loggar aldrig in, fyller aldrig i formulär och lägger aldrig något i varukorgen.
- Vi sparar svarskoder, robots.txt och det vi läser ut, till exempel om produkterna visar pris och lagerstatus i strukturerad data. Vi sparar inga hela sidor och inga omdömen, eftersom de kan innehålla personuppgifter.
- Uppgifterna om frakt och retur läses ut ur sidornas text med en AI-modell. Texten sparas inte, bara uppgifterna och ett kort citat.
- Resultaten redovisas bara sammanställda. Enskilda butiker pekas inte ut.
- Allt raderas sex månader efter publiceringen.
- Studien hålls isär från vår försäljning. Ingen butiks resultat används när vi kontaktar butiker.
Vill du inte vara med?
Lägg till det här i robots.txt:
User-agent: TodasDatastudie
Disallow: /Du kan också mejla oss på info@todas.se. Då tar vi bort butiken ur studien och raderar det vi har hämtat.
Todas AB, Varberg