Opret vagt

Om AUDK's crawler

AUDK-bot henter lots fra auktionshuse, så vi kan vise dem, deres pris alt i alt og deres slutpris. Her står, hvordan den opfører sig.

Hvem er det?

Brugeragenten er altid:

AUDK-bot/0.1 (+https://auktionerdanmark.dk/om/bot; [email protected])

Vi skjuler os ikke og udgiver os ikke for en browser eller en anden crawler.

Reglerne vi følger

  • Vi henter kun offentlige sider og officielle API'er. Vi logger ikke ind og løser ikke CAPTCHA'er.
  • Vi læser og følger robots.txt, både for AUDK-bot og for *.
  • Vi holder en pause mellem to forespørgsler til samme vært (normalt mindst 1,5 sekund) og følger 429- og Retry-After-svar.
  • Møder vi en 403 eller en «er du et menneske?»-side, stopper vi hentningen fra den kilde. Vi forsøger ikke at komme udenom.
  • Vi har en daglig grænse pr. kilde og en afbryder, der stopper hentningen fra en kilde med det samme.

Hvad vi gemmer

Fakta: titel, pris, bud, lukketid, by og tekniske data. Vi gemmer ikke jeres beskrivelsestekst, billeder eller billedadresser, sælgernavne eller adresser, og vi viser hverken jeres billeder eller jeres beskrivelser: hvert lot har et tydeligt link til jeres egen lotside, hvor man ser dem og byder. Se Vores kilder og fravalg.

Vil du have os til at stoppe, eller har du et spørgsmål?

Skriv til [email protected], så stopper vi hentningen fra jeres hus inden for 24 timer. Vi retter også oplysningerne eller svarer på spørgsmål. Du kan også blokere os i din egen robots.txt med User-agent: AUDK-bot.