SpringStudioBot

SpringStudioBot er roboten som henter titler og lenker for Spring Studio. Denne siden forklarer hva den gjør, og hvordan du som eier av et nettsted kan be den holde seg unna.

Hvem vi er

Spring Studio er en tjeneste for innholdsproduksjon og publisering. Kundene våre velger selv hvilke nettsider de vil følge, for eksempel nyhetssider, forum eller RSS-feeder, for å fange opp hva som er aktuelt i bransjen sin. Når en kunde har lagt inn adressen til nettstedet ditt, henter SpringStudioBot titler og lenker derfra. Roboten presenterer seg alltid ærlig med navnet SpringStudioBot/1.0 og en lenke til denne siden.

Hva vi henter

Bare tittel, lenke og publiseringstid for sakene på siden eller i feeden. Vi henter aldri forfatter, brukernavn eller innleggstekst, og vi lagrer ikke slikt. Roboten logger ikke inn og leser ikke innhold bak innlogging.

Hvor ofte

Normalt én gang i døgnet per side, og høyst én side per kilde hver gang. Bygges siden med JavaScript og gir ingen saker, leser vi i stedet nettstedets sitemap.xml (og høyst to underliggende nettkart) og henter tittelen fra høyst fem nye sider under samme sti. En tittel vi alt har hentet, hentes ikke på nytt på en uke, og svarer nettstedet at vi går for fort (429), stopper vi. Svarer nettstedet med en feil, prøver vi høyst tre ganger til samme dag. En viderekobling følges som en egen forespørsel. Mot samme nettsted sender vi høyst én forespørsel hvert 10. sekund. Har nettstedet en lengre Crawl-delay i robots.txt, følger vi den, opptil 60 sekunder.

Slik sier nettstedet ditt nei

SpringStudioBot leser robots.txt før den henter noe og henter ikke det som er stengt der. Vil du stenge oss helt ute, legger du dette i robots.txt:

User-agent: SpringStudioBot
Disallow: /

Du kan også stenge enkelte deler med for eksempel Disallow: /forum/privat/, og be oss gå saktere med Crawl-delay: 30. Endringene gjelder neste gang roboten kommer innom, normalt innen et døgn. Kan vi ikke lese robots.txt, fordi nettstedet svarer med en serverfeil eller nekter oss tilgang, henter vi ingenting.

Kontakt

Har du spørsmål, eller opplever du at roboten oppfører seg annerledes enn beskrevet her, send en e-post til post@springstudio.no. Se også personvernerklæringen.