GlowsiestaBot

Kennung: GlowsiestaBot/1.0 (+https://glowsiesta.com/bot; bot@glowsiesta.com)

Was er tut

Der GlowsiestaBot liest öffentliche Seiten von Massage-, Kosmetik- und Friseur-Studios, um daraus einen Entwurf für eine neue Webseite zu bauen — dieselben Seiten, die auch eine Suchmaschine liest. Er füllt keine Formulare aus, meldet sich nirgends an, folgt keinen Links nach außen und ruft keine Videos ab.

Wie selten er kommt

Er stellt höchstens eine Anfrage je Sekunde an denselben Server (1000 ms Abstand) und holt eine Seite höchstens einmal in 24 Stunden — danach arbeitet er mit dem, was er schon hat. Antwortet ein Server mit „zu viele Anfragen" (HTTP 429 oder 503), zieht er sich zurück und hört nach dem dritten Mal ganz auf.

Er achtet robots.txt

Verbote aus Ihrer robots.txt gelten für ihn, und ein Crawl-delay hält er ein. Ist die Wurzel gesperrt, liest er die Seite gar nicht.

Wie Sie ihn ausschließen

Tragen Sie das in Ihre robots.txt ein:

User-agent: GlowsiestaBot
Disallow: /

Oder schreiben Sie uns eine Zeile an bot@glowsiesta.com — wir tragen Ihre Adresse dann bei uns aus. Beides wirkt sofort und ohne Rückfrage; wir fragen nicht nach einem Grund.