Für Website-Betreiber

UnwornBot, der Reader von Unworn

UnwornBot ist der Crawler, mit dem Unworn Produktseiten und Kataloge liest, die Verkäufer als ihre eigenen Produkte angeben. Er liest eine Seite nach der anderen, höchstens eine Anfrage pro Sekunde und Website, und nie mehr, als ein Verkäufer angefragt hat.

Was er liest

Eine Produktseite, die ein Verkäufer in Unworn eingefügt hat, oder den Katalog eines Webshops, den der Verkäufer als seinen eigenen angegeben hat. Er liest die öffentlichen Produktdaten der Seite: Titel, Preis, Größen, Zusammensetzung, Bilder. Er liest keine Kundenseiten, keine Kassen und nichts hinter einem Login, und er bewahrt eine Seite höchstens dreißig Tage auf.

Woher er kommt

Der User Agent ist UnwornBot/1.0 (+https://unworn.io/bot). Anfragen kommen von diesen Adressen:

Die Adressen werden hier veröffentlicht, sobald die Server feste Adressen haben.

Uns bitten aufzuhören

Schreiben Sie an [email protected] mit Ihrer Domain. Wir stellen Ihre Website noch am selben Werktag darauf ein, ihre robots.txt zu respektieren, und notieren, wer darum gebeten hat; ein Disallow blockiert danach jedes Lesen.

[email protected]