Per i proprietari di siti

UnwornBot, il lettore di Unworn

UnwornBot è il crawler che Unworn utilizza per leggere le pagine prodotto e i cataloghi che i venditori indicano come propri. Legge una pagina alla volta, al massimo una richiesta al secondo per sito, e mai più di quanto richiesto da un venditore.

Cosa legge

Una pagina prodotto che un venditore ha incollato in Unworn, oppure il catalogo di un negozio online che il venditore ha dichiarato come proprio. Legge i dati pubblici del prodotto presenti sulla pagina: titolo, prezzo, taglie, composizione, immagini. Non legge pagine dei clienti, pagine di pagamento né contenuti protetti da login, e conserva una pagina per un massimo di trenta giorni.

Da dove proviene

Lo user agent è UnwornBot/1.0 (+https://unworn.io/bot). Le richieste provengono da questi indirizzi:

Gli indirizzi saranno pubblicati qui non appena i server ne avranno di fissi.

Per chiederci di interromperlo

Scriva a [email protected] indicando il suo dominio. Impostiamo il suo sito in modo che venga rispettato il relativo robots.txt entro lo stesso giorno lavorativo e registriamo chi ne ha fatto richiesta; da quel momento una regola disallow blocca ogni lettura.

[email protected]