Il nostro crawler
Questa pagina spiega chi siamo, cosa fa il nostro crawler, e come chiederci di smettere di visitare il tuo forum. È l'indirizzo annunciato nel nostro User-Agent.
Cosa fa il crawler
- Forum sorvegliati : oltre 6,000
- Fonti ascoltate : oltre 30,000
User-Agent: FindMentionBot/1.0
Come si comporta
- No. Leggiamo i feed RSS e JSON che i forum pubblicano proprio per essere letti dalle macchine, rispettiamo il loro robots.txt, e non apriamo mai due richieste simultanee verso lo stesso sito. Un forum riceve da noi due a sette visite al giorno.
- Non copiamo né pagine né messaggi: solo un titolo, un link alla fonte, e l'inizio del messaggio.
Farsi rimuovere
Scrivi all'indirizzo qui sotto indicando il dominio del tuo forum. Lo rimuoviamo lo stesso giorno, senza discutere e senza chiedere perché. Puoi anche semplicemente vietarci nel tuo robots.txt: lo leggiamo una volta al giorno e lo rispettiamo.