Onze crawler
Deze pagina legt uit wie wij zijn, wat onze crawler doet, en hoe je ons kunt vragen je forum niet meer te bezoeken. Het is het adres dat in onze User-Agent staat.
Wat de crawler doet
- Gevolgde forums : meer dan 7,000
- Beluisterde bronnen : meer dan 35,000
User-Agent: FindMentionBot/1.0
Hoe hij zich gedraagt
- Nee. Wij lezen de RSS- en JSON-feeds die forums publiceren om door machines gelezen te worden, wij respecteren hun robots.txt, en wij openen nooit twee gelijktijdige verzoeken naar dezelfde site. Een forum ziet twee tot zeven bezoeken per dag van ons.
- Wij kopiëren pagina's noch berichten: alleen een titel, een link terug naar de bron, en het begin van het bericht.
Verwijderd worden
Schrijf naar het adres hieronder met het domein van je forum. Wij halen het dezelfde dag weg, zonder discussie en zonder te vragen waarom. Je kunt ons ook simpelweg weren in je robots.txt: wij lezen die eens per dag en wij respecteren hem.