Unser Crawler
Diese Seite erklärt, wer wir sind, was unser Crawler tut und wie Sie uns bitten, Ihr Forum nicht mehr zu besuchen. Es ist die Adresse, die unser User-Agent nennt.
Was der Crawler tut
- Beobachtete Foren : über 4,000
- Abgehörte Quellen : über 24,000
User-Agent: FindMentionBot/1.0
Wie er sich verhält
- Nein. Wir lesen die RSS- und JSON-Feeds, die Foren für Maschinen veröffentlichen, wir beachten ihre robots.txt, und wir öffnen nie zwei gleichzeitige Anfragen an dieselbe Seite. Ein Forum sieht zwei bis sieben Besuche pro Tag von uns.
- Wir kopieren weder Seiten noch Beiträge: nur einen Titel, einen Link zurück zur Quelle und den Anfang der Nachricht.
Entfernt werden
Schreiben Sie an die untenstehende Adresse mit der Domain Ihres Forums. Wir entfernen es am selben Tag, ohne Diskussion und ohne nach dem Grund zu fragen. Sie können uns auch einfach in Ihrer robots.txt ausschließen: wir lesen sie einmal täglich und halten uns daran.