PoliasBot
Du hast PoliasBot in den Protokollen deiner Website gesehen? Hier steht, wer das ist und wie du ihn aussperrst, falls du das möchtest.
Was ist PoliasBot?
PoliasBot sammelt öffentliche Webseiten für den Suchindex von Polias, einer europäischen Suchmaschine. Er liest Seiten so, wie sie jeder Besucher sieht, damit sie bei uns gefunden werden können.
Woran du ihn erkennst
Der User-Agent enthält PoliasBot, zum Beispiel:
PoliasBot/0.1 (+https://polias.eu/bot; hallo@polias.eu)
PoliasBot sammelt vom Server 162.55.103.77 (Liste zum Abgleich: polias.eu/bot/ips.json). Anfragen mit unserem Namen von anderen Adressen können auch von gelegentlich gemieteten Zusatzservern stammen; im Zweifel schreib uns an hallo@polias.eu.
Wie er sich verhält
- Er beachtet die
robots.txt(Regeln fürPoliasBot, sonst für*). - Er holt je Website nur wenige Seiten und macht dazwischen Pausen.
- Er schickt keine Formulare ab und meldet sich nirgends an.
So sperrst du ihn aus
Trag in die robots.txt deiner Website ein:
User-agent: PoliasBot Disallow: /
Oder schreib uns an hallo@polias.eu, dann nehmen wir deine Website ganz aus dem Index. Bei Fragen oder Problemen mit unserem Sammler gilt dieselbe Adresse; wir antworten gern direkt.
Und Polias-KI?
Neben dem Sammler gibt es Polias-KI. Sie öffnet einzelne Seiten nur dann, wenn jemand im
Polias-Chat eine Frage stellt, zu der die Seite passt, und speichert sie nicht im Index. Sie beachtet
die robots.txt mit den Regeln für Polias-KI, sonst für PoliasBot, sonst
für *.
In English
PoliasBot collects public web pages for the search index of Polias, a search engine from Germany.
Its user agent contains PoliasBot. It crawls from 162.55.103.77 (list for
verification: polias.eu/bot/ips.json); requests with our name from other
addresses may come from occasionally rented extra servers. If in doubt, write to
hallo@polias.eu. It respects robots.txt (rules for PoliasBot, otherwise
*), fetches only a few pages per site with pauses, and never submits forms or logs in.
To block it, add User-agent: PoliasBot / Disallow: / to your
robots.txt, or email hallo@polias.eu and we
will remove your site completely. Polias-KI only opens single pages when a user asks a question in
the Polias chat; it follows the robots.txt rules for Polias-KI, then
PoliasBot, then *.