seit ein paar Tagen sehe ich immer wieder einen Bot namens Semrush [Bot] auf der Startseite meines Forums unter Mitglieder, siehe Bildschirmfoto hier: https://postimg.cc/1Vh7w69r
Ich dachte, Bots würden sich höchstens als Gast zeigen? Man kann das Forum nur als angemeldeter Benutzer sehen. Mich wundert aber, daß der Bot sich unter Mitglieder zeigt. Habe jetzt mal eine robots.txt mit folgendem Inhalt auf dem phpbb-Rootverzeichnis erstellt:
Code: Alles auswählen
User-agent: *
Disallow: /
Grüße
poenn