Bot Einstellung

[sina54]

Wo finde ich im Forum oder den Forumsdateien eine Möglichkeit Gogglebot mitzuteilen das ich gefunden werden will aber nicht im cache auf google gespeichert werden will. Wo kann ich das hinschreiben.
Konnte man vorher ja bei magic portal in header und im forum auch im overall_header reinschreiben!

Wäre dankbar für eine Antwort!

[HabNurNeFrage]

Hi,

das würde bei 3.1 immer noch genauso funktionieren.

D kannst aber auch einfach eine robots-txt auf Deinen Server laden.
Dadurch entfällt das Ändern der HTML-Datei.

Code: Alles auswählen

User-agent: *
Noarchive: /
User-agent: ia_archiver
Disallow: /

Den Code einfach in eine Datei mit dem Namen robots.txt speichern und in den WebRoot laden.
Erreichbar muss die dann unter deine_domain.tld/robots.txt sein.
Bei Dir konkret wäre das http://*url-entfernt-by-nickvergessen*.de/robots.txt
Das Ganze funktioniert nur im WebRoot mit exakt diesem Dateinamen.

Nun werden Google, Bing und Yahoo weiterhin indizieren, aber keine Caches mehr vorhalten (Zeilen 1und 2)
und die Seite wird nicht mehr von Alexa in der WayBackMachine gespeichert (Zeilen 3 und 4)

LG

[sina54]

ich habe es auf den Server geladen

Root bedeutet, da wo die Dateien für das forum drin sind, ich kann da jetzt robot.txt lesen und was du mir geschrieben hast!
Vielen lieben Dank
lg Sina

Edit:
Hallo
Wo kann ich die Datenschutzrichtlinien reinschreiben für das forum?

lg Sina

[HabNurNeFrage]

Hi,

irgendwas haut da noch nicht hin mit der robots.txt.
Wenn ich http://*url-entfernt-by-nickvergessen*.de/robots.txt aufrufe, kommt die Symphony-Fehlermeldung No route found for "GET /robots.txt"
Wahrscheinlich liegt das am aktiven URL-Rewriting im phpBB (ACP - Server und Domain - Umschreiben von URLs)
Deaktiviere das mal kurz und teste dann, ob beim Aufruf der Text aus der robots.txt-Datei auf einer weißen Seite angezeigt wird.

Wenn das dann klappt, bearbeite die .htaccess von *url-entfernt-by-nickvergessen*.de/ (WebRoot) - finde darin:
RewriteEngine on

Füge danach in neuer, leerer Zeile ein:
RewriteRule ^robots.txt - [L]

Danach kannst Du das URL-Umschreiben im phpBB wieder aktivieren und es sollte nun die robots.txt von der Umschreibung ausgeschlossen werden.

LG

PS: Für die andere Frage eröffne doch bitte nochmal ein neues Thema.
Ich schätze, das wird einige andere auch interessieren und ist dann besser zu finden. Danke

[sina54]

bei 'Server und Last
(Umschreibung von Url aktivieren) steht auf nein!

Muss ich da was machen ? Habe die Einstellungen so übernommen wie ich installiert habe

[sina54]

Hallo Ich möchte unbedingt das Problem lösen. Es darf nichts im Googlecache verbleiben

Bitte sagt mir wo ich die Datei noch reinmachen kann

[Dr.Death]

bearbeite die.htaccessvon *url-entfernt-by-nickvergessen*.de/ (WebRoot) - finde darin:
RewriteEngine on

Füge danach in neuer, leerer Zeile ein:
RewriteRule ^robots.txt - [L]

Du musst also die .htaccess im Forums Root bearbeiten..... manche Betriebssysteme oder Programme blenden "unsichtbare Dateien" aus..... die solltest Du ggf. sichtbar machen.... wenn du auf Anhieb die .htaccess nicht findest.

Die Anleitung funktioniert einwandfrei und phpBB 3.1.x

[sina54]

Hallo
Danke sehr
ich habs reingeschrieben wie beschrieben, kann man das prüfen obs klappt?

lg

[HabNurNeFrage]

Hi.

Ja, kann man wie zuvor bereits erwähnt.

Beim Browser-Aufruf von deine_domain.de/robots.txt muss diese Datei direkt angezeigt werden,
sprich eine weiße Seite mit dem Text, der drin steht...

So wie beispielsweise die von hier: https://www.phpbb.de/robots.txt

LG