Seite 1 von 1
Bot Einstellung
Verfasst: 05.11.2014 11:32
von sina54
Wo finde ich im Forum oder den Forumsdateien eine Möglichkeit Gogglebot mitzuteilen das ich gefunden werden will aber nicht im cache auf google gespeichert werden will. Wo kann ich das hinschreiben.
Konnte man vorher ja bei magic portal in header und im forum auch im overall_header reinschreiben!
Wäre dankbar für eine Antwort!
Re: Bot Einstellung
Verfasst: 05.11.2014 21:06
von HabNurNeFrage
Hi,
das würde bei 3.1 immer noch genauso funktionieren.
D kannst aber auch einfach eine robots-txt auf Deinen Server laden.
Dadurch entfällt das Ändern der HTML-Datei.
Code: Alles auswählen
User-agent: *
Noarchive: /
User-agent: ia_archiver
Disallow: /
Den Code einfach in eine Datei mit dem Namen
robots.txt speichern und in den WebRoot laden.
Erreichbar muss die dann unter deine_domain.tld/robots.txt sein.
Bei Dir konkret wäre das
http://*url-entfernt-by-nickvergessen*.de/robots.txt
Das Ganze funktioniert nur im WebRoot mit exakt diesem Dateinamen.
Nun werden Google, Bing und Yahoo weiterhin indizieren, aber keine Caches mehr vorhalten (Zeilen 1und 2)
und die Seite wird nicht mehr von Alexa in der WayBackMachine gespeichert (Zeilen 3 und 4)
LG
Re: Bot Einstellung
Verfasst: 05.11.2014 21:25
von sina54
ich habe es auf den Server geladen
Root bedeutet, da wo die Dateien für das forum drin sind, ich kann da jetzt robot.txt lesen und was du mir geschrieben hast!
Vielen lieben Dank
lg Sina
Edit:
Hallo
Wo kann ich die Datenschutzrichtlinien reinschreiben für das forum?
lg Sina
Re: Bot Einstellung
Verfasst: 05.11.2014 22:30
von HabNurNeFrage
Hi,
irgendwas haut da noch nicht hin mit der robots.txt.
Wenn ich http://*url-entfernt-by-nickvergessen*.de/robots.txt aufrufe, kommt die Symphony-Fehlermeldung
No route found for "GET /robots.txt"
Wahrscheinlich liegt das am aktiven URL-Rewriting im phpBB (ACP - Server und Domain - Umschreiben von URLs)
Deaktiviere das mal kurz und teste dann, ob beim Aufruf der Text aus der robots.txt-Datei auf einer weißen Seite angezeigt wird.
Wenn das dann klappt, bearbeite die .htaccess von *url-entfernt-by-nickvergessen*.de/ (WebRoot) - finde darin:
RewriteEngine on
Füge danach in neuer, leerer Zeile ein:
RewriteRule ^robots.txt - [L]
Danach kannst Du das URL-Umschreiben im phpBB wieder aktivieren und es sollte nun die robots.txt von der Umschreibung ausgeschlossen werden.
LG
PS: Für die andere Frage eröffne doch bitte nochmal ein neues Thema.
Ich schätze, das wird einige andere auch interessieren und ist dann besser zu finden. Danke

Re: Bot Einstellung
Verfasst: 06.11.2014 19:34
von sina54
bei 'Server und Last
(Umschreibung von Url aktivieren) steht auf nein!
Muss ich da was machen ? Habe die Einstellungen so übernommen wie ich installiert habe
Re: Bot Einstellung
Verfasst: 07.11.2014 18:33
von sina54
Hallo Ich möchte unbedingt das Problem lösen. Es darf nichts im Googlecache verbleiben
Bitte sagt mir wo ich die Datei noch reinmachen kann
Re: Bot Einstellung
Verfasst: 07.11.2014 19:31
von Dr.Death
HabNurNeFrage hat geschrieben: bearbeite die.htaccess
von *url-entfernt-by-nickvergessen*.de/ (WebRoot) - finde darin:
RewriteEngine on
Füge danach in neuer, leerer Zeile ein:
RewriteRule ^robots.txt - [L]
Du musst also die .htaccess im Forums Root bearbeiten..... manche Betriebssysteme oder Programme blenden "unsichtbare Dateien" aus..... die solltest Du ggf. sichtbar machen.... wenn du auf Anhieb die
.htaccess
nicht findest.
Die Anleitung funktioniert einwandfrei und phpBB 3.1.x
Re: Bot Einstellung
Verfasst: 08.11.2014 23:18
von sina54
Hallo
Danke sehr

ich habs reingeschrieben wie beschrieben, kann man das prüfen obs klappt?
lg
Re: Bot Einstellung
Verfasst: 09.11.2014 19:14
von HabNurNeFrage
Hi.
Ja, kann man wie zuvor bereits erwähnt.
Beim Browser-Aufruf von
deine_domain.de/robots.txt muss diese Datei direkt angezeigt werden,
sprich eine weiße Seite mit dem Text, der drin steht...
So wie beispielsweise die von hier:
https://www.phpbb.de/robots.txt
LG