Seite 1 von 1
robots.txt richtig eingestellt?
Verfasst: 08.05.2012 05:36
von wwwreichwerdenme
Code: Alles auswählen
User-agent: Mediapartners-Google
Disallow:
User-agent: *
Disallow: /search
Allow: /
Sitemap: http://www.reichwerden.me/feeds/posts/default?orderby=updated
So sieht das jetzt aus.
Ich persönlich habe es nicht eingefügt, sondern das war bereits drinnen. Evtl durch die Installation des social networks?
Kann ich das sorglos löschen oder soll ich es lassen?
Re: robots.txt richtig eingestellt?
Verfasst: 08.05.2012 10:54
von hackepeter13
wwwreichwerdenme hat geschrieben:Evtl durch die Installation des social networks?
Diese Frage kannst du dir selber beantworten, indem du einfach mal guckst, ob im Mod-Packet eine robot.txt enthalten ist (die du dann evtl. mit hochgeladen hast).
Andererseits sehe ich da jetzt keinen Anhaltspunkt was da mit dem Social Network Mod zu tun haben sollte (zumal sich dann auch die Frage stellt was für ein social network Mod gemeint ist?!).
Zur robot.txt:
Hast du dich schon einmal per Google informiert, was eine
robot.txt ist?
Mach das und du wirst feststellen das du diese Datei oder sämtliche Inhalte in dieser löschen kannst.
Du kannst auch einfach wieder die robot.txt aus dem standard-phpBB3-Packet hochladen und deine jetztige damit überschreiben.

Re: robots.txt richtig eingestellt?
Verfasst: 08.05.2012 17:40
von Talk19zehn
Hi wwwreichwerdenme, --- hm, - was ist denn der inhaltliche Sinn deiner Seite, so dass der Eintrag erfolgt ist. Allein kommt er dort nicht hin.
http://support.google.com/webmasters/bi ... er=1061943
http://support.google.com/webmasters/bi ... wer=156449
http://www.edv-beratung-thomas.de/index ... schen.html
http://www.abakus-internet-marketing.de ... ts-txt.htm
und
viewtopic.php?p=1229458#p1229458
Mich wundert ansich auch, dass deine Profile im Vorfeld gar nicht geschützt sind. Als Gast habe ich Zugriff darauf. Es scheint an einer korrekten If-Bedingung zu mangeln. Oder ist´s tatsächlich gewollt, dass der Gast Zugriff hat? Vor allem, wer hat obendrein ebenso Zugriff auf das Profil?
Gruß
.
@hackpeter13, wo gibt´s im Originalpaket eine robots.txt? Ich habe nix gefunden....

Re: robots.txt richtig eingestellt?
Verfasst: 08.05.2012 21:55
von hackepeter13
Talk19zehn hat geschrieben:@hackpeter13, wo gibt´s im Originalpaket eine robots.txt? Ich habe nix gefunden....


Stimmt gibt keine, war da wohl mit den Gedanken auch bei der .htaccess ^^
Aber ich weiß das es hier mal ein Thema mit empfohlenen robots.txt-Inhalt für das standard-phpBB3 gab, in der Ordner & Dateien wie z.B. adm, cache, styles, common.php, confic.php, cron.php usw. für Bots zum spidern ausgeschloßen werden.

Re: robots.txt richtig eingestellt?
Verfasst: 08.05.2012 22:27
von Charlie_M
Von Dr. Unlebendig

gibts ein gutes Beispiel hier:
viewtopic.php?p=1229458#p1229458
Re: robots.txt richtig eingestellt?
Verfasst: 08.05.2012 22:49
von Talk19zehn
[ot]Jepp, und keiner hat´s nach dem "und" gesehen.... [/ot]
BTW:
Man möge bitte eigene Verzeichnisstrukturen beachten: Hauptverzeichnis / Rootverzeichnis phpBB3 /........ usw..
@hackepeter13
OK, - sowas kommt schon mal vor.
