robots.txt richtig eingestellt?

[wwwreichwerdenme]

Code: Alles auswählen

User-agent: Mediapartners-Google
Disallow: 

User-agent: *
Disallow: /search
Allow: /

Sitemap: http://www.reichwerden.me/feeds/posts/default?orderby=updated

So sieht das jetzt aus.

Ich persönlich habe es nicht eingefügt, sondern das war bereits drinnen. Evtl durch die Installation des social networks?

Kann ich das sorglos löschen oder soll ich es lassen?

[hackepeter13]

Evtl durch die Installation des social networks?

Diese Frage kannst du dir selber beantworten, indem du einfach mal guckst, ob im Mod-Packet eine robot.txt enthalten ist (die du dann evtl. mit hochgeladen hast).

Andererseits sehe ich da jetzt keinen Anhaltspunkt was da mit dem Social Network Mod zu tun haben sollte (zumal sich dann auch die Frage stellt was für ein social network Mod gemeint ist?!).

Zur robot.txt:
Hast du dich schon einmal per Google informiert, was eine robot.txt ist?
Mach das und du wirst feststellen das du diese Datei oder sämtliche Inhalte in dieser löschen kannst.

Du kannst auch einfach wieder die robot.txt aus dem standard-phpBB3-Packet hochladen und deine jetztige damit überschreiben.

[Talk19zehn]

Hi wwwreichwerdenme, --- hm, - was ist denn der inhaltliche Sinn deiner Seite, so dass der Eintrag erfolgt ist. Allein kommt er dort nicht hin.

http://support.google.com/webmasters/bi ... er=1061943
http://support.google.com/webmasters/bi ... wer=156449
http://www.edv-beratung-thomas.de/index ... schen.html
http://www.abakus-internet-marketing.de ... ts-txt.htm

und

viewtopic.php?p=1229458#p1229458

Mich wundert ansich auch, dass deine Profile im Vorfeld gar nicht geschützt sind. Als Gast habe ich Zugriff darauf. Es scheint an einer korrekten If-Bedingung zu mangeln. Oder ist´s tatsächlich gewollt, dass der Gast Zugriff hat? Vor allem, wer hat obendrein ebenso Zugriff auf das Profil?

Gruß


.

@hackpeter13, wo gibt´s im Originalpaket eine robots.txt? Ich habe nix gefunden....

[hackepeter13]

@hackpeter13, wo gibt´s im Originalpaket eine robots.txt? Ich habe nix gefunden....

Stimmt gibt keine, war da wohl mit den Gedanken auch bei der .htaccess ^^
Aber ich weiß das es hier mal ein Thema mit empfohlenen robots.txt-Inhalt für das standard-phpBB3 gab, in der Ordner & Dateien wie z.B. adm, cache, styles, common.php, confic.php, cron.php usw. für Bots zum spidern ausgeschloßen werden.

[Charlie_M]

Von Dr. Unlebendig gibts ein gutes Beispiel hier: viewtopic.php?p=1229458#p1229458

[Talk19zehn]

[ot]Jepp, und keiner hat´s nach dem "und" gesehen.... [/ot]
BTW:
Man möge bitte eigene Verzeichnisstrukturen beachten: Hauptverzeichnis / Rootverzeichnis phpBB3 /........ usw..


@hackepeter13
OK, - sowas kommt schon mal vor.