wie schaut eure robots.txt aus?

[austrian-i]

ich habe ein sehr schönes hier gefunden:

http://www.webmasterworld.com/robots.txt

[Dennis63]

Na toll. Wer die Robots.txt nutzt, ist selber schuld, wenn nie wieder jemand deine Seite besucht. Du unterbindest mit der rotots.txt ja alles, was es gibt...

Grüße
Dennis

[austrian-i]

nein, das sind alles nur spammer und traffic-verschwender (bis auf jeeves und teoma, die suchmaschinen sind - aber wer verwendet schon askjeeves). webmasterworld ist top in solchen sachen, mehrer angestellte von grossen suchmaschinen posten dort.

[roum]

Und nebenbei sperrt diese robots.txt noch alle Leute mit Mozilla aus, wenn ich das richtig verstehe

[austrian-i]

wäre das falsch:

Code: Alles auswählen

Code: 
User-agent: * 
Disallow: /forum/posting.php?mode=newtopic&f=2 
Disallow: /forum/profile.php?mode=register 

?

[Dennis63]

Das wäre in der Tat falsch ja!

Damit sperrst Du die Registrierung und das Posten im Forum mit der ID2....
Beides macht wohl wenig sinn.

Grüße
Dennis

[austrian-i]

ja eh, google & co sollen sich ja nicht registrieren oder posten

oder?

[Leuchte]

Tun sie so oder so nicht...

[austrian-i]

ach so