Hoher Traffic durch googlebot

[ibsibs]

Ich habe das Problem, dass googlebot mehrmals am Tag eines meiner Foren durchsucht und dadurch zu viel Traffic verursacht.
Wie kann ich das verhindern ?
Kann ich auch einstellen, dass nur noch alle paar Tage durchsucht wird ?
Notfalls würde ich die Suche ganz unterbinden, da ich auf die Indizierung dieses Forums durch Google keinen Wert lege.

[larsneo]

google kontaktieren: http://www.google.de/support/bin/reques ... ster&hl=en
(die nehmen entsprechende reports - zumal wenn sie mit logs unterlegt sind - durchaus sehr ernst und reagieren recht schnell)

[ibsibs]

Das klingt schon mal ganz interessant.
Doch muß ich mich da wirklich an Google wenden.
Reichen da nicht Eintragungen in der robots.txt.
Wenn ja, welche ?

[larsneo]

einträge in der robots.txt helfen nicht wirklich - diese datei dient in erster linie nur als indikator, welche inhalte *nicht* in den index aufgenommen werden sollen - gespidert werden die seiten in aller regel aber trotzdem.