Suchmaschinenoptimierte URLs, also kurze .html Links der Topics und Foren. Und aufwendigen RewriteRules. Beispiel: Meine Website
Oder:
Eine Site-Map (Archiv) mit Forum-Baum und vereinfachter darstellung der Topics, wobei die URLs auch mit html enden. Beispiel: http://www.computerbase.de/forum/archive/index.php/
Und dazu eine robots.txt in der Art:
Code: Alles auswählen
User-agent: *
Disallow:
Ausserdem:
Was belastet den eigenen Server weniger beim Spidern?
Gibt es ein Mod der ein Archiv erstellt?