[3.2] Gewisse Forumsbereiche für Suchmaschinen ausschließen

[mystica99]

Hallo liebe Community,

ich habe die Tage den Zugriff auf das Forum für bestimmte Suchmaschinen freigegeben (über die Rechtvergabe für Bots). Schon wenige Stunden später wurde das Forum in Google gelistet. Von daher alles perfekt. Nun ist es jedoch so, dass gewisse Forumsbereiche bei Google gelistet werden, die ich nicht im Suchmaschinenindex stehen haben möchte. So beispielsweise das Impressum (aboutus). Zudem sind auch Links wie https://domain.tld/ucp.php?mode=register oder https://domain.tld/app.php/help/faq zu finden. Wie kann ich solche Seiten für die Suchmaschinen ausklammern? Geht das über die robots.txt und was genau muss ich hier eintragen? Zuletzt gibt es auch noch einen einzelnen Beitrag den ich gerne ausgeklammert hätte (https://domain.tld/viewtopic.php?t=xx). Lassen sich denn auch einzelne Beiträge für Suchmaschinen ausschließen?

Anmerkung: Ich habe eine Extension zum Erstellen einer Sitemap installiert und diese bereits in den Webmastertools eingetragen. Soweit diese Info für das o.g. Problem hilfreich sein sollte.

Es wäre supi wenn man mir weiterhelfen könnte.

Sven

[Wolkenbruch]

Zur robots.txt lese bitte --> hier

Bei der Extension zum Erstellen einer Sitemap kannst du normalerweise einstellen welche Foren erfasst werden sollen und welche nicht.

[mystica99]

Danke dir!

Die robots.txt habe ich nun entsprechend erweitert. Eine Option die Sitemap zu ändern/anzupassen konnte ich in der Forumsadministration nicht finden. Ich nutze die XML Sitemap von tas2580.

Vielen Dank nochmal!