wie einzelne foren (threads) per robots.txt ausschließen ?

[yks]

hallo,

per robots.txt kann man doch bots sagen, was sie sich durch'lesen' sollen und nicht (sofern sie sich daran halten).
wie könnte man einzelne foren (und evtl auch einzelne threads) mit dabei rausnehmen ?
zum einen nicht sicher bin wie es vom pfad her auflisten müßte, zum anderen aber auch sehe, daß ich nicht ein forum ausschließen kann, weil im pfad ja nicht die forumkategorie enthalten ist.
hätte da jemand eine idee bzw geht das ?

danke + viele grüße, yks

[larsneo]

per robots.txt kann man doch bots sagen, was sie sich durch'lesen' sollen und nicht (sofern sie sich daran halten).

nein. du kannst sie nur bitten, die gefundenen inhalte nicht zu indexieren ('lesen' tun bots erst einmal alles, was sie finden bzw. auf was verlinkt wird)

wie könnte man einzelne foren (und evtl auch einzelne threads) mit dabei rausnehmen ?

wenn du normale dynamische urls verwendest fast gar nicht.

hätte da jemand eine idee bzw geht das ?

selbst wenn es gehen würde, wäre es die wesentlich bessere idee, inhalte die bots nicht spidern sollen auch unregistrierten besuchern nicht zu zeigen.

[yks]

hi larsneo,

selbst wenn es gehen würde, wäre es die wesentlich bessere idee, inhalte die bots nicht spidern sollen auch unregistrierten besuchern nicht zu zeigen.

naja, die foren, die ich meine, sind auch private/versteckte foren.
das wäre also schon gegeben.

naja, vielleicht gehts ja irgendwann mal.

viele grüße, yks