Google Bot Zugriff erlauben?

[Effi5]

Hallo zusammen,

ich habe ein phpBB Forum eingerichtet und eingestellt, dass der Crawler alle Seiten aufrufen darf und der User sich vorher registrieren muss. Nun habe ich gelesen, dass Google das nicht mag, wenn man die Seite für den Google Bot anders aufbereitet. Die Konsequenz kann daraus sein, dass meine Seite aus dem Index fliegt. Das wäre also genau das Gegenteilige, was ich damit erreichen möchte.

Hat jemand Erfahrungen damit? Macht ihr das auch wie bei mir? Die Inhalte sind relativ wertvoll, deswegen möchte ich gern, dass der User sich vorher anmeldet.

LG

[kidrob]

Guten Abend,

ich habe nicht 100% verstanden, was Du genau meinst, aber im Normalfall ist das so:

-> User sollen sich registrieren und posten dürfen (und sehen ohne Registrierung)
-> Goggle-Bots sollen sich NICHT registrieren und NICHT Posten dürfen - dafür aber eben "sehen = speichern bzw. erfassen"

Was Google nicht sieht (sehen darf) wird auch nicht in Suchergebnissen angezeigt

Solltest Du nun ein Forum haben, dass man nicht betreten kann (=nichts sehen ohne Registrierung) ist das natürlich anders... Falls nicht musst Du dir keine Sorgen machen

[hackepeter13]

Was Googel (oder auch andere Suchmaschinen)- Bots sehen und machen darf kannst, liegt allein in deiner Macht, da du das alles über die Rechtevergabe regeln kannst.

Und was genau sollte Google nicht mögen und dich deswegen aus dem Index schmeißen?

Wenn Google kein Registrierungs-Link sehen kann, weil du der Gruppe "Bots" keine Rechte dazu gegeben hast, dann meckert Google auch nicht rum.

Also die Gefahr das dich Google aus dem Index schmeißt, nur weil normale Besucher mehr sehen und machen dürfen, als Bots ist absurd.

[Pyramide]

Also ich verstehe nicht, was an

(...)dass der Crawler alle Seiten aufrufen darf und der User sich vorher registrieren muss.

Schwer zu verstehen ist. Für mich steht da, dass die Rechte für die Bots in allen Foren auf lesen erlaubt gestellt sind sowie für Gäste auf lesen verboten. Da somit der Suchmaschine Inhalte vorgegaukelt werden, die der normale Benutzer nicht sieht, handelt es sich hierbei um eine Variation einer Doorway Page bzw. Cloaking, welches beides bei Suchmaschinen unerwünscht ist und zum Ausschluss aus dem Index führen kann. IMHO zurecht, denn wenn ich in einer Suchmaschine nach etwas Suche, dann will ich beim Anklicken der Suchergebnisse auch relevante Inhalte sehen und mir nicht auf jeder Seite erst einen Account anlegen und womöglich noch auf eine Bestätigungsmail warten müssen.

Die Inhalte sind relativ wertvoll, deswegen möchte ich gern, dass der User sich vorher anmeldet.

Da würde ich sagen: Wenn die Leute es nicht sehen sollen, dann stelle es nicht online. Einen effektiven Schutz z.B. vor dem Kopieren der Inhalte würde ein Registrierungszwang ja nur dann bedeuten, wenn sich die Benutzer zur Registrierung mit Postident o.ä. identifizieren müssten und die Inhalte dann mit einem Wasserzeichen versehen werden.

Wenn sich hingegen bei dir 100 Benutzer mit Namen wie "supercool351" und Wegwerf E-Mailadressen registrieren, dann hast du ja letztlich gar nichts davon gehabt - außer dem Gefühl zu wissen, dass du 5 Benutzer beim Betrachten deiner Webseite verlangsamt hast, 95 neue Spamaccounts hast und 300 potentielle Besucher für immer vergrault hast, weil sie einfach im Browser auf zurück geklickt und den nächsten Eintrag in der Ergebnisliste der Suchmaschine angeklickt haben.

[Unimatrix_0]

Nun habe ich gelesen, dass Google das nicht mag, wenn man die Seite für den Google Bot anders aufbereitet. Die Konsequenz kann daraus sein, dass meine Seite aus dem Index fliegt. Das wäre also genau das Gegenteilige, was ich damit erreichen möchte.

Soweit mir bekannt, betrifft dies nur Switches welche Google und anderen SuMa-Bots Inhalte "vorgauckeln", also mehr/andere Stichwörter, komplett andere Texte, ... und im vergleich dazu bekommt der Benutzer dann eine extrem abgespeckte, mit Werbung zugespammte, bei jedem Klick fremdverlinkte, ... Seite o.ä. - Sprich wenn man aus "niederen" SEO-Gründen die Bots täuscht.
Geringe Unterschiede für normale Benutzer und Bots sollten zu keiner Verbannung aus dem Google-Index führen.

[Pyramide]

Soweit mir bekannt, betrifft dies nur Switches welche Google und anderen SuMa-Bots Inhalte "vorgauckeln", also mehr/andere Stichwörter, komplett andere Texte, ... und im vergleich dazu bekommt der Benutzer dann eine extrem abgespeckte, mit Werbung zugespammte, bei jedem Klick fremdverlinkte, ... Seite o.ä. - Sprich wenn man aus "niederen" SEO-Gründen die Bots täuscht.
Geringe Unterschiede für normale Benutzer und Bots sollten zu keiner Verbannung aus dem Google-Index führen.

Also wenn der Besucher anstatt des Ergebnisses, welches ihm die Suchmaschine verspricht, nur eine "Sie müssen sich registrieren und einloggen, um dieses Forum zu lesen" angezeigt bekommt, dann ist das für mich kein "geringer Unterschied", sondern schon ein vorgaukeln von Inhalten.

[Talk19zehn]

Hello, aus meiner Sicht hast du mit einer entsprechenden Rechteverteilung alle Möglichkeiten:
Quasi, sowohl als auch!

Ein Forumbereich "Wir stellen und vor" könnte Abhilfe schaffen?

Also wenn der Besucher anstatt des Ergebnisses, welches ihm die Suchmaschine verspricht, nur eine "Sie müssen sich registrieren und einloggen, um dieses Forum zu lesen" angezeigt bekommt, dann ist das für mich kein "geringer Unterschied", sondern schon ein vorgaukeln von Inhalten.

Und das ist m.E. unbedingt zutreffend.

LG

[ichnoob]

Also die Gefahr das dich Google aus dem Index schmeißt, nur weil normale Besucher mehr sehen und machen dürfen, als Bots ist absurd.

Nein ist es nicht! Google mag es garnicht wenn der Bot was anderes sieht wie normale Benutzer. Bei einem Registrierungslink oder sonstigen kleinen Dingen fliegt man vielleicht nicht gleich aus dem Index aber ein gewisses Risiko besteht dabei immer. Wenn der Komplette Inhalt für den Benutzer fehlt fliegt man sicher früher oder Später aus Google.
Bringen tut es auch nicht viel da man entweder den Googlecache benutzen oder den Useragent auf Googlebot ändern kann um die Inhalte zu sehen.

[sepp71]

Bringen tut es auch nicht viel da man entweder den Googlecache benutzen oder den Useragent auf Googlebot ändern kann um die Inhalte zu sehen.

Das halte ich auch für den entscheidenden Punkt: Wenn im Google-Cache mehr steht als auf der Seite, die Du mir zeigst, dann lese ich eben im Googlecache weiter (wenn der Inhalt wirklich so wertvoll ist).
Falls mir das zu umständlich ist, schalte ich den User-Agent mit dem FF-Addon auf Googlebot um und sehe mir die Seite an. Mich zwingt jedenfalls niemand zu einer Registrierung.

Gruß
Sepp

[BNa]

Geringe Unterschiede für normale Benutzer und Bots sollten zu keiner Verbannung aus dem Google-Index führen.

Richtig. Gibt ja kein Indizierungszwang. Unsere Boards sind noch nicht aus dem Index geflogen und wir lassen indizieren, wie es uns gerade passt.