Google-Bot ist als registrierter Benutzer unterwegs!

[Lemon]

Hallo zusammen,

wir haben offensichtlich ein kleines Problem mit dem Google-Bot. Und zwar ist uns in den letzten Tagen vermehrt aufgefallen, dass ein User fast ununterbrochen online ist. Ein Klick auf "Wer ist online?" zeigte dann beim betreffenden User folgendes

IP: 66.249.65.42 » Whois
Mozilla/5.0 (compatible; Googlebot/2.1; +http://www.google.com/bot.html)

die weiterführende WHOIS-Anfrage dann dies hier:

NetRange: 66.249.64.0 - 66.249.95.255
CIDR: 66.249.64.0/19
OriginAS:
NetName: GOOGLE
NetHandle: NET-66-249-64-0-1
Parent: NET-66-0-0-0-0
NetType: Direct Allocation
RegDate: 2004-03-05
Updated: 2012-02-24
Ref: http://whois.arin.net/rest/net/NET-66-249-64-0-1


OrgName: Google Inc.
OrgId: GOGL
Address: 1600 Amphitheatre Parkway
City: Mountain View
StateProv: CA
PostalCode: 94043
Country: US
RegDate: 2000-03-30
Updated: 2011-09-24
Ref: http://whois.arin.net/rest/org/GOGL

OrgTechHandle: ZG39-ARIN
OrgTechName: Google Inc
OrgTechPhone: +1-650-253-0000
OrgTechEmail: arin-contact@google.com
OrgTechRef: http://whois.arin.net/rest/poc/ZG39-ARIN

OrgAbuseHandle: ZG39-ARIN
OrgAbuseName: Google Inc
OrgAbusePhone: +1-650-253-0000
OrgAbuseEmail: arin-contact@google.com
OrgAbuseRef: http://whois.arin.net/rest/poc/ZG39-ARIN

Wie kann das sein, dass sich der Google-Bot einen Benutzer-Account "schnappt" und damit durchs Forum geistert?
Ich lösche jetzt schon die ganze Zeit die entsprechende Zeile in der phpbb_sessions-Tabelle in der Datenbank. Das hilft aber immer nur kurzfristig, dann ist der "Bot-User" wieder da. Auch das erzwingen einer erneuten Registrierung beim entsprechenden User hat nichts gebracht.

Was kann man also dagegen tun? Dauerhaft aussperren wollten wir die Bots nämlich nicht.

[HabNurNeFrage]

Hi,

genau das ist bei uns auch aufgetreten.
Zunächst ist die ununterbrochene Online-Zeit eines sonst selten aktiven Users aufgefallen.
Erstmal haben wir das so hingenommen, bis dann im Google Index Links zu Threads auftauchten, die nur Eingeloggten und keinen Bots zugänglich sind.

Dann habe ich das Ganze dahingehend zurückverfolgen können, dass dieser User den User-Agent vom G-Bot hatte.
Gut, User informiert - hat sich einen neuen Acoount angelegt. Daraufhin den scheinbar korrumpierten User gelöscht.
AAAABER: Von da an gabs in den Google WebMaster-Tools ständig die Meldung, dass irgendwelche Serverfehler das Crawlen des G-Bot verhindern.
Ich habe mir dann für den FF das AddOn UserAgentSwitcher installiert und siehe da, als Google-Bot SQL-Fehler...

Leider weiß ich bis jetzt nicht, wie es dazu kam, lösen konnte ich es aber mit Hilfe von hier auf diese Weise: viewtopic.php?p=1291922#p1291922

Ich würde Dir empfehlen, auch dieses AddOn zu installieren und mit dem User des betreffenden Accounts Kontakt aufnehmen.
Auf keinen Fall den User Löschen, denn dann kommt der SQL-Fehler, aufgrund der Tatsache, dass dann kein User-User mehr für Bot-User Google [Bot] vorhanden ist.
Wenn Du den UA-Switcher installiert hast und als G-Bot auf Dein Forum klickst, taucht sofort der betroffene User in der Legende auf.
Dann kannst Du live sehen, was Google z.Zt. alles bei Dir sehen kann.

Danach solltest Du Dir das STK auf den Server schmeißen und dort mal Reclean Usernames machen. Wenn das nicht hilft, mit phpMyAdmin die Tipps versuchen, die ich im verlinkten Beitrag geschildert habe.
Da muss man aber wirklich genau aufpassen, welcher User welche ID und welcher Bot welche ID hat. Zettel, Stift und genau notieren.
Um einen besseren Überblick über die Einträge in der Datenbank zu haben, empfielt sich zusätzlich die Installation von mySqlDumper und das Einschalten der Anzeige von Blobs in phpMyAdmin...

Auf jeden Fall kein Grund zu größerer Sorge, wenn es sich bei dem betroffenen User nicht um einen Admin oder Gründer handelt.

LG

[Lemon]

Kennst du das, wenn man den Wald vor lauter Bäumen nicht mehr sieht?

Danke, du hast mich auf jeden Fall auf die richtige Fährte gebracht. Wir sind neulich mit unseren Plusboard-Inhalten auf ein normales phpbb-Board konvertiert. Und meine Methode dabei war, ein sauberes phpbb zu installieren und dann die wichtigen Tabellen aus unserem PB-Backup rüberzuholen. Also User, Themen, Foren etc. An die Bots habe ich natürlich nicht gedacht.
Und so stehen die jetzt einmal in unserer phpbb_users mit IDs im dreistelligen Bereich und einmal in der neu installierten phpbb_bots mit IDs irgendwo um die 5-30. Klar, dass sich das beißt und die ID des Google-Bots jetzt die selbe ist wie eine User-ID. Das ganze sollte also gegessen sein, wenn ich unsere alte Bots-Tabelle rüberhole.

Probiere ich nachher mal aus und berichte dann.

[HabNurNeFrage]

Hi,

ich nehme auch an, dass es bei uns durch die Konvertierung von 2 nach 3 aufgetreten ist.
Es fiel bloß erst Jahre später auf, als plötzlich interner Content im Google-Index auftauchte, nachdem wir ein internes Forum eingerichtet hatten...

LG