phpBB.de

Verfasst: **27.06.2005 19:00**

Moin Forum,

mir ist aufgefallen, daß sich einige Webcrawler meist und ausschließlich die Userprofile anschauen. Ich vermute mal, die sammeln die EMail-Adressen, damit sie diese an Spammer weiterleiten können?

Ist es daher möglich, bestimmte Files mit .htaccess schützen, die viewprofile.php zum Beispiel? Per google finde ich immer nur einen Paßwortschutz bzw. den Schutz ganzer Verzeichnisse ala:

Code: Alles auswählen

order deny,allow
allow from all
deny from 66.249.65.83
deny from 207.46.130.10
deny from 64.4.33.7

Gruß aus dem heißen Halle
Sven

Verfasst: **27.06.2005 19:11**

soweit ich weiß, kannste die mit einer einfachen Datei schützen, nennt sich robots.txt
Da kannste die Suchmaschinen ausschließen.
Der Text in der Datei sollte dann so aussehen:

Code: Alles auswählen

User-agent: * 
Disallow: /forum/profile.php

Mehr Seiten oder eine fertige robots.txt findest Du in der ModDB

Verfasst: **27.06.2005 19:18**

Danke erstmal für diesen Tip. Aber soweit ich weiß, KÖNNEN sich die Webcrawler daran halten, MÜSSEN es aber nicht.

Zumindest war das beim MSN-Bot so, der Sack kam alle 3 - 4 Stunden, ist durch das ganze Board gekrochen und hat so in einem Monat 50 MB Traffic verursacht. Als ich ihn per robots.txt ausperren wollte, hat den das überhaupt nicht gejuckt. Jetzt habe ich alle IP's in Richtung Redmond im ACP geblockt, nun is zumindest von der Seite Ruhe.

Ich dachte daher, das .htaccess die zuverlässigere Lösung sei.

Verfasst: **27.06.2005 19:50**

Warum sperrst du nicht einfach die Profile für nicht angemeldete Benutzer?

Verfasst: **27.06.2005 19:54**

Gern, wenn ich wüßte wo? Im ACP hab ich nichts gefunden.

Verfasst: **27.06.2005 19:58**

http://www.phpbb.de/viewtopic.php?t=47560

Verfasst: **27.06.2005 20:03**

Asso, thx.

Ich dachte jetzt, daß ist eine einfache Einstellung irgendwo.

Werd mich heute nacht mal dransetzen.

phpBB.de

Einzelne Files mit .htaccess schützen?

Einzelne Files mit .htaccess schützen?