Einzelne Files mit .htaccess schützen?

[Skamander]

Moin Forum,

mir ist aufgefallen, daß sich einige Webcrawler meist und ausschließlich die Userprofile anschauen. Ich vermute mal, die sammeln die EMail-Adressen, damit sie diese an Spammer weiterleiten können?

Ist es daher möglich, bestimmte Files mit .htaccess schützen, die viewprofile.php zum Beispiel? Per google finde ich immer nur einen Paßwortschutz bzw. den Schutz ganzer Verzeichnisse ala:

Code: Alles auswählen

order deny,allow
allow from all
deny from 66.249.65.83
deny from 207.46.130.10
deny from 64.4.33.7

Gruß aus dem heißen Halle
Sven

[funfreak]

soweit ich weiß, kannste die mit einer einfachen Datei schützen, nennt sich robots.txt
Da kannste die Suchmaschinen ausschließen.
Der Text in der Datei sollte dann so aussehen:

Code: Alles auswählen

User-agent: * 
Disallow: /forum/profile.php

Mehr Seiten oder eine fertige robots.txt findest Du in der ModDB

[Skamander]

Danke erstmal für diesen Tip. Aber soweit ich weiß, KÖNNEN sich die Webcrawler daran halten, MÜSSEN es aber nicht.

Zumindest war das beim MSN-Bot so, der Sack kam alle 3 - 4 Stunden, ist durch das ganze Board gekrochen und hat so in einem Monat 50 MB Traffic verursacht. Als ich ihn per robots.txt ausperren wollte, hat den das überhaupt nicht gejuckt. Jetzt habe ich alle IP's in Richtung Redmond im ACP geblockt, nun is zumindest von der Seite Ruhe.

Ich dachte daher, das .htaccess die zuverlässigere Lösung sei.

[tas2580]

Warum sperrst du nicht einfach die Profile für nicht angemeldete Benutzer?

[Skamander]

Gern, wenn ich wüßte wo? Im ACP hab ich nichts gefunden.

[funfreak]

http://www.phpbb.de/viewtopic.php?t=47560

[Skamander]

Asso, thx.

Ich dachte jetzt, daß ist eine einfache Einstellung irgendwo.

Werd mich heute nacht mal dransetzen.