Seite 1 von 1
HTTP_Request bzw. HTTP_Client als Mozilla Browser ausgeben?
Verfasst: 27.04.2008 14:57
von GTA26
Wie kann man HTTP_Request bzw. HTTP_Client als Mozilla Browser ausgeben?
Habe leider nichts gefunden ausser der Net_UserAgent_Detect Funkion und die macht das Gegenteil. Er ermittelt lediglich den Browser

Verfasst: 27.04.2008 15:08
von Boecki91
Hat die von dir gespiderte Seite einen Clientfilter eingebaut?
Da das spidern durchaus illegal sein kann, Copyright-Verletzung etc. und du sogar in Login-Geschützte Bereiche eindringst wäre es besser das du
Vielleicht mal den Betreiber anschreibst an und fragst ihn ob du die Seite Spidern darfst, vielleicht stellt er dir sogar eine extra Schnittstelle bereit oder gibt dir die Erlaubnis nachts zu spidern, wo die Webseite keine hohen Auslastungen hat, und somit die Besucher der Webseite nicht beeinträchtigt werden und du sogar schneller Spidern kannst.