Website downloaden

[Philipp]

Original geschrieben von Venkman


wie macht man das? gibts ein proggi dass checkt wenn alle links recht rasch aufgerufen werden??

Durch Signaturen. Damit lassen sich alle möglichen Arten von Spider wie z.B. auch Werbeblocker oder Email Extrahierer wegblocken. Diese Funktion wird z.B. von Storyteller CMS direkt unterstützt

Gerade Website Downloader können bei vielen PHP Websites Probleme verursachen. Manche PHP Scripte wie z.B. PHP-Nuke sind nicht für extrem hoher Traffic ausgelegt und erzeugen dann sehr viel Serverload.