Spider Trap zum kostenlosen downloadvom 14.01.2006 Content-Klau ist im Internet mittlerweilse weit verbreitet - sich dagegen schützen war meist nicht einfach. Jetzt hat Thomas Zeithaml das PHP Script "Spider Trap" veröffentlicht, welches vollautomatisch Bots und Spider erkennt die sich nicht an die in der robots.txt festgelegten Leserechte für Spider halten. Ein Spider der in die Falle (trap) tappt, wird automstich in eine Blacklist eingetragen und fortan der Zugriff auf die Webinhalte verweigert. Ein wenig einlesen in die Thematik sollte man sich schon, den GoogleBot auszusperren dürfte für viele Betreiber ein Worst-Case Scenario sein.
weitere Informationen: http://www.spider-trap.de... Ältere Artikel zum Thema: > Neuer Spider aufgetaucht (13.04.2004) > Spam-Datenbank für Spider & Crawler (13.04.2004)
|