|
|||
@hemfrie
kannst Du mal Deine "gierigsten Bots und Spider" hier posten. Wenn Du das hier nicht veröffentlichen willst, dann auch gern per PN. Danke!
__________________
Meine Spielwiese: www.biketrekking.de |
|
||||
Zitat:
Aktuell sperre ich folgende User-Agents aus: Code:
RewriteCond %{HTTP_USER_AGENT} ^.*Whacker.*$ [OR] RewriteCond %{HTTP_USER_AGENT} ^.*TMCrawler.*$ [OR] RewriteCond %{HTTP_USER_AGENT} ^.*Java.*$ [OR] RewriteCond %{HTTP_USER_AGENT} ^EmailCollector [OR] RewriteCond %{HTTP_USER_AGENT} ^EmailSiphon [OR] RewriteCond %{HTTP_USER_AGENT} ^EmailWolf [OR] RewriteCond %{HTTP_USER_AGENT} ^Gigabot [OR] RewriteCond %{HTTP_USER_AGENT} ^.*FileHound.*$ [OR] RewriteCond %{HTTP_USER_AGENT} ^.*TurnitinBot.*$ [OR] RewriteCond %{HTTP_USER_AGENT} ^.*JoBo.*$ [OR] RewriteCond %{HTTP_USER_AGENT} ^.*adressendeutschland.*$ [OR] RewriteCond %{HTTP_USER_AGENT} ^.*MJ12bot.*$ [OR] RewriteCond %{HTTP_USER_AGENT} ^.*Twiceler.*$ [OR] RewriteCond %{HTTP_USER_AGENT} ^.*larbin.*$ [OR] RewriteCond %{HTTP_USER_AGENT} ^.*iSpider.*$ [OR] RewriteCond %{HTTP_USER_AGENT} ^.*TinEye.*$ [OR] RewriteCond %{HTTP_USER_AGENT} ^.*webrobot.*$ [OR] RewriteCond %{HTTP_USER_AGENT} ^.*libwww-perl.*$ RewriteRule ^.* - [F] |
|
||||
Der Twiceler gehört offenbar zu einer neuen Suchmaschine die sich noch in der Entwicklung befindet:
Cuill verspricht bessere Suche als Google - Golem.de Cuill - Twiceler Information Geändert von inta (18.04.2008 um 12:23 Uhr) |
|
||||
Zitat:
|
|
||||
Hallo, Dirk!
Hast Du - oder jemand anderer - einen Link für mich, unter dem ich zum Thema "Bots aussperren" etwas mehr (und zuverlässig!) erfahren kann? Danke sehr!
__________________
Informationen aus Koblenz-Metternich ----------------------------------- "Wissen heißt, Fragen zu erwerben." |
|
||||
Wo es hier grad um Botsausperren geht.
Ein interresantes Projekt, welches gerade im Developers-guide gestartet wird. Vlt möchte sich jemand mit daran beteiligen: Community-Projekt zur Bot-Abwehr benötigt Unterstützung - Developer's Guide
__________________
Meine Spielwiese: http://blog.kanedo.net Ich bei Flickr? Da: Flickr: Fotostream von kanedo-projekt Für open Source Liebhaber: open Com Auch ich Zwitschere als @kanedo |
Sponsored Links |
|
||||
Zitat:
schau Dir mal diesen Link hier an: Bots & Spider per mod_rewrite aussperren - huschi.net Anstelle der dort aufgeführten Bots würde ich erstmal nur mit den Bots beginnen, die tatsächlich Deine Seiten aufsuchen. |
Sponsored Links |
Themen-Optionen | |
Ansicht | |
|
|
Ähnliche Themen | ||||
Thema | Autor | Forum | Antworten | Letzter Beitrag |
xhtmlforum und das iPhone. | Praktikant | Fragen, Konstruktive Kritik, Lob / Bekanntmachungen | 6 | 29.11.2011 15:00 |
Welche Forum-Netikette im XHTMLForum befolgen? | Loïs Bégué | Fragen, Konstruktive Kritik, Lob / Bekanntmachungen | 9 | 17.07.2007 00:11 |
Webseite/Link auf erreichbarkeit prüfen | danielw | Javascript & Ajax | 2 | 14.03.2007 00:51 |
XHTMLForum - Schreibweise und kanonischer URI | kasper | Fragen, Konstruktive Kritik, Lob / Bekanntmachungen | 1 | 31.10.2004 14:27 |
xhtmlforum übernimmt CSS4YOU.de Foreninhalte | hemfrie | Fragen, Konstruktive Kritik, Lob / Bekanntmachungen | 5 | 31.03.2004 11:26 |