Aktuelle Botliste

Zwischen den Rechnern
Gesperrt
SchwarzeGenetik
User
User
Beiträge: 95
Registriert: Fr 22.Jun, 2007 05:22

Aktuelle Botliste

Beitrag von SchwarzeGenetik » So 15.Jul, 2007 21:07

hi!

gibts eigentlich irgentwo eine immer aktuelle botliste um immer auf dem neusten stand zubleiben?

hab mir mal die ctracker_botlist runtergeladen. is aber schon ne weile her...

Gruß SG
Meine Board-Info: phpBB2 Plus 1.53a - www.quad-elite.de

Benutzeravatar
oxpus
Administrator
Administrator
Beiträge: 29108
Registriert: Mo 27.Jan, 2003 22:13
Wohnort: Bad Wildungen
Kontaktdaten:

Beitrag von oxpus » So 15.Jul, 2007 21:52

Nein. Man kann nur seine Log-Files anschauen und prüfen, ob es neue Client Referer gibt, die man dann eintragen kann.
Eine Botliste ist aber nie so schnell veraltet, wie z. B. eine Virendefinition, da ja nicht jeden Tag X neue Suchmaschinen aufgemacht werden...

BTW:
Mit "Sicherheit" hat diese Frage nun weniger zu tun. Ich habe das daher mal hier ins "Netzwerk" verschoben.
Karsten Ude
-={ Das Mädchen für alles }=-
Kein Support per ICQ, Email oder PN! Unaufgeforderte Nachrichten werden ignoriert!
No support per ICQ, Email or PM. Each unasked message will be ignored!

SchwarzeGenetik
User
User
Beiträge: 95
Registriert: Fr 22.Jun, 2007 05:22

Beitrag von SchwarzeGenetik » So 15.Jul, 2007 22:07

ja ok... also werd ich erstmal die botliste eintragen und dann mal sehn.
hab sowieso per robots.txt alle bots untersagt zuschnüffeln. aber die bösen halten sich ja eh nich dran...
Meine Board-Info: phpBB2 Plus 1.53a - www.quad-elite.de

Benutzeravatar
oxpus
Administrator
Administrator
Beiträge: 29108
Registriert: Mo 27.Jan, 2003 22:13
Wohnort: Bad Wildungen
Kontaktdaten:

Beitrag von oxpus » So 15.Jul, 2007 22:08

aber die bösen halten sich ja eh nich dran...
Nicht nur die "bösen" ;)
Karsten Ude
-={ Das Mädchen für alles }=-
Kein Support per ICQ, Email oder PN! Unaufgeforderte Nachrichten werden ignoriert!
No support per ICQ, Email or PM. Each unasked message will be ignored!

SchwarzeGenetik
User
User
Beiträge: 95
Registriert: Fr 22.Jun, 2007 05:22

Beitrag von SchwarzeGenetik » So 15.Jul, 2007 22:20

komisch nur das in der liste Mozilla/4.0 (compatible; MSIE 4.0; Windows 95) zufinden ist.
was soll das denn? da kommen doch mache user garnich mehr rein oder?
bin bisl unwissend was bots betrifft ^5
Dateianhänge
botlist.rar
(1.94 KiB) 156-mal heruntergeladen
Meine Board-Info: phpBB2 Plus 1.53a - www.quad-elite.de

Benutzeravatar
KeineAhnung
User
User
Beiträge: 349
Registriert: Di 29.Mai, 2007 16:35
Wohnort: NRW
Kontaktdaten:

Beitrag von KeineAhnung » So 15.Jul, 2007 22:23

schreibe dies in diene .htaccess , das sollte viele blocken, weitere kann man ja leicht hinzufügen ;)

Code: Alles auswählen

RewriteCond %{HTTP_USER_AGENT} ^BlackWidow [OR]
RewriteCond %{HTTP_USER_AGENT} ^Bot\ mailto:craftbot@yahoo.com [OR]
RewriteCond %{HTTP_USER_AGENT} ^CherryPicker [OR]
RewriteCond %{HTTP_USER_AGENT} ^ChinaClaw [OR]
RewriteCond %{HTTP_USER_AGENT} ^Crescent [OR]
RewriteCond %{HTTP_USER_AGENT} ^Custo [OR]
RewriteCond %{HTTP_USER_AGENT} ^DISCo [OR]
RewriteCond %{HTTP_USER_AGENT} ^Download\ Demon [OR]
RewriteCond %{HTTP_USER_AGENT} ^eCatch [OR]
RewriteCond %{HTTP_USER_AGENT} ^EirGrabber [OR]
RewriteCond %{HTTP_USER_AGENT} ^EmailCollector [OR]
RewriteCond %{HTTP_USER_AGENT} ^EmailSiphon [OR]
RewriteCond %{HTTP_USER_AGENT} ^EmailWolf [OR]
RewriteCond %{HTTP_USER_AGENT} ^Express\ WebPictures [OR]
RewriteCond %{HTTP_USER_AGENT} ^ExtractorPro [OR]
RewriteCond %{HTTP_USER_AGENT} ^EyeNetIE [OR]
RewriteCond %{HTTP_USER_AGENT} ^FlashGet [OR]
RewriteCond %{HTTP_USER_AGENT} ^GetRight [OR]
RewriteCond %{HTTP_USER_AGENT} ^GetWeb! [OR]
RewriteCond %{HTTP_USER_AGENT} ^Go!Zilla [OR]
RewriteCond %{HTTP_USER_AGENT} ^Go-Ahead-Got-It [OR]
RewriteCond %{HTTP_USER_AGENT} ^GornKer [OR]
RewriteCond %{HTTP_USER_AGENT} ^GrabNet [OR]
RewriteCond %{HTTP_USER_AGENT} ^Grafula [OR]
RewriteCond %{HTTP_USER_AGENT} ^HMView [OR]
RewriteCond %{HTTP_USER_AGENT} HTTrack [NC,OR]
RewriteCond %{HTTP_USER_AGENT} ^Image\ Stripper [OR]
RewriteCond %{HTTP_USER_AGENT} ^Image\ Sucker [OR]
RewriteCond %{HTTP_USER_AGENT} Indy\ Library [NC,OR]
RewriteCond %{HTTP_USER_AGENT} ^InterGET [OR]
RewriteCond %{HTTP_USER_AGENT} ^Internet\ Ninja [OR]
RewriteCond %{HTTP_USER_AGENT} ^Irvine [OR]
RewriteCond %{HTTP_USER_AGENT} ^JetCar [OR]
RewriteCond %{HTTP_USER_AGENT} ^JOC\ Web\ Spider [OR]
RewriteCond %{HTTP_USER_AGENT} ^larbin [OR]
RewriteCond %{HTTP_USER_AGENT} ^LeechFTP [OR]
RewriteCond %{HTTP_USER_AGENT} ^Mass\ Downloader [OR]
RewriteCond %{HTTP_USER_AGENT} ^Microsoft.URL [OR]
RewriteCond %{HTTP_USER_AGENT} ^MIDown\ tool [OR]
RewriteCond %{HTTP_USER_AGENT} ^Mister\ PiX [OR]
RewriteCond %{HTTP_USER_AGENT} ^Mozilla.*NEWT [OR]
RewriteCond %{HTTP_USER_AGENT} ^Navroad [OR]
RewriteCond %{HTTP_USER_AGENT} ^NearSite [OR]
RewriteCond %{HTTP_USER_AGENT} ^NetAnts [OR]
RewriteCond %{HTTP_USER_AGENT} ^NetSpider [OR]
RewriteCond %{HTTP_USER_AGENT} ^Net\ Vampire [OR]
RewriteCond %{HTTP_USER_AGENT} ^NetZIP [OR]
RewriteCond %{HTTP_USER_AGENT} ^NICErsPRO [OR]
RewriteCond %{HTTP_USER_AGENT} ^Octopus [OR]
RewriteCond %{HTTP_USER_AGENT} ^oegp [OR]
RewriteCond %{HTTP_USER_AGENT} ^Offline\ Explorer [OR]
RewriteCond %{HTTP_USER_AGENT} ^Offline\ Navigator [OR]
RewriteCond %{HTTP_USER_AGENT} ^PageGrabber [OR]
RewriteCond %{HTTP_USER_AGENT} ^Papa\ Foto [OR]
RewriteCond %{HTTP_USER_AGENT} ^pavuk [OR]
RewriteCond %{HTTP_USER_AGENT} ^pcBrowser [OR]
RewriteCond %{HTTP_USER_AGENT} dloader(NaverRobot) [OR]
RewriteCond %{HTTP_USER_AGENT} ^RealDownload [OR]
RewriteCond %{HTTP_USER_AGENT} ^ReGet [OR]
RewriteCond %{HTTP_USER_AGENT} ^SearchExpress [OR]
RewriteCond %{HTTP_USER_AGENT} ^SiteSnagger [OR]
RewriteCond %{HTTP_USER_AGENT} ^SmartDownload [OR]
RewriteCond %{HTTP_USER_AGENT} ^SuperBot [OR]
RewriteCond %{HTTP_USER_AGENT} ^SuperHTTP [OR]
RewriteCond %{HTTP_USER_AGENT} ^Surfbot [OR]
RewriteCond %{HTTP_USER_AGENT} ^Siphon [OR]
RewriteCond %{HTTP_USER_AGENT} ^tAkeOut [OR]
RewriteCond %{HTTP_USER_AGENT} ^Teleport\ Pro [OR]
RewriteCond %{HTTP_USER_AGENT} ^VoidEYE [OR]
RewriteCond %{HTTP_USER_AGENT} ^Web\ Image\ Collector [OR]
RewriteCond %{HTTP_USER_AGENT} ^Web\ Sucker [OR]
RewriteCond %{HTTP_USER_AGENT} ^WebAuto [OR]
RewriteCond %{HTTP_USER_AGENT} ^WebBandit [OR]
RewriteCond %{HTTP_USER_AGENT} ^WebCopier [OR]
RewriteCond %{HTTP_USER_AGENT} ^WebFetch [OR]
RewriteCond %{HTTP_USER_AGENT} ^WebGo\ IS [OR]
RewriteCond %{HTTP_USER_AGENT} ^WebLeacher [OR]
RewriteCond %{HTTP_USER_AGENT} ^WebReaper [OR]
RewriteCond %{HTTP_USER_AGENT} ^WebSauger [OR]
RewriteCond %{HTTP_USER_AGENT} ^Website\ eXtractor [OR]
RewriteCond %{HTTP_USER_AGENT} ^Website\ Quester [OR]
RewriteCond %{HTTP_USER_AGENT} ^WebStripper [OR]
RewriteCond %{HTTP_USER_AGENT} ^WebWhacker [OR]
RewriteCond %{HTTP_USER_AGENT} ^WebZIP [OR]
RewriteCond %{HTTP_USER_AGENT} ^Wget [OR]
RewriteCond %{HTTP_USER_AGENT} ^Widow [OR]
RewriteCond %{HTTP_USER_AGENT} ^WWWOFFLE [OR]
RewriteCond %{HTTP_USER_AGENT} ^Xaldon\ WebSpider [OR]
RewriteCond %{HTTP_USER_AGENT} ^Zeus [OR]
RewriteCond %{HTTP_USER_AGENT} ^ZyBorg
RewriteRule ^.* - [F,L]

SchwarzeGenetik
User
User
Beiträge: 95
Registriert: Fr 22.Jun, 2007 05:22

Beitrag von SchwarzeGenetik » So 15.Jul, 2007 22:28

hey cool danke!

kommt die ins web-root oder ins foren-root?
Meine Board-Info: phpBB2 Plus 1.53a - www.quad-elite.de

Benutzeravatar
KeineAhnung
User
User
Beiträge: 349
Registriert: Di 29.Mai, 2007 16:35
Wohnort: NRW
Kontaktdaten:

Beitrag von KeineAhnung » So 15.Jul, 2007 22:34

öhm, keine ahnung, stell sie einfach in beide, sicher ist sicher ;)

und in die robots.txt am besten noch das um einen archive bot der die seite archiviert zu blockeen (der liest die robots.txt)

Code: Alles auswählen

#archive.org
User-agent: ia_archiver
Disallow: /
Zuletzt geändert von KeineAhnung am So 15.Jul, 2007 22:36, insgesamt 1-mal geändert.

SchwarzeGenetik
User
User
Beiträge: 95
Registriert: Fr 22.Jun, 2007 05:22

Beitrag von SchwarzeGenetik » So 15.Jul, 2007 22:44

ja schön alles dicht machen! ;)

also bei mir steht schon:

Code: Alles auswählen

User-agent: * 
Disallow: /
Allow: /index.html
reicht doch auch oder? (meine index.html ist nen frameset-seite)
Meine Board-Info: phpBB2 Plus 1.53a - www.quad-elite.de

Benutzeravatar
KeineAhnung
User
User
Beiträge: 349
Registriert: Di 29.Mai, 2007 16:35
Wohnort: NRW
Kontaktdaten:

Beitrag von KeineAhnung » So 15.Jul, 2007 22:49

Mit der robots.txt erlaubts du nur die index.html, aber ob die Bots dadurvh zugriff auf die Daten im Frame haben ist mir unklar.
Zuletzt geändert von KeineAhnung am So 15.Jul, 2007 22:50, insgesamt 1-mal geändert.

SchwarzeGenetik
User
User
Beiträge: 95
Registriert: Fr 22.Jun, 2007 05:22

Beitrag von SchwarzeGenetik » So 15.Jul, 2007 22:54

ja das wollt ich auch. in der index ist alles drin was sie haben sollen. beschreibung und titel des forums.
das forenroot ist für bots gesperrt, da es ja ein unterverzeichnis is... ;)
Meine Board-Info: phpBB2 Plus 1.53a - www.quad-elite.de

Gesperrt