So können Sie gewisse Ip Sperren:
Mittels einer geschickten htaccess Datei, welche Sie ins Wurzelverzeichnisses Ihres Servers legen. Normalerweise ist dies public_html. Ich habe aber aus Sicherheitsgründen noch eine Ebene tiefer eine htaccess liegen.
order allow,deny
allow from all
deny from 128.194.135.94
# crawler4.irl.cs.tamu.edu
So einen ganzen Bereich:
order allow,deny
allow from all
deny from 128.194.135.00/255
# Gesperrte Ip 128.94.135.00 bis 128.194.135.255
Leider funktioniert dies nur für einen Bereich:
Alternativ geht auch dies:
order allow,deny
allow from all
deny from 128.194.135.24 # crawler4.irl.cs.tamu.edu ip24
ErrorDocument 403 http://127.0.0.1
deny from 213.232.196.107 # 107.jungle.hnt.ru ip107
ErrorDocument 403 http://127.0.0.1
#######################################
Somit können Sie gezielt die nervigen Roboter abschalten.
PS: eine Ip finden Sie so heraus:
Start-->Ausführen: cmd eingeben und mit enter die Shell öffnen.
nun eingeben: ping crawler4.irl.cs.tamu.edu und mit enter bestätigen.
Windows pingt nun den Host crawler4.irl.cs.tamu.edu und liefert Ihnen die korrekte Ip des hostes. Funktioniert bei fast allen Anbietern und im Internet zugänglichen Computern.