Wenn wir schon von Bad Bots sprechen, wer sind die Bad Bots und welche User-Agents sollte man blockieren?

Uns bekannt und suspekt sind folgende User-Agents. Wir haben diese bei diversen Websites über die .htaccess RewriteCond ausgeschlossen.

Die Bad Bot Liste

• *myengines*
• libwww*
• *perl*
• *OmniExpl*
• *ObjectSearch*
• *Jakarta*
• *Webster*
• *mafia*
• Missi*
• e-Society*
• *BackWeb*
• *PlantyNet*
• *NexTools*
• *Monkey*
• *FreeDict*
• *Anonym*
• *ZipppBot*
• ExtractorPro
• Webster*
• DISCo\Pump*
• Drip*
• Download*
• *Download*
• Download\Ninja*
• EirGrabber*
• GetRight*
• Gets*
• Go-Ahead-Got-it*
• Grafula*
• IBrowse*
• InterGET*
• Internet\Ninja*
• MIDown\Tool*
• Mister\PiX*
• PageGrabber*
• Papa\Foto*
• Pockey*
• ReGet*
• SpaceBison*
• SuperHTTP*
• WebCopier*
• WebFetch*
• WebReaper*
• WebSauger*
• WebStripper*
• WebWhacker*
• WebZIP*
• Web\Image\Collector*
• Web\Sucker*
• eCatch*
• tAkeOut*
• *WebZIP"
• *Stripper*
• *Copier*
• *Snagger*
• *Reaper*
• *Grabber*
• *Sucker*
• *Downloader*
• *Siphon*
• *Collector*
• *Widow*
• *Snake*
• *gotit*
• *Vacuum*
• *Pump*
• *HMView*
• *HTTrack*
• *JOC*
• *likse*
• *leech*
• *Mirror*
• *Recorder*
• *GrabNet*
• *Bandit*
• *Ants*
• *Buddy*
• *Whacker*
• *Backstreet*
• *Caitoo*
• *GetWeb*
• *Greed*
• *Vampire*
• *Eater*
• *Snarf*
• *Devil*
• *WebVCR*
• *WWWCopy*
• *Aculinx*
• *DownloadIT*
• *Weazel*
• *Commander*
• *Webexe*
• *Down2Web*
• *Burner*
• *Snatcher*
• *FileHound*
• *BlackWidow*
• *WebSauger*
• *CherryPicker*
• *EmailCollector*
• *EmailSiphon*
• *EmailWolf*
• *ExtractorPro*
• *[WW]eb[Bb]andit*
• WebEMailExtrac*