Bad Bots (mitchellkrogza)

How to identify it

User-agent contains any of:

• 1h4x.com
• 404checker
• 404enemy
• 80legs
• ASPSeek
• Abonti
• AfD-Verbotsverfahren
• Aipbot
• AllSubmitter
• Alligator
• Anarchie
• Anarchy
• Anarchy99
• Ankit
• Anthill
• Apexoo
• Attach
• BBBike
• BDFetch
• BackStreet
• BackWeb
• Backlink-Ceck
• Badass
• BatchFTP
• Bigfoot
• Bitacle
• Boardreader
• Bolt
• Brandwatch
• BuzzSumo
• CATExplorador
• CSHttp
• Calculon
• CazoodleBot
• CheTeam
• ChinaClaw
• Cogentbot
• Copyscape
• Craftbot
• Curious
• DBLBot
• DIIbot
• DataCha0s
• DatabaseDriverMysqli
• Demon
• Devil
• DigitalPebble
• Dirbuster
• Discoverybot
• Dispatch
• DomCopBot
• Drip
• ECCP
• EasyDL
• Ecxi
• EirGrabber
• Evil
• EyeNetIE
• FHscan
• Fimap
• Firefox/7.0
• FlashGet
• Flunky
• Freeuploader
• FrontPage
• Fuzz
• G-i-g-a-b-o-t
• GT::WWW
• GalaxyBot
• GetWeb
• Getintent
• Go!Zilla
• Go-Ahead-Got-It
• GoZilla
• Gotit
• GrabNet
• Grafula
• GrapeFX
• HEADMasterSEO
• HMView
• HTMLparser
• HTTP::Lite
• Haansoft
• Havij
• Hloader
• HonoluluBot
• IDBTE4M
• Iblog
• Id-search
• IlseBot
• InfoTekies
• Intelliseek
• InterGET
• Iria
• Jbrofuzz
• JetCar
• Joomla
• Jorgee
• JustView
• Kinza
• Kozmosbot
• LWP::Simple
• Lanshanbot
• LeechFTP
• LeechGet
• Lftp
• Libwhisker
• Likse
• LinksManager
• LinqiaScrapeBot
• Litemage_walker
• MFC_Tear_Sample
• MQQBrowser
• MSFrontPage
• Mag-Net
• Majestic-SEO
• Majestic12
• MarkMonitor
• MarkWatch
• Masscan
• Mb2345Browser
• Meanpathbot
• MicroMessenger
• Minefield
• Mojolicious
• MolokaiBot
• Mozlila
• Mr.4x3
• Msrabot
• Musobot
• Nameprotect
• Navroad
• NearSite
• Needle
• Nessus
• NetLyzer
• NetZIP
• Nettrack
• Nibbler
• Nuclei
• Octopus
• OpenLinkProfiler
• OpenVAS
• PECL::HTTP
• PHPCrawl
• POE-Component-Client-HTTP
• PageGrabber
• PageScorer
• Pavuk
• PeoplePal
• Pi-Monster
• Picscout
• Picsearch
• PictureFinder
• Piepmatz
• Pimonster
• Pixray
• PleaseCrawl
• Pockey
• Probethenet
• Pu_iN
• Pump
• PxBroker
• Quick-Crawler
• Rainbot
• RankingBot
• RankingBot2
• Rankivabot
• Re-re
• ReGet
• RebelMouse
• Recorder
• SBIder
• SEOprofiler
• SMARTSEO-checker
• SalesIntelligent
• ScanAlert
• ScreenerBot
• ScrepyBot
• Searchestate
• SemanticJuice
• SeoSiteCheckup
• Seomoz
• Shodan
• Sitebeam
• SlySearch
• Snake
• Snoopy
• Sociscraper
• SpaceBison
• Spammen
• SplitSignalBot
• Sqlworm
• Sqworm
• Steeler
• SuperHTTP
• Surfbot
• T0PHackTeam
• T8Abot
• TLM-Audit-Scanner
• Telesphoreo
• Telesphorep
• Thumbor
• TightTwatBot
• Toata
• Toweyabot
• Twice
• UnisterBot
• V-BOT
• Vacuum
• Vagabondo
• VeriCiteCrawler
• VidibleScraper
• Virusdie
• VoidEYE
• WEBDAV
• WISENutbot
• WWW::Mechanize
• WWWOFFLE
• Wallpapers
• WallpapersHD
• WeSEE
• WebCollage
• WebFetch
• WebFuck
• WebImageCollector
• WebLeacher
• WebPix
• WebSucker
• WebWhacker
• Webalta
• Webshag
• Webster
• Whack
• Whacker
• Whatweb
• Widow
• Wonderbot
• Wprecon
• Zade
• Zauba
• Zermelo
• ZmEu
• allenai.org
• aria2
• backlink-check
• cah.io.community
• check1.exe
• clark-crawler
• com.plumanalytics
• demandbase-bot
• eCatch
• gopher
• imagesift.com
• instabid
• isitwp.com
• iubenda-radar
• leakix
• libredtail-http
• litellm-recon
• lwp-request
• mediawords
• muhstik-scan
• openai
• openai.com
• opendirme-credhunt
• pcBrowser
• plumanalytics
• probe-image-size
• ripz
• s1z.ru
• satoristudio.net
• scalaj-http
• scan.lol
• seocompany.store
• sexsearcher
• sitechecker.pro
• siteripz
• smart-seo-tools.sbs
• sp_auditbot
• spyfu
• sysscan
• tAkeOut
• ubermetrics-technologies.com
• voyagerx.com
• webgains-bot
• webmeup-crawler
• webpros.com
• webprosbot
• wp2shell
• x09Mozilla
• x22Mozilla
• xpymep1.exe
• zauba.io

Example user-agent string:

ADmantX Platform Semantic Analyzer - ADmantX Inc. - www.admantx.com - [email protected]

robots.txt

Well-behaved crawlers honor robots.txt. To control Bad Bots (mitchellkrogza):

User-agent: 1h4x.com
Allow: /

User-agent: 1h4x.com
Disallow: /

Grey-area scrapers ignore robots.txt. Botscope enforces your policy at the edge or origin regardless — see how →

References

• Official documentation ↗