Skip to main content

Bad Bots (mitchellkrogza)

recommended: challenge
other

How to identify it

User-agent contains any of:

  • 1h4x.com
  • 360Spider
  • 404checker
  • 404enemy
  • 80legs
  • ADmantX
  • AIBOT
  • AIWebIndex
  • ASPSeek
  • Abonti
  • Aboundex
  • Aboundexbot
  • Acunetix
  • AdsTxtCrawlerTP
  • AfD-Verbotsverfahren
  • AhrefsBot
  • Ai2Bot
  • AiHitBot
  • Aipbot
  • Alexibot
  • Aliyun
  • AliyunSecBot
  • AllSubmitter
  • Alligator
  • AlphaBot
  • Anarchie
  • Anarchy
  • Anarchy99
  • Ankit
  • Anthill
  • Apexoo
  • Aspiegel
  • Asterias
  • Atomseobot
  • Attach
  • AwarioBot
  • AwarioRssBot
  • AwarioSmartBot
  • BBBike
  • BDCbot
  • BDFetch
  • BLEXBot
  • BackDoorBot
  • BackStreet
  • BackWeb
  • Backlink-Ceck
  • BacklinkCrawler
  • BacklinksExtendedBot
  • Badass
  • Bandit
  • Barkrowler
  • BatchFTP
  • BetaBot
  • Bigfoot
  • Bitacle
  • BlackWidow
  • Blackboard
  • Blow
  • BlowFish
  • Boardreader
  • Bolt
  • BotALot
  • Brandprotect
  • Brandwatch
  • Buck
  • Buddy
  • BuiltBotTough
  • BuiltWith
  • Bullseye
  • BunnySlippers
  • BuzzSumo
  • Bytespider
  • CATExplorador
  • CCBot
  • CODE87
  • CSHttp
  • Calculon
  • CazoodleBot
  • Cegbfeieh
  • CensysInspect
  • ChatGPT-User
  • CheTeam
  • CheeseBot
  • CherryPicker
  • ChinaClaw
  • Chlooe
  • Citoid
  • Claritybot
  • ClaudeBot
  • Cliqzbot
  • Cocolyzebot
  • Cogentbot
  • Collector
  • Copier
  • CopyRightCheck
  • Copyscape
  • Cosmos
  • Craftbot
  • CrazyWebCrawler
  • Crescent
  • CrunchBot
  • Curious
  • Custo
  • CyotekWebCopy
  • DBLBot
  • DIIbot
  • DSearch
  • DataCha0s
  • DatabaseDriverMysqli
  • Demon
  • Deusu
  • Devil
  • Digincore
  • DigitalPebble
  • Dirbuster
  • Disco
  • Discobot
  • Discoverybot
  • Dispatch
  • DittoSpyder
  • DnBCrawler-Analytics
  • DnyzBot
  • DomCopBot
  • DomainAppender
  • DomainCrawler
  • DomainSigmaCrawler
  • DomainStatsBot
  • Dotbot
  • Dragonfly
  • Drip
  • ECCP
  • EasyDL
  • Ebingbong
  • Ecxi
  • EirGrabber
  • EroCrawler
  • Evil
  • Exabot
  • ExtLinksBot
  • Extractor
  • ExtractorPro
  • EyeNetIE
  • Ezooms
  • FHscan
  • FacebookBot
  • FemtosearchBot
  • Fimap
  • Firefox/7.0
  • FlashGet
  • Flunky
  • Foobot
  • Freeuploader
  • FrontPage
  • Fuzz
  • FyberSpider
  • Fyrebot
  • G-i-g-a-b-o-t
  • GPTBot
  • GT::WWW
  • GalaxyBot
  • GeedoProductSearch
  • Genieo
  • GenomeCrawlerd
  • GermCrawler
  • GetRight
  • GetWeb
  • Getintent
  • Gigabot
  • Go!Zilla
  • Go-Ahead-Got-It
  • GoZilla
  • Gotit
  • GrabNet
  • Grabber
  • Grafula
  • GrapeFX
  • GrapeshotCrawler
  • GridBot
  • HEADMasterSEO
  • HMView
  • HTMLparser
  • HTTP::Lite
  • HTTrack
  • Haansoft
  • HaosouSpider
  • Harvest
  • Havij
  • Heritrix
  • Hloader
  • HonoluluBot
  • Humanlinks
  • HybridBot
  • IDBTE4M
  • IDBot
  • IRLbot
  • Iblog
  • Id-search
  • IlseBot
  • ImagesiftBot
  • IndeedBot
  • InfoNaviRobot
  • InfoTekies
  • Intelliseek
  • InterGET
  • InternetMeasurement
  • InternetSeer
  • Iria
  • Iskanie
  • IstellaBot
  • JamesBOT
  • Jbrofuzz
  • JennyBot
  • JetCar
  • Jetty
  • JikeSpider
  • Joomla
  • Jorgee
  • JustView
  • Jyxobot
  • Kinza
  • Kozmosbot
  • LNSpiderguy
  • LWP::Simple
  • Lanshanbot
  • Larbin
  • Leap
  • LeechFTP
  • LeechGet
  • LexiBot
  • Lftp
  • LibWeb
  • Libwhisker
  • LieBaoFast
  • Lightspeedsystems
  • Likse
  • LinkScan
  • LinkWalker
  • Linkbot
  • LinkextractorPro
  • LinkpadBot
  • LinksManager
  • LinqiaMetadataDownloaderBot
  • LinqiaRSSBot
  • LinqiaScrapeBot
  • Lipperhey
  • Litemage_walker
  • Lmspider
  • Ltx71
  • MFC_Tear_Sample
  • MIIxpc
  • MJ12bot
  • MQQBrowser
  • MSFrontPage
  • MSIECrawler
  • MTRobot
  • Mag-Net
  • Magnet
  • Mail.RU_Bot
  • Majestic-SEO
  • Majestic12
  • MarkMonitor
  • MarkWatch
  • Masscan
  • MauiBot
  • Mb2345Browser
  • Meanpathbot
  • Mediatoolkitbot
  • MegaIndex.ru
  • Metauri
  • MicroMessenger
  • Minefield
  • Mojeek
  • Mojolicious
  • MolokaiBot
  • Mozlila
  • Mr.4x3
  • Msrabot
  • Musobot
  • NICErsPRO
  • NPbot
  • Nameprotect
  • Navroad
  • NearSite
  • Needle
  • Nessus
  • NetAnts
  • NetLyzer
  • NetMechanic
  • NetSpider
  • NetZIP
  • Netcraft
  • Nettrack
  • Netvibes
  • NextGenSearchBot
  • Nibbler
  • Niki-bot
  • Nikto
  • NimbleCrawler
  • Nimbostratus
  • Ninja
  • Nmap
  • Nuclei
  • Nutch
  • Octopus
  • Odin
  • OnCrawl
  • OpenLinkProfiler
  • OpenVAS
  • Openfind
  • OrangeBot
  • OrangeSpider
  • OutclicksBot
  • OutfoxBot
  • PECL::HTTP
  • PHPCrawl
  • POE-Component-Client-HTTP
  • PageAnalyzer
  • PageGrabber
  • PageScorer
  • PageThing.com
  • Pandalytics
  • Panscient
  • Pavuk
  • PeoplePal
  • Petalbot
  • Pi-Monster
  • Picscout
  • Picsearch
  • PictureFinder
  • Piepmatz
  • Pimonster
  • Pixray
  • PleaseCrawl
  • Pockey
  • ProPowerBot
  • ProWebWalker
  • Probethenet
  • Proximic
  • Psbot
  • Pu_iN
  • Pump
  • PxBroker
  • PyCurl
  • Quick-Crawler
  • RSSingBot
  • Rainbot
  • RankActive
  • RankActiveLinkBot
  • RankFlex
  • RankingBot
  • RankingBot2
  • Rankivabot
  • RankurBot
  • Re-re
  • ReGet
  • RealDownload
  • Reaper
  • RebelMouse
  • Recorder
  • RedesScrapy
  • RepoMonkey
  • Ripper
  • RocketCrawler
  • Rogerbot
  • SBIder
  • SEBot-WA
  • SEOkicks
  • SEOkicks-Robot
  • SEOlyt
  • SEOlyticsCrawler
  • SEOprofiler
  • SEOstats
  • SISTRIX
  • SMARTSEO-checker
  • SMTBot
  • SalesIntelligent
  • ScanAlert
  • Scanbot
  • ScoutJet
  • Scrapy
  • Screaming
  • ScreenerBot
  • ScrepyBot
  • Searchestate
  • SearchmetricsBot
  • Seekport
  • SeekportBot
  • SemanticJuice
  • Semrush
  • SemrushBot
  • SemrushBot-BA
  • SemrushBot-FT
  • SemrushBot-OCOB
  • SemrushBot-SI
  • SemrushBot-SWA
  • SentiBot
  • SenutoBot
  • SeoCherryBot
  • SeoSiteCheckup
  • SeobilityBot
  • Seomoz
  • Shodan
  • Siphon
  • SiteAuditBot
  • SiteCheckerBotCrawler
  • SiteExplorer
  • SiteLockSpider
  • SiteSnagger
  • SiteSucker
  • Sitebeam
  • Siteimprove
  • Sitevigil
  • SlySearch
  • SmartDownload
  • Snake
  • Snapbot
  • Snoopy
  • SocialRankIOBot
  • Sociscraper
  • Sosospider
  • Sottopop
  • SpaceBison
  • Spammen
  • SpankBot
  • Spanner
  • Spbot
  • Spider_Bot
  • Spinn3r
  • SplitSignalBot
  • SputnikBot
  • Sqlmap
  • Sqlworm
  • Sqworm
  • Steeler
  • Stripper
  • Sucker
  • Sucuri
  • SuperBot
  • SuperHTTP
  • Surfbot
  • SurveyBot
  • Suzuran
  • Swiftbot
  • Szukacz
  • T0PHackTeam
  • T8Abot
  • TLM-Audit-Scanner
  • Teleport
  • TeleportPro
  • Telesoft
  • Telesphoreo
  • Telesphorep
  • TheNomad
  • Thumbor
  • TightTwatBot
  • Timpibot
  • TinyTestBot
  • Titan
  • Toata
  • Toweyabot
  • Tracemyfile
  • Trendiction
  • Trendictionbot
  • True_Robot
  • Turingos
  • Turnitin
  • TurnitinBot
  • TwengaBot
  • Twice
  • Typhoeus
  • URLy.Warning
  • UnisterBot
  • Upflow
  • V-BOT
  • Vacuum
  • Vagabondo
  • VelenPublicWebCrawler
  • VeriCiteCrawler
  • VidibleScraper
  • Virusdie
  • VoidEYE
  • Voil
  • Voltron
  • WASALive-Bot
  • WBSearchBot
  • WEBDAV
  • WISENutbot
  • WPScan
  • WWW-Collector-E
  • WWW-Mechanize
  • WWW::Mechanize
  • WWWOFFLE
  • Wallpapers
  • WallpapersHD
  • WeSEE
  • WebAuto
  • WebBandit
  • WebCollage
  • WebCopier
  • WebEnhancer
  • WebFetch
  • WebFuck
  • WebImageCollector
  • WebLeacher
  • WebPix
  • WebReaper
  • WebSauger
  • WebStripper
  • WebSucker
  • WebWhacker
  • WebZIP
  • Webalta
  • WebmasterWorldForumBot
  • Webshag
  • WebsiteExtractor
  • WebsiteQuester
  • Webster
  • Whack
  • Whacker
  • Whatweb
  • Widow
  • WinHTTrack
  • Wonderbot
  • Woobot
  • Wotbox
  • Wprecon
  • Xaldon_WebSpider
  • Xenu
  • YoudaoBot
  • Zade
  • Zauba
  • Zermelo
  • Zeus
  • Zitebot
  • ZmEu
  • ZoomBot
  • ZoominfoBot
  • ZumBot
  • ZyBorg
  • adscanner
  • allenai.org
  • anthropic-ai
  • archive.org_bot
  • aria2
  • arquivo-web-crawler
  • arquivo.pt
  • autoemailspider
  • awario.com
  • backlink-check
  • cah.io.community
  • check1.exe
  • clark-crawler
  • coccocbot
  • cognitiveseo
  • cohere-ai
  • com.plumanalytics
  • crawl.sogou.com
  • crawler4j
  • crawler.feedback
  • dataforseo.com
  • dataforseobot
  • dataprovider
  • demandbase-bot
  • domainsproject.org
  • eCatch
  • evc-batch
  • everyfeed-spider
  • facebookscraper
  • fasthttp
  • gopher
  • imagesift.com
  • instabid
  • ips-agent
  • isitwp.com
  • iubenda-radar
  • l9scan
  • leakix
  • libredtail-http
  • linkdexbot
  • linkfluence
  • litellm-recon
  • lwp-request
  • lwp-trivial
  • magpie-crawler
  • mediawords
  • muhstik-scan
  • oBot
  • omgili
  • openai
  • openai.com
  • opendirme-credhunt
  • pcBrowser
  • plumanalytics
  • probe-image-size
  • ripz
  • s1z.ru
  • satoristudio.net
  • scalaj-http
  • scan.lol
  • seobility
  • seocompany.store
  • seoscanners
  • seostar
  • serpstatbot
  • sexsearcher
  • sitechecker.pro
  • siteripz
  • smart-seo-tools.sbs
  • sogouspider
  • sp_auditbot
  • spy4x-domain-scanner
  • spyfu
  • sysscan
  • tAkeOut
  • terrabot-owned-you
  • trafilatura
  • trendiction.com
  • trendiction.de
  • ubermetrics-technologies.com
  • voyagerx.com
  • webgains-bot
  • webmeup-crawler
  • webpros.com
  • webprosbot
  • x09Mozilla
  • x22Mozilla
  • xpymep1.exe
  • zauba.io
  • zgrab

Example user-agent string:

ADmantX Platform Semantic Analyzer - ADmantX Inc. - www.admantx.com - [email protected]

robots.txt

Well-behaved crawlers honor robots.txt. To control Bad Bots (mitchellkrogza):

Allow full access

User-agent: 1h4x.com
Allow: /

Block entirely

User-agent: 1h4x.com
Disallow: /

Grey-area scrapers ignore robots.txt. Botscope enforces your policy at the edge or origin regardless — see how →

References

See Bad Bots (mitchellkrogza) on your own site

Botscope shows every bot and AI agent hitting your site — and lets you allow, challenge, or block each one. Observe first, enforce when you're ready.

Start free — connect in minutes