WebMaster's Social Network

Сообщество русскоязычных вебмастеров и дорвейщиков в формате блогов - дорвеи, доргены, партнерские программы, заработок в интернете.


Виталий

Проверте мой htaccess Может я норм ботов заблочил!

Проверте мой htaccess
Может я норм ботов заблочил!

Ответы:
Виталий Виталий #123837 2018-06-08 09:53
order allow,deny

allow from all



# Далее список юзерагентов которым мы запрещаем доступ

SetEnvIfNoCase User-Agent MJ12bot bad_bot

SetEnvIfNoCase User-Agent Riddler bad_bot

SetEnvIfNoCase User-Agent SemrushBot bad_bot

SetEnvIfNoCase User-Agent LinkpadBot bad_bot

SetEnvIfNoCase User-Agent BLEXBot bad_bot

SetEnvIfNoCase User-Agent trovitBot bad_bot

SetEnvIfNoCase User-Agent MauiBot bad_bot

SetEnvIfNoCase User-Agent AhrefsBot bad_bot

SetEnvIfNoCase User-Agent aiHitBot bad_bot

SetEnvIfNoCase User-Agent MegaIndex bad_bot

SetEnvIfNoCase User-Agent Baiduspider bad_bot

SetEnvIfNoCase User-Agent Superfeedr bad_bot

SetEnvIfNoCase User-Agent DotBot bad_bot

SetEnvIfNoCase User-Agent UptimeRobot bad_bot

Order Allow,Deny

Allow from all

Deny from env=bad_bot

NoHate NoHate #123844 2018-06-08 11:23
Виталий, сразу видно кто не читал BBCODE страницу. Мик даже заморочился, и сделал автовставку кода с пастебина, но народ не читает :( Наркоманы кругом

Виталий Виталий #123867 2018-06-08 13:23
123844 NoHate, а на мой вопрос может ответишь???

Mikhael Mikhael #123875 2018-06-08 15:02
123837 Виталий, все ок. Можешь еще добавить
SetEnvIfNoCase User-Agent «LinkpadBot» bot
SetEnvIfNoCase User-Agent «Sosospider» bot
SetEnvIfNoCase User-Agent «Sogou web spider» bot
SetEnvIfNoCase User-Agent «aesop_com_spiderman» bot
SetEnvIfNoCase User-Agent «SemrushBot» bot
SetEnvIfNoCase User-Agent «backweb» bot
SetEnvIfNoCase User-Agent «batchftp» bot
SetEnvIfNoCase User-Agent «black.hole» bot
SetEnvIfNoCase User-Agent «blackwidow» bot
SetEnvIfNoCase User-Agent «blowfish» bot
SetEnvIfNoCase User-Agent «botalot» bot
SetEnvIfNoCase User-Agent «buddy» bot
SetEnvIfNoCase User-Agent «builtbottough» bot
SetEnvIfNoCase User-Agent «bullseye» bot
SetEnvIfNoCase User-Agent «cheesebot» bot
SetEnvIfNoCase User-Agent «cherrypicker» bot
SetEnvIfNoCase User-Agent «chinaclaw» bot
SetEnvIfNoCase User-Agent «collector» bot
SetEnvIfNoCase User-Agent «copier» bot
SetEnvIfNoCase User-Agent «copyrightcheck» bot
SetEnvIfNoCase User-Agent «cosmos» bot
SetEnvIfNoCase User-Agent «crescent» bot
SetEnvIfNoCase User-Agent «custo» bot
SetEnvIfNoCase User-Agent «da» bot
SetEnvIfNoCase User-Agent «diibot» bot
SetEnvIfNoCase User-Agent «disco» bot
SetEnvIfNoCase User-Agent «dittospyder» bot
SetEnvIfNoCase User-Agent «dragonfly» bot
SetEnvIfNoCase User-Agent «drip» bot
SetEnvIfNoCase User-Agent «easydl» bot
SetEnvIfNoCase User-Agent «ebingbong» bot
SetEnvIfNoCase User-Agent «ecatch» bot
SetEnvIfNoCase User-Agent «eirgrabber» bot
SetEnvIfNoCase User-Agent «emailcollector» bot
SetEnvIfNoCase User-Agent «emailsiphon» bot
SetEnvIfNoCase User-Agent «emailwolf» bot
SetEnvIfNoCase User-Agent «erocrawler» bot
SetEnvIfNoCase User-Agent «exabot» bot
SetEnvIfNoCase User-Agent «eyenetie» bot
SetEnvIfNoCase User-Agent «filehound» bot
SetEnvIfNoCase User-Agent «flashget» bot
SetEnvIfNoCase User-Agent «flunky» bot
SetEnvIfNoCase User-Agent «frontpage» bot
SetEnvIfNoCase User-Agent «getright» bot
SetEnvIfNoCase User-Agent «getweb» bot
SetEnvIfNoCase User-Agent «go.?zilla» bot
SetEnvIfNoCase User-Agent «go-ahead-got-it» bot
SetEnvIfNoCase User-Agent «gotit» bot
SetEnvIfNoCase User-Agent «grabnet» bot
SetEnvIfNoCase User-Agent «grafula» bot
SetEnvIfNoCase User-Agent «harvest» bot
SetEnvIfNoCase User-Agent «hloader» bot
SetEnvIfNoCase User-Agent «hmview» bot
SetEnvIfNoCase User-Agent «httplib» bot
SetEnvIfNoCase User-Agent «httrack» bot
SetEnvIfNoCase User-Agent «humanlinks» bot
SetEnvIfNoCase User-Agent «ilsebot» bot
SetEnvIfNoCase User-Agent «infonavirobot» bot
SetEnvIfNoCase User-Agent «infotekies» bot
SetEnvIfNoCase User-Agent «intelliseek» bot
SetEnvIfNoCase User-Agent «interget» bot
SetEnvIfNoCase User-Agent «iria» bot
SetEnvIfNoCase User-Agent «jennybot» bot
SetEnvIfNoCase User-Agent «jetcar» bot
SetEnvIfNoCase User-Agent «joc» bot
SetEnvIfNoCase User-Agent «justview» bot
SetEnvIfNoCase User-Agent «jyxobot» bot
SetEnvIfNoCase User-Agent «kenjin» bot
SetEnvIfNoCase User-Agent «keyword» bot
SetEnvIfNoCase User-Agent «larbin» bot
SetEnvIfNoCase User-Agent «leechftp» bot
SetEnvIfNoCase User-Agent «lexibot» bot
SetEnvIfNoCase User-Agent «lftp» bot
SetEnvIfNoCase User-Agent «libweb» bot
SetEnvIfNoCase User-Agent «likse» bot
SetEnvIfNoCase User-Agent «linkscan» bot
SetEnvIfNoCase User-Agent «linkwalker» bot
SetEnvIfNoCase User-Agent «lnspiderguy» bot
SetEnvIfNoCase User-Agent «lwp» bot
SetEnvIfNoCase User-Agent «magnet» bot
SetEnvIfNoCase User-Agent «mag-net» bot
SetEnvIfNoCase User-Agent «markwatch» bot
SetEnvIfNoCase User-Agent «mata.hari» bot
SetEnvIfNoCase User-Agent «memo» bot
SetEnvIfNoCase User-Agent «microsoft.url» bot
SetEnvIfNoCase User-Agent «midown.tool» bot
SetEnvIfNoCase User-Agent «miixpc» bot
SetEnvIfNoCase User-Agent «mirror» bot
SetEnvIfNoCase User-Agent «missigua» bot
SetEnvIfNoCase User-Agent «mister.pix» bot
SetEnvIfNoCase User-Agent «moget» bot
SetEnvIfNoCase User-Agent «mozilla.newt» bot
SetEnvIfNoCase User-Agent «nameprotect» bot
SetEnvIfNoCase User-Agent «navroad» bot
SetEnvIfNoCase User-Agent «backdoorbot» bot
SetEnvIfNoCase User-Agent «nearsite» bot
SetEnvIfNoCase User-Agent «net.?vampire» bot
SetEnvIfNoCase User-Agent «netants» bot
SetEnvIfNoCase User-Agent «netcraft» bot
SetEnvIfNoCase User-Agent «netmechanic» bot
SetEnvIfNoCase User-Agent «netspider» bot
SetEnvIfNoCase User-Agent «nextgensearchbot» bot
SetEnvIfNoCase User-Agent «attach» bot
SetEnvIfNoCase User-Agent «nicerspro» bot
SetEnvIfNoCase User-Agent «nimblecrawler» bot
SetEnvIfNoCase User-Agent «npbot» bot
SetEnvIfNoCase User-Agent «octopus» bot
SetEnvIfNoCase User-Agent «offline.?explorer» bot
SetEnvIfNoCase User-Agent «offline.navigator» bot
SetEnvIfNoCase User-Agent «openfind» bot
SetEnvIfNoCase User-Agent «outfoxbot» bot
SetEnvIfNoCase User-Agent «pagegrabber» bot
SetEnvIfNoCase User-Agent «papa» bot
SetEnvIfNoCase User-Agent «pavuk» bot
SetEnvIfNoCase User-Agent «pcbrowser» bot
SetEnvIfNoCase User-Agent «php.?version.?tracker» bot
SetEnvIfNoCase User-Agent «pockey» bot
SetEnvIfNoCase User-Agent «propowerbot» bot
SetEnvIfNoCase User-Agent «prowebwalker» bot
SetEnvIfNoCase User-Agent «psbot» bot
SetEnvIfNoCase User-Agent «pump» bot
SetEnvIfNoCase User-Agent «queryn» bot
SetEnvIfNoCase User-Agent «recorder» bot
SetEnvIfNoCase User-Agent «realdownload» bot
SetEnvIfNoCase User-Agent «reaper» bot
SetEnvIfNoCase User-Agent «reget» bot
SetEnvIfNoCase User-Agent «true_robot» bot
SetEnvIfNoCase User-Agent «repomonkey» bot
SetEnvIfNoCase User-Agent «rma» bot
SetEnvIfNoCase User-Agent «internetseer» bot
SetEnvIfNoCase User-Agent «sitesnagger» bot
SetEnvIfNoCase User-Agent «siphon» bot
SetEnvIfNoCase User-Agent «slysearch» bot
SetEnvIfNoCase User-Agent «smartdownload» bot
SetEnvIfNoCase User-Agent «snake» bot
SetEnvIfNoCase User-Agent «snapbot» bot
SetEnvIfNoCase User-Agent «snoopy» bot
SetEnvIfNoCase User-Agent «sogou» bot
SetEnvIfNoCase User-Agent «spacebison» bot
SetEnvIfNoCase User-Agent «spankbot» bot
SetEnvIfNoCase User-Agent «spanner» bot
SetEnvIfNoCase User-Agent «sqworm» bot
SetEnvIfNoCase User-Agent «superbot» bot
SetEnvIfNoCase User-Agent «superhttp» bot
SetEnvIfNoCase User-Agent «surfbot» bot
SetEnvIfNoCase User-Agent «asterias» bot
SetEnvIfNoCase User-Agent «suzuran» bot
SetEnvIfNoCase User-Agent «szukacz» bot
SetEnvIfNoCase User-Agent «takeout» bot
SetEnvIfNoCase User-Agent «teleport» bot
SetEnvIfNoCase User-Agent «telesoft» bot
SetEnvIfNoCase User-Agent «the.intraformant» bot
SetEnvIfNoCase User-Agent «thenomad» bot
SetEnvIfNoCase User-Agent «tighttwatbot» bot
SetEnvIfNoCase User-Agent «titan» bot
SetEnvIfNoCase User-Agent «urldispatcher» bot
SetEnvIfNoCase User-Agent «turingos» bot
SetEnvIfNoCase User-Agent «turnitinbot» bot
SetEnvIfNoCase User-Agent «urly.warning» bot
SetEnvIfNoCase User-Agent «vacuum» bot
SetEnvIfNoCase User-Agent «vci» bot
SetEnvIfNoCase User-Agent «voideye» bot
SetEnvIfNoCase User-Agent «whacker» bot
SetEnvIfNoCase User-Agent «libwww-perl» bot
SetEnvIfNoCase User-Agent «widow» bot
SetEnvIfNoCase User-Agent «wisenutbot» bot
SetEnvIfNoCase User-Agent «wwwoffle» bot
SetEnvIfNoCase User-Agent «xaldon» bot
SetEnvIfNoCase User-Agent «xenu» bot
SetEnvIfNoCase User-Agent «zeus» bot
SetEnvIfNoCase User-Agent «zyborg» bot
SetEnvIfNoCase User-Agent «anonymouse» bot
SetEnvIfNoCase User-Agent «zip» bot
SetEnvIfNoCase User-Agent «emaile» bot
SetEnvIfNoCase User-Agent «enhancer» bot
SetEnvIfNoCase User-Agent «fetch» bot
SetEnvIfNoCase User-Agent «go.?is» bot
SetEnvIfNoCase User-Agent «auto» bot
SetEnvIfNoCase User-Agent «bandit» bot
SetEnvIfNoCase User-Agent «clip» bot
SetEnvIfNoCase User-Agent «sauger» bot
SetEnvIfNoCase User-Agent «site.quester» bot
SetEnvIfNoCase User-Agent «whack» bot
SetEnvIfNoCase User-Agent «craftbot» bot
SetEnvIfNoCase User-Agent «download» bot
SetEnvIfNoCase User-Agent «extract» bot
SetEnvIfNoCase User-Agent «stripper» bot
SetEnvIfNoCase User-Agent «sucker» bot
SetEnvIfNoCase User-Agent «ninja» bot
SetEnvIfNoCase User-Agent «clshttp» bot
SetEnvIfNoCase User-Agent «webspider» bot
SetEnvIfNoCase User-Agent «leacher» bot
SetEnvIfNoCase User-Agent «grabber» bot
SetEnvIfNoCase User-Agent «webpictures» bot
SetEnvIfNoCase User-Agent «Jakarta» bot
SetEnvIfNoCase User-Agent «User-Agent» bot
SetEnvIfNoCase User-Agent «libwww» bot
SetEnvIfNoCase User-Agent «lwp-trivial» bot
SetEnvIfNoCase User-Agent «PHPCrawl» bot
SetEnvIfNoCase User-Agent «WEP Search» bot
SetEnvIfNoCase User-Agent «Missigua Locator» bot
SetEnvIfNoCase User-Agent «ISC Systems iRc» bot
SetEnvIfNoCase User-Agent «Aboundex» bot
SetEnvIfNoCase User-Agent «360Spider» bot
SetEnvIfNoCase User-Agent «Java» bot
SetEnvIfNoCase User-Agent «Cogentbot» bot
SetEnvIfNoCase User-Agent «BunnySlippers» bot
SetEnvIfNoCase User-Agent «Cegbfeieh» bot
SetEnvIfNoCase User-Agent «AIBOT» bot
SetEnvIfNoCase User-Agent «Demon» bot
SetEnvIfNoCase User-Agent «Devil» bot
SetEnvIfNoCase User-Agent «Wonder» bot
SetEnvIfNoCase User-Agent «Foobot» bot
SetEnvIfNoCase User-Agent «Kenjin Spider» bot
SetEnvIfNoCase User-Agent «Density» bot
SetEnvIfNoCase User-Agent «LinkextractorPro» bot
SetEnvIfNoCase User-Agent «LWP::Simple» bot
SetEnvIfNoCase User-Agent «MassDownloader» bot
SetEnvIfNoCase User-Agent «Mass Downloader» bot
SetEnvIfNoCase User-Agent «NetZIP» bot
SetEnvIfNoCase User-Agent «NG» bot
SetEnvIfNoCase User-Agent «Metasearch» bot
SetEnvIfNoCase User-Agent «WebFetch» bot
SetEnvIfNoCase User-Agent «WebCopier» bot
SetEnvIfNoCase User-Agent «Webclipping» bot
SetEnvIfNoCase User-Agent «WebBandit» bot
SetEnvIfNoCase User-Agent «WebAuto» bot
SetEnvIfNoCase User-Agent «WebGo» bot
SetEnvIfNoCase User-Agent «Web.Image.Collector» bot
SetEnvIfNoCase User-Agent «WebLeacher» bot
SetEnvIfNoCase User-Agent «WebmasterWorldForumBot» bot
SetEnvIfNoCase User-Agent «WebReaper» bot
SetEnvIfNoCase User-Agent «WebSauger» bot
SetEnvIfNoCase User-Agent «eXtractor» bot
SetEnvIfNoCase User-Agent «Webster» bot
SetEnvIfNoCase User-Agent «WebStripper» bot
SetEnvIfNoCase User-Agent «WebWhacker» bot
SetEnvIfNoCase User-Agent «WebZIP» bot
SetEnvIfNoCase User-Agent «Slurp» bot
SetEnvIfNoCase User-Agent «slurp» bot
SetEnvIfNoCase User-Agent «msnbot» bot
SetEnvIfNoCase User-Agent «bingbot» bot
SetEnvIfNoCase User-Agent «musobot» bot
SetEnvIfNoCase User-Agent «MJ12bot» bot
SetEnvIfNoCase User-Agent «AhrefsBot» bot
SetEnvIfNoCase User-Agent «NjuiceBot» bot
SetEnvIfNoCase User-Agent «Gigabot» bot
SetEnvIfNoCase User-Agent «Baiduspider» bot
SetEnvIfNoCase User-Agent «JS-Kit» bot
SetEnvIfNoCase User-Agent «Voyager» bot
SetEnvIfNoCase User-Agent «PostRank» bot
SetEnvIfNoCase User-Agent «PycURL» bot
SetEnvIfNoCase User-Agent «Aport» bot
SetEnvIfNoCase User-Agent «ia_archiver» bot
SetEnvIfNoCase User-Agent «DotBot» bot
SetEnvIfNoCase User-Agent «SurveyBot» bot
SetEnvIfNoCase User-Agent «Butterfly» bot
SetEnvIfNoCase User-Agent «Wget» bot
SetEnvIfNoCase User-Agent «SWeb» bot
SetEnvIfNoCase User-Agent «LinkExchanger» bot
SetEnvIfNoCase User-Agent «Soup» bot
SetEnvIfNoCase User-Agent «WordPress» bot
SetEnvIfNoCase User-Agent «spbot» bot
SetEnvIfNoCase User-Agent «MLBot» bot
SetEnvIfNoCase User-Agent «InternetSeer» bot
SetEnvIfNoCase User-Agent «FairShare» bot
SetEnvIfNoCase User-Agent «Yeti» bot
SetEnvIfNoCase User-Agent «Birubot» bot
SetEnvIfNoCase User-Agent «YottosBot» bot
SetEnvIfNoCase User-Agent «Linguee» bot
SetEnvIfNoCase User-Agent «Ezooms» bot
SetEnvIfNoCase User-Agent «Purebot» bot
SetEnvIfNoCase User-Agent «kmSearchBot» bot
SetEnvIfNoCase User-Agent «SiteBot» bot
SetEnvIfNoCase User-Agent «CamontSpider» bot
SetEnvIfNoCase User-Agent «ptd-crawler» bot
SetEnvIfNoCase User-Agent «HTTrack» bot
SetEnvIfNoCase User-Agent «suggybot» bot
SetEnvIfNoCase User-Agent «ttCrawler» bot
SetEnvIfNoCase User-Agent «Nutch» bot
SetEnvIfNoCase User-Agent «SputnikBot» bot
SetEnvIfNoCase User-Agent «SputnikImageBot» bot
SetEnvIfNoCase User-Agent «Yahoo» bot
SetEnvIfNoCase User-Agent «MegaIndex» bot
SetEnvIfNoCase User-Agent «Pinterestbot» bot
SetEnvIfNoCase User-Agent «BLEXBot» bot
SetEnvIfNoCase User-Agent «80legs» bot
SetEnvIfNoCase User-Agent «Alexibot» bot
SetEnvIfNoCase User-Agent «BackDoorBot» bot
SetEnvIfNoCase User-Agent «BackWeb» bot
SetEnvIfNoCase User-Agent «Bandit» bot
SetEnvIfNoCase User-Agent «BatchFTP» bot
SetEnvIfNoCase User-Agent «Bigfoot» bot
SetEnvIfNoCase User-Agent «Black.Hole» bot
SetEnvIfNoCase User-Agent «BlackWidow» bot
SetEnvIfNoCase User-Agent «BlowFish» bot
SetEnvIfNoCase User-Agent «BotALot» bot
SetEnvIfNoCase User-Agent «Buddy» bot
SetEnvIfNoCase User-Agent «BuiltBotTough» bot
SetEnvIfNoCase User-Agent «Bullseye» bot
SetEnvIfNoCase User-Agent «CheeseBot» bot
SetEnvIfNoCase User-Agent «CherryPicker» bot
SetEnvIfNoCase User-Agent «ChinaClaw» bot
SetEnvIfNoCase User-Agent «Collector» bot
SetEnvIfNoCase User-Agent «Copier» bot
SetEnvIfNoCase User-Agent «CopyRightCheck» bot
SetEnvIfNoCase User-Agent «Crescent» bot
SetEnvIfNoCase User-Agent «Custo» bot
SetEnvIfNoCase User-Agent «DISCo» bot
SetEnvIfNoCase User-Agent «DIIbot» bot
SetEnvIfNoCase User-Agent «DittoSpyder» bot
SetEnvIfNoCase User-Agent «Download Demon» bot
SetEnvIfNoCase User-Agent «Download Devil» bot
SetEnvIfNoCase User-Agent «Download Wonder» bot
SetEnvIfNoCase User-Agent «Drip» bot
SetEnvIfNoCase User-Agent «eCatch» bot
SetEnvIfNoCase User-Agent «EasyDL» bot
SetEnvIfNoCase User-Agent «EirGrabber» bot
SetEnvIfNoCase User-Agent «EmailCollector» bot
SetEnvIfNoCase User-Agent «EmailSiphon» bot
SetEnvIfNoCase User-Agent «EmailWolf» bot
SetEnvIfNoCase User-Agent «EroCrawler» bot
SetEnvIfNoCase User-Agent «Exabot» bot
SetEnvIfNoCase User-Agent «Express WebPictures» bot
SetEnvIfNoCase User-Agent «Extractor» bot
SetEnvIfNoCase User-Agent «EyeNetIE» bot
SetEnvIfNoCase User-Agent «FrontPage» bot
SetEnvIfNoCase User-Agent «Go-Ahead-Got-It» bot
SetEnvIfNoCase User-Agent «GrabNet» bot
SetEnvIfNoCase User-Agent «Grafula» bot
SetEnvIfNoCase User-Agent «Harvest» bot
SetEnvIfNoCase User-Agent «HMView» bot
SetEnvIfNoCase User-Agent «IlseBot» bot
SetEnvIfNoCase User-Agent «Image Stripper» bot
SetEnvIfNoCase User-Agent «Image Sucker» bot
SetEnvIfNoCase User-Agent «Indy Library» bot
SetEnvIfNoCase User-Agent «InfoNavibot» bot
SetEnvIfNoCase User-Agent «InfoTekies» bot
SetEnvIfNoCase User-Agent «Intelliseek» bot
SetEnvIfNoCase User-Agent «InterGET» bot
SetEnvIfNoCase User-Agent «Internet Ninja» bot
SetEnvIfNoCase User-Agent «Iria» bot
SetEnvIfNoCase User-Agent «JennyBot» bot
SetEnvIfNoCase User-Agent «JetCar» bot
SetEnvIfNoCase User-Agent «JOC» bot
SetEnvIfNoCase User-Agent «JustView» bot
SetEnvIfNoCase User-Agent «Jyxobot» bot
SetEnvIfNoCase User-Agent «Kenjin.Spider» bot
SetEnvIfNoCase User-Agent «Keyword.Density» bot
SetEnvIfNoCase User-Agent «LexiBot» bot
SetEnvIfNoCase User-Agent «libWeb/clsHTTP» bot
SetEnvIfNoCase User-Agent «LinkScan/8.1a.Unix» bot
SetEnvIfNoCase User-Agent «LNSpiderguy» bot
SetEnvIfNoCase User-Agent «LinkWalker» bot
SetEnvIfNoCase User-Agent «Magnet» bot
SetEnvIfNoCase User-Agent «Mag-Net» bot
SetEnvIfNoCase User-Agent «MarkWatch» bot
SetEnvIfNoCase User-Agent «Mass Downloader» bot
SetEnvIfNoCase User-Agent «Mata.Hari» bot
SetEnvIfNoCase User-Agent «Memo» bot
SetEnvIfNoCase User-Agent «Microsoft.URL» bot
SetEnvIfNoCase User-Agent «Microsoft URL Control» bot
SetEnvIfNoCase User-Agent «MIDown tool» bot
SetEnvIfNoCase User-Agent «MIIxpc» bot
SetEnvIfNoCase User-Agent «Mirror» bot
SetEnvIfNoCase User-Agent «Missigua Locator» bot
SetEnvIfNoCase User-Agent «Mister PiX» bot
SetEnvIfNoCase User-Agent «NAMEPROTECT» bot
SetEnvIfNoCase User-Agent «Navroad» bot
SetEnvIfNoCase User-Agent «NearSite» bot
SetEnvIfNoCase User-Agent «NetAnts» bot
SetEnvIfNoCase User-Agent «Netcraft» bot
SetEnvIfNoCase User-Agent «NetMechanic» bot
SetEnvIfNoCase User-Agent «NetSpider» bot
SetEnvIfNoCase User-Agent «Net Vampire» bot
SetEnvIfNoCase User-Agent «NextGenSearchBot» bot
SetEnvIfNoCase User-Agent «NICErsPRO» bot
SetEnvIfNoCase User-Agent «niki-bot» bot
SetEnvIfNoCase User-Agent «NimbleCrawler» bot
SetEnvIfNoCase User-Agent «Ninja» bot
SetEnvIfNoCase User-Agent «NPbot» bot
SetEnvIfNoCase User-Agent «Octopus» bot
SetEnvIfNoCase User-Agent «Offline Explorer» bot
SetEnvIfNoCase User-Agent «Offline Navigator» bot
SetEnvIfNoCase User-Agent «Openfind» bot
SetEnvIfNoCase User-Agent «OutfoxBot» bot
SetEnvIfNoCase User-Agent «PageGrabber» bot
SetEnvIfNoCase User-Agent «Papa Foto» bot
SetEnvIfNoCase User-Agent «pcBrowser» bot
SetEnvIfNoCase User-Agent «PHP version tracker» bot
SetEnvIfNoCase User-Agent «Pockey» bot
SetEnvIfNoCase User-Agent «ProPowerBot/2.14» bot
SetEnvIfNoCase User-Agent «ProWebWalker» bot
SetEnvIfNoCase User-Agent «Pump» bot
SetEnvIfNoCase User-Agent «QueryN.Metasearch» bot
SetEnvIfNoCase User-Agent «RealDownload» bot
SetEnvIfNoCase User-Agent «Reaper» bot
SetEnvIfNoCase User-Agent «Recorder» bot
SetEnvIfNoCase User-Agent «ReGet» bot
SetEnvIfNoCase User-Agent «RepoMonkey» bot
SetEnvIfNoCase User-Agent «RMA» bot
SetEnvIfNoCase User-Agent «Siphon» bot
SetEnvIfNoCase User-Agent «SiteSnagger» bot
SetEnvIfNoCase User-Agent «SlySearch» bot
SetEnvIfNoCase User-Agent «SmartDownload» bot
SetEnvIfNoCase User-Agent «Snake» bot
SetEnvIfNoCase User-Agent «Snapbot» bot
SetEnvIfNoCase User-Agent «Snoopy» bot
SetEnvIfNoCase User-Agent «SpaceBison» bot
SetEnvIfNoCase User-Agent «SpankBot» bot
SetEnvIfNoCase User-Agent «Sqworm» bot
SetEnvIfNoCase User-Agent «Stripper» bot
SetEnvIfNoCase User-Agent «Sucker» bot
SetEnvIfNoCase User-Agent «SuperBot» bot
SetEnvIfNoCase User-Agent «SuperHTTP» bot
SetEnvIfNoCase User-Agent «Surfbot» bot
SetEnvIfNoCase User-Agent «Szukacz/1.4» bot
SetEnvIfNoCase User-Agent «tAkeOut» bot
SetEnvIfNoCase User-Agent «Teleport» bot
SetEnvIfNoCase User-Agent «Telesoft» bot
SetEnvIfNoCase User-Agent «TurnitinBot/1.5» bot
SetEnvIfNoCase User-Agent «The.Intraformant» bot
SetEnvIfNoCase User-Agent «TheNomad» bot
SetEnvIfNoCase User-Agent «TightTwatBot» bot
SetEnvIfNoCase User-Agent «Titan» bot
SetEnvIfNoCase User-Agent «True_bot» bot
SetEnvIfNoCase User-Agent «TurnitinBot» bot
SetEnvIfNoCase User-Agent «URLy.Warning» bot
SetEnvIfNoCase User-Agent «Vacuum» bot
SetEnvIfNoCase User-Agent «VCI» bot
SetEnvIfNoCase User-Agent «VoidEYE» bot
SetEnvIfNoCase User-Agent «Web Image Collector» bot
SetEnvIfNoCase User-Agent «Web Sucker» bot
SetEnvIfNoCase User-Agent «Webclipping.com» bot
SetEnvIfNoCase User-Agent «WebEMailExtrac.*» bot
SetEnvIfNoCase User-Agent «WebEnhancer» bot
SetEnvIfNoCase User-Agent «WebGo IS» bot
SetEnvIfNoCase User-Agent «Website eXtractor» bot
SetEnvIfNoCase User-Agent «Website Quester» bot
SetEnvIfNoCase User-Agent «Whacker» bot
SetEnvIfNoCase User-Agent «Widow» bot
SetEnvIfNoCase User-Agent «WISENutbot» bot
SetEnvIfNoCase User-Agent «WWWOFFLE» bot
SetEnvIfNoCase User-Agent «WWW-Collector-E» bot
SetEnvIfNoCase User-Agent «Xaldon» bot
SetEnvIfNoCase User-Agent «Xenu» bot
SetEnvIfNoCase User-Agent «Zeus» bot
SetEnvIfNoCase User-Agent «ZmEu» bot
SetEnvIfNoCase User-Agent «Zyborg» bot
SetEnvIfNoCase User-Agent «HubSpot» bot
SetEnvIfNoCase User-Agent «archive.org_bot» bot
SetEnvIfNoCase User-Agent «SemrushBot/2~bl» bot