Portal Home » Knowledgebase » 3. Asistență tehnică și backup de date » Ce roboți web blochează Chroot ?
Ce roboți web blochează Chroot ?
Am analizat traficul făcut de majoritatea motoarelor de căutare dar și a altor entități ce analizează website-urile în mod automat și am descoperit că există foarte mulți roboți web care generează trafic și încărcari suplimentare pe website-uri fără a exista un motiv concret sau o explicație.
Chroot blochează următorii roboți web identificați după User-Agent fără o anumită ordine:
| MJ12bot spbot Aboundex 80legs 360Spider Java Cogentbot Alexibot asterias attach BackDoorBot BackWeb Bandit BatchFTP Bigfoot Black.Hole BlackWidow BlowFish BotALot Buddy BuiltBotTough Bullseye BunnySlippers Cegbfeieh CheeseBot CherryPicker ChinaClaw Collector Copier CopyRightCheck cosmos Crescent Custo AIBOT DISCo DIIbot DittoSpyder Download Download dragonfly Drip eCatch EasyDL ebingbong EirGrabber EmailCollector EmailSiphon EmailWolf EroCrawler Exabot Express Extractor EyeNetIE Foobot flunky FrontPage Go-Ahead-Got-It gotit GrabNet Grafula Harvest hloader HMView HTTrack humanlinks IlseBot Image Image Indy InfoNaviRobot InfoTekies Intelliseek InterGET Internet Iria Jakarta JennyBot JetCar JOC JustView Jyxobot Kenjin.Spider Keyword.Density larbin LexiBot lftp libWeb/clsHTTP likse LinkextractorPro LinkScan/8.1a.Unix LNSpiderguy LinkWalker lwp-trivial LWP::Simple Magnet Mag-Net MarkWatch Mass Mata.Hari Memo Microsoft.URL Microsoft MIDown MIIxpc Mirror Missigua Mister moget Mozilla/3.Mozilla/2.01 |
Mozilla.*NEWT NAMEPROTECT Navroad NearSite NetAnts Netcraft NetMechanic NetSpider Net NetZIP NextGenSearchBot NG NICErsPRO niki-bot NimbleCrawler Ninja NPbot Octopus Offline Offline Openfind OutfoxBot PageGrabber Papa pavuk pcBrowser PHP Pockey ProPowerBot/2.14 ProWebWalker psbot Pump QueryN.Metasearch RealDownload Reaper Recorder ReGet RepoMonkey RMA Siphon SiteSnagger SlySearch SmartDownload Snake Snapbot Snoopy sogou SpaceBison SpankBot spanner Sqworm Stripper Sucker SuperBot SuperHTTP Surfbot suzuran Szukacz/1.4 tAkeOut Teleport Telesoft TurnitinBot/1.5 The.Intraformant TheNomad TightTwatBot Titan True_Robot turingos TurnitinBot URLy.Warning Vacuum VCI VoidEYE Web Web WebAuto WebBandit Webclipping.com WebCopier WebEMailExtrac.* WebEnhancer WebFetch WebGo Web.Image.Collector WebLeacher WebmasterWorldForumBot WebReaper WebSauger Website Website Webster WebStripper WebWhacker WebZIP Whacker Widow WISENutbot WWWOFFLE WWW-Collector-E Xaldon Xenu Zeus ZmEu Zyborg AhrefsBot Acunetix FHscan |
Dacă considerați că am blocat un anumit robot fără motiv, vă rugăm să ne contactați.
