Ochrana proti spybotům, návod

Tak se omlouvám, nějak jsem to zapoměl dát do názvu tématu: je to pro Joomlu a VirtueMart, i když jinde to bude chodit taky, tedy až na tu mapu stránek. Na některé e-shopy mi neustále lezl spybot AhrefsBot, podle tvůrců má prý analyzovat SEO stránek, což se mi moc nezdá, navíc jsem jej nezval a o jeho služby nestojím. Podle jiných analýz zatíží stránky současným otevřením velkého množství stránek a pak podle chování http serveru analyzuje jeho odezvy a testuje zabezpečení pro případné napadnutí stránek, tedy jejich zavirování. (Např. pro vytvoření spamserveru, tedy stroje pro odesílání velkého množství spamu.)Zatrhnout se mu to dá na úrovni .htaccess, kdy jej samotný http server dál nepustí. Také je třeba jej zarazit v souboru robots.txt, to ale je jenom kosmetická a nevynutitelná ochrana. Slušní roboti obsah robots.txt respektují, ti neslušní na něj kašlou.A pak jsem ještě měl na stránkách masivní návštěvnost z jedné IP adresy, ale tvářící se jako mnoho domén s názvy typy buyviagraonline.com. To sice nevím co to má znamenat, pokus o podvrhnutí zpětných odkazů? Nicméně jsem jim to zatrhnul také.Do .htaccess si přidejte někam z kraje## Zablokujeme přístup z spybota Ahrefsbot, zmetci Ukrajinskýdeny from 5.10.83.0/25deny from 31.184.238.95A robots.txt by měl vypadat takto:User-agent: BaiduspiderDisallow: /User-agent: AhrefsBotDisallow: /User-agent: *Disallow: /administrator/Disallow: /bbclone/Disallow: /cache/Disallow: /components/Disallow: /images/Disallow: /includes/Disallow: /installation/Disallow: /language/Disallow: /libraries/Disallow: /media/Disallow: /modules/Disallow: /plugins/Disallow: /templates/Disallow: /tmp/Disallow: /xmlrpc/Allow: /components/com_virtuemart/shop_image/product/#Sitemap: http://www.domain.tld/index.php?option=com_xmap&sitemap=1&view=xmlMapa stránek je zakomentovaná, pokud používáte pro mapu stránek Xmap, tak ten příkaz odkomentujte a opravte si tam jméno domény (napište svou doménu). Joa blokuji tam také Baiduspider, k ničemu mi není a jenom otravuje.

Víš že takový robotů jsou 10000 a více :) A stačí jim jen změnit IP, dle a tvá úprava je k ničemu?:)Pokud už chcete blokovat roboty zkuste na to jít jiným způsobem.Já k detekci robotů používám :: user-agent-string.info http://user-agent-string.info/cs/.Nezakazuju jim přístup, jen pokud příjde detekovaný robot nezapisuju např. statistiky zobrazení článků, reklam, atd.