Zadejte hledaný výraz...

Jak zpomalit indexování webu od robotů?

Kovboj
verified
rating uzivatele
(13 hodnocení)
10. 6. 2014 09:51:46
Dá se nějak zpomalit rychlost, jakou roboti (hlavně Google a Bing) stahují stránky pro aktualizaci svých indexů? Denně mi načtou desítky tisíc stránek a udělají tím několikanásobně větší zátěž, než jakou generují samotní reální návštěvníci a server má pak díky tomu problémy s přetížením. Mám pocit že to kdysi šlo minimálně ve WebmasterTools od Google, ale teď to tam už najít nemůžu.
Jde o weby co mají dohromady několik set tisíc stránek, nicméně u většiny není potřeba aby je vyhledávače denně aktualizovaly, některé se prakticky nemění.
Weby už jsou několik let staré a ve výsledcích vyhledávačů se zobrazují na výborných místech, takže řešení typu úplně zakázat indexování bych se rád vyhnul ;-)
10. 6. 2014 09:51:46
https://webtrh.cz/diskuse/jak-zpomalit-indexovani-webu-od-robotu/#reply1030757
Roman
verified
rating uzivatele
(15 hodnocení)
10. 6. 2014 10:02:07
V Google Webmaster Tools můžeš nastavit ručně kolik stránek a za sekundu mohou roboti procházet. Dá se to omezit i v robots.txt, ale toto bývá roboty ignorováno. Ostatní se nejspíše nastavit nedají, můžeš jim ale např. zablokovat přístup.
10. 6. 2014 10:02:07
https://webtrh.cz/diskuse/jak-zpomalit-indexovani-webu-od-robotu/#reply1030756
Kovboj
verified
rating uzivatele
(13 hodnocení)
10. 6. 2014 10:22:20
Napsal Caesar;1096655
V Google Webmaster Tools můžeš nastavit ručně kolik stránek a za sekundu mohou roboti procházet.
Můžeš mě navést kde to tam přesně najdu? Nikde to tam nevidím.
10. 6. 2014 10:22:20
https://webtrh.cz/diskuse/jak-zpomalit-indexovani-webu-od-robotu/#reply1030755
Kovboj
U konkrétního webu - Ozubené kolečko vpravo nahoře - Nastavení webu - Četnost procházení.
10. 6. 2014 10:31:42
https://webtrh.cz/diskuse/jak-zpomalit-indexovani-webu-od-robotu/#reply1030754
Kovboj
verified
rating uzivatele
(13 hodnocení)
10. 6. 2014 10:47:25
Napsal Plaváček;1096665
Kovboj
U konkrétního webu - Ozubené kolečko vpravo nahoře - Nastavení webu - Četnost procházení.
Díky, nějak dneska nemám svůj den a rozklikával jsem to tam jen bez zvoleného webu.
10. 6. 2014 10:47:25
https://webtrh.cz/diskuse/jak-zpomalit-indexovani-webu-od-robotu/#reply1030753
Pro odpověď se přihlašte.
Přihlásit