Jak zpomalit indexování webu od robotů?

verified

(13 hodnocení)

10. 6. 2014 09:51:46

Dá se nějak zpomalit rychlost, jakou roboti (hlavně Google a Bing) stahují stránky pro aktualizaci svých indexů? Denně mi načtou desítky tisíc stránek a udělají tím několikanásobně větší zátěž, než jakou generují samotní reální návštěvníci a server má pak díky tomu problémy s přetížením. Mám pocit že to kdysi šlo minimálně ve WebmasterTools od Google, ale teď to tam už najít nemůžu.

Jde o weby co mají dohromady několik set tisíc stránek, nicméně u většiny není potřeba aby je vyhledávače denně aktualizovaly, některé se prakticky nemění.

Weby už jsou několik let staré a ve výsledcích vyhledávačů se zobrazují na výborných místech, takže řešení typu úplně zakázat indexování bych se rád vyhnul ;-)

10. 6. 2014 09:51:46

https://webtrh.cz/diskuse/jak-zpomalit-indexovani-webu-od-robotu#reply1030757

verified

(15 hodnocení)

10. 6. 2014 10:02:07

V Google Webmaster Tools můžeš nastavit ručně kolik stránek a za sekundu mohou roboti procházet. Dá se to omezit i v robots.txt, ale toto bývá roboty ignorováno. Ostatní se nejspíše nastavit nedají, můžeš jim ale např. zablokovat přístup.

10. 6. 2014 10:02:07

https://webtrh.cz/diskuse/jak-zpomalit-indexovani-webu-od-robotu#reply1030756

verified

(13 hodnocení)

10. 6. 2014 10:22:20

Napsal Caesar;1096655
V Google Webmaster Tools můžeš nastavit ručně kolik stránek a za sekundu mohou roboti procházet.

Můžeš mě navést kde to tam přesně najdu? Nikde to tam nevidím.

10. 6. 2014 10:22:20

https://webtrh.cz/diskuse/jak-zpomalit-indexovani-webu-od-robotu#reply1030755

Miloslav Lešetický

verified

(10 hodnocení)

10. 6. 2014 10:31:42

Kovboj

U konkrétního webu - Ozubené kolečko vpravo nahoře - Nastavení webu - Četnost procházení.

10. 6. 2014 10:31:42

https://webtrh.cz/diskuse/jak-zpomalit-indexovani-webu-od-robotu#reply1030754

verified

(13 hodnocení)

10. 6. 2014 10:47:25

Napsal Plaváček;1096665
Kovboj
U konkrétního webu - Ozubené kolečko vpravo nahoře - Nastavení webu - Četnost procházení.

Díky, nějak dneska nemám svůj den a rozklikával jsem to tam jen bez zvoleného webu.

10. 6. 2014 10:47:25

https://webtrh.cz/diskuse/jak-zpomalit-indexovani-webu-od-robotu#reply1030753

Pro odpověď se přihlašte.

Prodej Více

Fondik.cz

600 000 Kč

0 příhozů

Prodej e-shopu Benolld.cz Benolld.sk

5 000 Kč

0 příhozů

Fitness Servis ziskový projekt s historií a obrovským potenciálem

39 000 Kč

0 příhozů

🟢 Na prodej: Plyn.online – výstižná doména pro energetiku a online služby!

1 399 Kč

0 příhozů

Prémiová třípísmenná doména MZP.sk (historie od 2007)

2 399 Kč

0 příhozů

Poptávky Více

Sales Representative pro Webout

Golden Capital – investujte do zlata s námi

VÝROBA A PRODEJ MOBILNÍCH DOMŮ

Hledám pomoc s tvorbou obrázků pro konfigurátor skříní (AI nebo grafika)

Full‑stack vývojář mobilní aplikace + webového CRM/Admin rozhraní

Pracovní nabídky Více

PHP PROGRAMÁTOR

40 000 - 95 000 Kč

ACCOUNT MANAGER

40 000 - 60 000 Kč

Vývojář s C#

MS SQL programátor

55 000 - 80 000 Kč

Vývojář C# pro HELIOS Nephrite

Brno, Práce z domu

Nabídky Více

Web na míru za 7 dní od 7500,-

😟 Máte málo zákazníků? Změníme to! 📈 Víme, jak je přivést.

💼 Budujete osobní značku, ale nedaří se? Pomůžeme vám vyrůst na sítích! 🌱

🔥 Facebook reklama, která opravdu funguje – Přestaňte zkoušet naslepo! 🚀

Hotové minisites bez dané ceny