Jak zpomalit indexování webu od robotů?

verified

(13 hodnocení)

10. 6. 2014 09:51:46

Dá se nějak zpomalit rychlost, jakou roboti (hlavně Google a Bing) stahují stránky pro aktualizaci svých indexů? Denně mi načtou desítky tisíc stránek a udělají tím několikanásobně větší zátěž, než jakou generují samotní reální návštěvníci a server má pak díky tomu problémy s přetížením. Mám pocit že to kdysi šlo minimálně ve WebmasterTools od Google, ale teď to tam už najít nemůžu.

Jde o weby co mají dohromady několik set tisíc stránek, nicméně u většiny není potřeba aby je vyhledávače denně aktualizovaly, některé se prakticky nemění.

Weby už jsou několik let staré a ve výsledcích vyhledávačů se zobrazují na výborných místech, takže řešení typu úplně zakázat indexování bych se rád vyhnul ;-)

10. 6. 2014 09:51:46

https://webtrh.cz/diskuse/jak-zpomalit-indexovani-webu-od-robotu#reply1030757

verified

(15 hodnocení)

10. 6. 2014 10:02:07

V Google Webmaster Tools můžeš nastavit ručně kolik stránek a za sekundu mohou roboti procházet. Dá se to omezit i v robots.txt, ale toto bývá roboty ignorováno. Ostatní se nejspíše nastavit nedají, můžeš jim ale např. zablokovat přístup.

10. 6. 2014 10:02:07

https://webtrh.cz/diskuse/jak-zpomalit-indexovani-webu-od-robotu#reply1030756

verified

(13 hodnocení)

10. 6. 2014 10:22:20

Napsal Caesar;1096655
V Google Webmaster Tools můžeš nastavit ručně kolik stránek a za sekundu mohou roboti procházet.

Můžeš mě navést kde to tam přesně najdu? Nikde to tam nevidím.

10. 6. 2014 10:22:20

https://webtrh.cz/diskuse/jak-zpomalit-indexovani-webu-od-robotu#reply1030755

Miloslav Lešetický

verified

(10 hodnocení)

10. 6. 2014 10:31:42

Kovboj

U konkrétního webu - Ozubené kolečko vpravo nahoře - Nastavení webu - Četnost procházení.

10. 6. 2014 10:31:42

https://webtrh.cz/diskuse/jak-zpomalit-indexovani-webu-od-robotu#reply1030754

verified

(13 hodnocení)

10. 6. 2014 10:47:25

Napsal Plaváček;1096665
Kovboj
U konkrétního webu - Ozubené kolečko vpravo nahoře - Nastavení webu - Četnost procházení.

Díky, nějak dneska nemám svůj den a rozklikával jsem to tam jen bez zvoleného webu.

10. 6. 2014 10:47:25

https://webtrh.cz/diskuse/jak-zpomalit-indexovani-webu-od-robotu#reply1030753

Pro odpověď se přihlašte.

Prodej Více

Herní magazín Gamero.cz – český web s historií a brandovou doménou

25 000 Kč

0 příhozů

Prodej atraktivního 14-ti letého magazínu Ocemsemluvi.cz + YT a FB

70 000 Kč

0 příhozů

ZAVEDENÝ WEB S VLASTNÍM OBSAHEM A 8 LETOU HISTORIÍ – VYSOKÝ POTENCIÁL ZISKU

290 000 Kč

0 příhozů

Pacamls.cz – ultraprémiová přírodní krmiva pro psy a kočky

25 000 Kč

0 příhozů

Vsad.si – doména a hotový projekt pro propagaci sázkové kanceláře či prodej tipů na sázení

50 000 Kč

0 příhozů

Poptávky Více

Hledáme zkušeného frontend JavaScript vývojáře (Svelte)

Hledáme zkušeného vývojáře Qt/QML a C++ – hardware crypto peněženka

Hľadám kódera na nakódovanie HTML šablón

Návrh a výroba povolení hodů

Grafik na bannery – časem víc

Pracovní nabídky Více

Do Včeliště hledáme novou grafičku/grafika

Kubernetes & Cloud Java Aplikace

80 000 - 140 000 Kč

Asistence u IT projektu

10 000 - 30 000 Kč

Hledáme Senior/Medior PHP Laravel Developera pro vývoj softwarových řešení na míru

Brno, Práce z domu

75 000 - 120 000 Kč

Product Manager WANTED!

Nabídky Více

Nestíháte e-shop? Postarám se o to za vás.

⭐⭐⭐PROFI/LEVNĚ – TVORBA WEBŮ A E-SHOPŮ s CSS kodováním! na míru za SKVĚLÉ CENY! | 🚀 PPC reklama | SEO | Grafické práce | 10 let praxe

Proměňte své nápady ve fungující aplikace – Vaše nápady proměním ve funkční software

✅ LINKBUILDERKA.CZ – Tvorba kvalitních zpětných odkazů

🛡️Nabízíme správu firemní sítě a IT