Google bot a enormni stahovani dat.

5. 5. 2009 00:16:20

Nevim jestli je to spravna kategorie, ale u stranek http://www.thfonts.com/ mi Google bot podle AWStat prosel za duben 2009 pres 263055 stranek coz je 9.26 GB dat. Za 4 dny v kvetnu je to 53005 stranek neco 1.98 GB. Ale kdyz zadam do Google site:www.thfonts.com, tak dostanu informaci, ze v google je přibližně 438 z domény www.thfonts.com. Pritom ve Webmaster tools je Celkový počet adres URL v souboru Sitemap 13664 a Indexované adresy URL v souboru Sitemap Nápověda 289. Nevite nekdo jak google "donutit" k normalni indexaci stranek a ne prochazeni vice jak 263055 stranek mesicne? Budu vdecny za jakykoliv napad.

5. 5. 2009 00:16:20

https://webtrh.cz/diskuse/google-bot-a-enormni-stahovani-dat/#reply297965

carlos

(19 hodnocení)

5. 5. 2009 00:51:12

Počet requestu z googlu je adekvatni velikosti webu (stejne tak i objem prenesenych dat).

Tvuj problem je, ze obsahove se podstranky od sebe prilis nelisi a google je bere jako duplicitni obsah (proto take v indexu ukazuje jen velmi maly zlomek). Nejen ze obsah jednotlivych podstran se lisi jen v obsahovem sloupci, kde je jen minimum textu... ty mas i nazvy a meta desc uplne shodne.. coz ma presne tyto ucebnicove nasledky...

Tez se ujisti, ze nenutis google indexovat nejaky nekonecny smycky... (robots.txt)

5. 5. 2009 00:51:12

https://webtrh.cz/diskuse/google-bot-a-enormni-stahovani-dat/#reply297964

bluedog

(5 hodnocení)

5. 5. 2009 07:52:31

diky, zkusim na to kouknout a neco stim udelat.

5. 5. 2009 07:52:31

https://webtrh.cz/diskuse/google-bot-a-enormni-stahovani-dat/#reply297963

Milan Kryl

(26 hodnocení)

5. 5. 2009 09:28:31

Pridej si web do Google Webmaster Console (Tool) a tam si muzes snizit cetnost indexace Google robota. Stejne tak muzes zjistit problematicke casti webu.

www.google.com/webmasters/tools/

5. 5. 2009 09:28:31

https://webtrh.cz/diskuse/google-bot-a-enormni-stahovani-dat/#reply297962

carlos

(19 hodnocení)

5. 5. 2009 17:21:01

Četnost robota nesnižuj, to je cesta do pekel. Ten si umí sám benchmarkovat stahování, aby tě příliš nevytížil. Problém je jinde. Dovoluješ mu cachovat příliš duplicitního obsahu.

5. 5. 2009 17:21:01

https://webtrh.cz/diskuse/google-bot-a-enormni-stahovani-dat/#reply297961

dexter78