Špatná indexace – robot neprojde celý web i když má sitemap

3. 6. 2014 14:32:33

Ahoj,

posledních několik dní se pekluji se špatným zaindexováním nových stránek. Stránky jsem přidal k indexaci Seznamu a Googlu. Bohužel jejich roboti zaindexovaly jenom úvodní stránku a neprolezly zbylé stránky. U googlu jsem to vyřešil přidáním sitemapy na stránky a do google webmasters tools. U seznamu bohužel problém přetrvává. Je mi divné, že roboti neprolezou celý web, i když vždy ze stránky odkazuji na ty ostatní, plus v souboru robots.txt je odkaz na sitemapu.

Stránky jsou v .php a odkazuji na ně takto:

a v .htaccess přidávám mimo jiné koncovku .php:

Z logu jsem vyčetl, že roboti normálně přistupují na robots.txt, ale dál se už nedostávají. Tušíte někdo prosím, kde by mohl být problém?

robots.txt

3. 6. 2014 14:32:33

https://webtrh.cz/diskuse/spatna-indexace-robot-neprojde-cely-web-i-kdyz-ma-sitemap/#reply1029122

Vít Michalek

(14 hodnocení)

3. 6. 2014 14:54:33

Jak dlouho už čekáš na zaindexování?

Nic není, hned a seznam je o poznání pomalejší v tomto směru.

3. 6. 2014 14:54:33

https://webtrh.cz/diskuse/spatna-indexace-robot-neprojde-cely-web-i-kdyz-ma-sitemap/#reply1029121

Roman Sterly

3. 6. 2014 15:14:33

Dej odkaz na web, ať se můžeme podívat, jestli není něco špatně.

U mě to bylo kdysi stejné. Seznam nechtěl indexovat http://www.sportcentral.cz a trvalo to snad 4 měsíce, než tam měl víc než 100 stránek. Dnes je po 2 letech situace taková, že Seznam zaindexoval 44000 stránek, Google 840000 stránek.

3. 6. 2014 15:14:33

https://webtrh.cz/diskuse/spatna-indexace-robot-neprojde-cely-web-i-kdyz-ma-sitemap/#reply1029120

housie

3. 6. 2014 15:25:17

Stránky jsem nechal zaindexovat 24. 5. tj. 10 dní.

Jedná se o stránky http://www.take-off.cz/.

Je mi divné, že podle logu roboti neustále přistupují na robots.txt, ale dál nejdou.

3. 6. 2014 15:25:17

https://webtrh.cz/diskuse/spatna-indexace-robot-neprojde-cely-web-i-kdyz-ma-sitemap/#reply1029119

profesor

(33 hodnocení)

3. 6. 2014 15:35:42

Už máš v indexu 2 stránky z 5. Mít u Seznamu po 10 dnech zaindexováno 40% obsahu je mega úspěch ;).

3. 6. 2014 15:35:42

https://webtrh.cz/diskuse/spatna-indexace-robot-neprojde-cely-web-i-kdyz-ma-sitemap/#reply1029118

housie

3. 6. 2014 15:41:04

Ty jsem tam přidal ručně, obě dvě. Chci aby to procházely automaticky vše. Jde mi o to, jestli někde v kódu, v .htaccess není chyba.

Jestli je v Seznamu situace okolo indexování tak špatná/pomalá, budu muset ještě počkat.

3. 6. 2014 15:41:04

https://webtrh.cz/diskuse/spatna-indexace-robot-neprojde-cely-web-i-kdyz-ma-sitemap/#reply1029117

Pavel Horelica

(54 hodnocení)

3. 6. 2014 15:43:11

1. seznam indexuje velmi pomalu

2. chybu nehledej v sitemap.xml - ten má na zaindexování velmi malý vliv, důležitá je struktura, prolinkování obsahu atd..

3. 6. 2014 15:43:11

https://webtrh.cz/diskuse/spatna-indexace-robot-neprojde-cely-web-i-kdyz-ma-sitemap/#reply1029116

Pepa Ovocák

3. 6. 2014 18:14:49

No Seznam by to mohl trosku rozhejbat. Nakoupil jsem odkazy ve vetsim nez malym mnozstvi a on se ten serp skoro nehejbe. A to nemluvim o aktualizaci stavajicich stranek, tam pres 50% webu neni za 2 mesice preindexovana. No nic, snad se to zlepsi...

3. 6. 2014 18:14:49

https://webtrh.cz/diskuse/spatna-indexace-robot-neprojde-cely-web-i-kdyz-ma-sitemap/#reply1029115

Liderc

3. 6. 2014 21:40:13

ak pouzivas wordpress vedel bych pomoct taky sem mel s tym problem

3. 6. 2014 21:40:13

https://webtrh.cz/diskuse/spatna-indexace-robot-neprojde-cely-web-i-kdyz-ma-sitemap/#reply1029114

petrx

(8 hodnocení)

10. 6. 2014 20:01:01

Aktivovat Google Webmaster Tools + Bing Webmaster Tools a zkontrolovat v nich případné průsery

Bing Webmaster Tools, protože chování Seznambota se více podobá Bingbotu než Googlebotu