Seznam.cz špatně čte robots.txt (problém v SEO)

21. 4. 2016 14:20:10

Zdravím. Seznam.cz ve vyhledávání ignoruje homepage webu a neustále zobrazuje pouze podstránky (na Google je vše v pořádku). Analýzou jsem zjistil, že vina by měla být v robots.txt, v němž je zakázána indexace. Jenže ona není, robots vypadá takto:

User-agent: *
Allow: /

Disallow: /UserFiles/Image/
Disallow: /modules/
Disallow: /import/
Disallow: /export/
Disallow: /admin/
Disallow: /cetelem/
Disallow: /cron/
Disallow: /css/
Disallow: /jquery/
Disallow: /pdf/
Disallow: /xml/
Disallow: /script/

Sitemap: http://www.nazevwebu.cz/sitemap.xml

Napadlo mě, zda Seznam nemate druhý řádek (Allow: /). Nebo vidíte chybu jinde? Díky

21. 4. 2016 14:20:10

https://webtrh.cz/diskuse/seznam-cz-spatne-cte-robots-txt-problem-v-seo/#reply1190918

Miloslav Lešetický

(10 hodnocení)

21. 4. 2016 14:26:03

radeksikyr

V uvedeném zápisu chyba není. Pokud Seznam tvrdošíjně ignoruje homepage webu, může být také chyba na jeho straně, což se často stává. Nebo také na vaší straně v samotném kódu homepage, kterou jste nám ale utajil. :)

P.S. Robots.txt není nejvhodnější metodou k zakazování indexace, ale to jenom na okraj.

21. 4. 2016 14:26:03

https://webtrh.cz/diskuse/seznam-cz-spatne-cte-robots-txt-problem-v-seo/#reply1190917

Radek Šikýř

(2 hodnocení)

21. 4. 2016 14:31:55

Plaváček

Díky za reakci. To, že je chyba v robots.txt, mi napsal přímo Seznam.cz. Když homepage projedu jejich Kontrolním formulářem, zobrazí se:

Robots.txt
Indexace je zakázaná v souboru robots.txt
Řešení:
Pokud chcete, aby SeznamBot zadanou stránku indexoval, odstraňte zákaz její indexace ze souboru robots.txt

21. 4. 2016 14:31:55

https://webtrh.cz/diskuse/seznam-cz-spatne-cte-robots-txt-problem-v-seo/#reply1190916

TomasX

(4 hodnocení)

21. 4. 2016 14:42:25

zkus změnit robots.txt, odebrat to allow, odebrat ty disallow, třeba něco z toho pomůže.

Není ta chybová hláška náhodou univerzální a není tam jen kvůli tomu, že máš něco v robots.txt zakázané? Seznam má docela poslední dobou problém v serpu poskytovat HP a raději poskytuje podstránky, pravděpodobně kvůli obsahu, na HP nebývá moc užitečného nebo klíčového obsahu.

21. 4. 2016 14:42:25

https://webtrh.cz/diskuse/seznam-cz-spatne-cte-robots-txt-problem-v-seo/#reply1190915

Radek Šikýř

(2 hodnocení)

21. 4. 2016 14:55:03

Napsal TomášX;1286428
zkus změnit robots.txt, odebrat to allow, odebrat ty disallow, třeba něco z toho pomůže.

Není ta chybová hláška náhodou univerzální a není tam jen kvůli tomu, že máš něco v robots.txt zakázané? Seznam má docela poslední dobou problém v serpu poskytovat HP a raději poskytuje podstránky, pravděpodobně kvůli obsahu, na HP nebývá moc užitečného nebo klíčového obsahu.

Díky za reakci. Problém je jen u HP, ostatní stránky testované stránky se ukázaly v pořádku. Obsahu je na HP dost. Zkusím odebrat to Allow a uvidíme

21. 4. 2016 14:55:03

https://webtrh.cz/diskuse/seznam-cz-spatne-cte-robots-txt-problem-v-seo/#reply1190914

Miloslav Lešetický

(10 hodnocení)

21. 4. 2016 14:56:07

radeksikyr

Ve vámi uvedeném zápisu chyba není. Další způsoby, jak problém odstranit, budou pouhými spekulacemi, pokud nedodáte odkaz na problematický web.

21. 4. 2016 14:56:07

https://webtrh.cz/diskuse/seznam-cz-spatne-cte-robots-txt-problem-v-seo/#reply1190913

Ladislav Výsmek

(14 hodnocení)