Ověření funkčnosti robots.txt

7. 7. 2014 15:50:07

Dobrý den,

mám takové podezření, že je na mém webu něco špatně. Že si mě nevšímají roboti. A proto se chci ujistit, zda mám správně nastavený robots.txt, jestli ne, upozorněte mne na to prosím.

Mám za to, že procházení roboty je povolené pro celý adresář a adresáře, jen do fnc nepoleze. Je to tak správně?

V meta hlavičce mám index,follow

V htaccess nic neblokuji

U některých odkazů používám atribut rer="nofollow"

Ten robot je tedy v pořádku? Děkuji :)

7. 7. 2014 15:50:07

0 0

Líbí se: zatím nikdo

Nelíbí se: zatím nikdo

https://webtrh.cz/diskuse/overeni-funkcnosti-robots-txt/#reply1037827

Miloslav Lešetický

(10 hodnocení)

7. 7. 2014 16:03:43

Ano, je v pořádku. Jen direktiva "Allow" je v zápisu zbytečná. I "meta index, follow" je navíc, protože na webu platí, že je povoleno vše, co není zakázáno.

7. 7. 2014 16:03:43

0 0

Líbí se: zatím nikdo

Nelíbí se: zatím nikdo

https://webtrh.cz/diskuse/overeni-funkcnosti-robots-txt/#reply1037826

Maijkl22

(2 hodnocení)

7. 7. 2014 16:56:19

Děkuji :)

7. 7. 2014 16:56:19

0 0

Líbí se: zatím nikdo