Kde může být chyba? Googlebot nemůže získat přístup na vaše stránky

3. 3. 2014 14:59:32

Od spuštění mého projektu Tabreni.cz mi pravidelně chodí reporty od webmaster tools informující mě, že nelze přistoupit na web. Nejčastěji je problém s přístupem k souboru robots.txt.

Otázkou ovšem je, co může být příčinou problému. Web je hostovaný na vlastním serveru s monitoringem dostupnosti služeb a zde se sebemenší problémy neprojevují. Soubor robots.txt je obyčejná soubor (negenerovaný), takže je dostupný prakticky kdkoliv. Z nástrojů pro webmastery a logů serveru je patrné, že zatímco robots.txt nenačte tak jiné části webu ve stejnou dobu, poměrně rád projíždí.

Nenapadá někoho důvod pro tyto chyby? robots.txt je nejčastějším problémem, občas ale WMT zašle email o nedostupnosti celého webu, přitom jsem si 100% jistý, že web jede. Navíc na stejné konektivitě mám druhý server s jiným projektem a tam problémy nevznikají, lze tedy vyloučit nějaký problém třeba se zahraniční konektivitou ISP hostingu.

děkuji za nápady ;-)

3. 3. 2014 14:59:32

https://webtrh.cz/diskuse/kde-muze-byt-chyba-googlebot-nemuze-ziskat-pristup-na-vase-stranky/#reply1002007

Miloslav Lešetický

(10 hodnocení)

3. 3. 2014 16:00:00

Tabreni.cz nefunguje. Nebo je to překlep?

3. 3. 2014 16:00:00

https://webtrh.cz/diskuse/kde-muze-byt-chyba-googlebot-nemuze-ziskat-pristup-na-vase-stranky/#reply1002006

johnyzpodoli

3. 3. 2014 19:26:07

Ajta krajta, Táboření.cz, je to překlep. http://www.taboreni.cz.. omlouvám se ;-)

3. 3. 2014 19:26:07

https://webtrh.cz/diskuse/kde-muze-byt-chyba-googlebot-nemuze-ziskat-pristup-na-vase-stranky/#reply1002005

Luděk Kvapil

4. 3. 2014 09:45:23

Na webu není nic divného. Spíše to bude vypršení časového limitu pro požadavek...

4. 3. 2014 09:45:23

https://webtrh.cz/diskuse/kde-muze-byt-chyba-googlebot-nemuze-ziskat-pristup-na-vase-stranky/#reply1002004

petrx

(8 hodnocení)

5. 3. 2014 11:55:30

Autentizujte si doménu taboreni.cz v MajesticSEO.com.

Pak zajděte na report Site Explorer Results - Top Pages - Majestic SEO

http://www.majesticseo.com/reports/site-explorer/top-pages?folder=&q=taboreni.cz&oq=taboreni.cz&IndexDataSource=F a uvidíte timeouty a další maléry (nikoli všechny, MajesticSEO.com crawluje mnohem méně stránek než Webmaster Tools).

Vyexportoval jsem průšvihy na

Google Drive

https://accounts.google.com/ServiceLogin?service=wise&passive=1209600&continue=https%3A%2F%2Fdocs.google.com%2Fspreadsheet%2Fccc%3Fkey%3D0AgojwLTTiSardEt5U1ltcTdMbUxrd3JLVHNDNFNyX2c%26usp%3Dsharing%26pref%3D2&followup=https%3A%2F%2Fdocs.google.com%2Fspreadsheet%2Fccc%3Fkey%3D0AgojwLTTiSardEt5U1ltcTdMbUxrd3JLVHNDNFNyX2c%26usp%3Dsharing%26pref%3D2

---------- Post added 05.03.2014 at 11:56 ----------

Napsal johnyzpodoli;1063283
Nenapadá někoho důvod pro tyto chyby? robots.txt je nejčastějším problémem, občas ale WMT zašle email o nedostupnosti celého webu, přitom jsem si 100% jistý, že web jede. Navíc na stejné konektivitě mám druhý server s jiným projektem a tam problémy nevznikají, lze tedy vyloučit nějaký problém třeba se zahraniční konektivitou ISP hostingu.

Nejede, podívejte se do reportu

5. 3. 2014 11:55:30

https://webtrh.cz/diskuse/kde-muze-byt-chyba-googlebot-nemuze-ziskat-pristup-na-vase-stranky/#reply1002003

johnyzpodoli

6. 3. 2014 18:48:32

Děkuju za radu! Jdu se n to podívat. Dnes web řeším od rána a všiml jsem si jedné věci, která by mohla dělat problém. 1x za hodinu se automaticky spouští script na údržbu databáze. V době běhu scriptu je celý web cca 20 sekund téměř nepoužitelný. Upravil jsem dané scripty tak, aby nevytěžovali tolik databáze. Uvidíme.

Na MajesticSEO se jdu vrhnout.

děkuju

6. 3. 2014 18:48:32

https://webtrh.cz/diskuse/kde-muze-byt-chyba-googlebot-nemuze-ziskat-pristup-na-vase-stranky/#reply1002002

Pro odpověď se přihlašte.

Přihlásit