Unavailable mobile landing page – Google XML

16. 9. 2019 08:15:37

Máme problém s Google XML feedem, Google nám blokuje část produktů (cca 20%) a uvádí u nich chybu Unavailable mobile landing page, když si rozkliknu detail, tak konkrétně HTTP 5xx response.

Vše jsme testovali a vrací se nám dlouhodobě u všech adres HTTP kód 200, vše funguje. Ani monitoring nehlásí problémy.

Měli jsme dříve problémy s DDOS útoky a proto je na serveru nasazena ochrana, která blokuje roboty, pokud překročí nějaký limit požadavků za 5 minut.

Moje otázka zní, zda Google otevírá při kontrole během několika minut všechny URL adresy produktů z XML feedu a myslíte si, že je pravděpodobné, že toto může být ten problém?

Pokud si to myslíte, tak prosím o radu jak se řeší aby DDOS ochrana neblokovala Google roboty? Google robot se předpokládám pravděpodobně podepisuje, takže ho lze detekovat, ale chtěli bychom to vyřešit tak, abychom nemuseli přidávat podmínku pro každého jednotlivého robota z různých služeb a kontrolovat zda nezměnil "podpis".

Díky.

16. 9. 2019 08:15:37

https://webtrh.cz/diskuse/unavailable-mobile-landing-page-google-xml/#reply1415745

zezmen

(39 hodnocení)

16. 9. 2019 08:35:00

A co se stane, když se zvolí "načíst jako Google"?

Nejsou v odkazech mezery a jsou nahrazeny html entitami?

Začínají odkazy http nebo https ?

16. 9. 2019 08:35:00

https://webtrh.cz/diskuse/unavailable-mobile-landing-page-google-xml/#reply1415744

uzivatel1

(7 hodnocení)

16. 9. 2019 08:39:09

Napsal zezmen;1544327
A co se stane, když se zvolí "načíst jako Google"?
Nejsou v odkazech mezery a jsou nahrazeny html entitami?
Začínají odkazy http nebo https ?

Vypadá vše v pořádku:

29790

URL adresy jsou také validní bez mezer a html entit.

16. 9. 2019 08:39:09

https://webtrh.cz/diskuse/unavailable-mobile-landing-page-google-xml/#reply1415743

zezmen

(39 hodnocení)

16. 9. 2019 08:49:30

Tak mne nic jiného nenapadá.

Nápověda google k řešení: https://support.google.com/merchants/answer/6098296?hl=en

Pak už jenom na serveru nastavit vyloučení google bota z kontroly.

16. 9. 2019 08:49:30

https://webtrh.cz/diskuse/unavailable-mobile-landing-page-google-xml/#reply1415742

TomasX

(4 hodnocení)

16. 9. 2019 09:54:30

zkontrolujte logy server, tam se dozvíte pravděpodobnou příčinu. Google si podle zkušenosti ty problémy nevymýšlí.

Osobně bych tipoval, že vám web nezvládá více požadavků najednou a některé končí chybou. Wedos má třeba dost přísné omezení.

16. 9. 2019 09:54:30

https://webtrh.cz/diskuse/unavailable-mobile-landing-page-google-xml/#reply1415741

uzivatel1

(7 hodnocení)

16. 9. 2019 10:57:10

Napsal TomášX;1544335
zkontrolujte logy server, tam se dozvíte pravděpodobnou příčinu. Google si podle zkušenosti ty problémy nevymýšlí.
Osobně bych tipoval, že vám web nezvládá více požadavků najednou a některé končí chybou. Wedos má třeba dost přísné omezení.

Děkuji, napsal už jsem na podporu. Můj tip je, že Google robota vyblokovala DDOS ochrana, takže část produktů ho nechala ochrana projet a poté došlo k zablokování a zbytek produktů se proto tváří jako 5xx

16. 9. 2019 10:57:10

https://webtrh.cz/diskuse/unavailable-mobile-landing-page-google-xml/#reply1415740

Oleg

(53 hodnocení)

16. 9. 2019 11:13:08

Zkus si tady: https://www.google.com/webmasters/tools/crawl-stats?hl=cs&siteUrl=

za rovna se, doplnit nazev svoji domeny (nebo ji vyber se select boxu), podivej se na statistiky.

Google Search Console Rate Limit

za rovnase dopln svoji domenu tak jak ji mas pridanou (nebo ji vyber se select boxu) v Search Console a muzes si nechat limit na Googlu nebo si nastavit svuj limit prochazeni.

Kazdopadne si myslim, ze problem budes mit bud v htaccess, kde je neco zablokovano, nebo v robots.txt nebo zjisti podle .LOG souboru na serveru proc ti to blokuje.

Pokud mas open source CMS a pouzivas nejaky plugin na omezeni botu, tam muze byt problem taky.

16. 9. 2019 11:13:08

https://webtrh.cz/diskuse/unavailable-mobile-landing-page-google-xml/#reply1415739

Pro odpověď se přihlašte.

Přihlásit