Jak scrapovat detail produktu na Zbozi.cz?

13. 6. 2016 11:19:01

Potřebuju nascrapovat seznam prodejců a jejich ceny z detailu produktu na Zbozi.cz (např. http://www.zbozi.cz/vyrobek/liebherr-cu-2311/). Jenže Zbozi.cz to generuje přes AJAX (či co to je), takže mi to nascrapovat nejde....

Zkoušel jsem přidat ?_escaped_fragment_=data, ale pak mi to vyhodí prázdný výsledek ( scrapovaní pomocí Refine). Když to scrapuju v PHP jako DOM, tak vyleze jen JavaScript...

Nějaké návrhy, jak na to?

13. 6. 2016 11:19:01

https://webtrh.cz/diskuse/jak-scrapovat-detail-produktu-na-zbozi-cz/#reply1201911

Martin Talavášek

(44 hodnocení)

13. 6. 2016 11:22:50

Nemá to být jen "http://www.zbozi.cz/vyrobek/liebherr-cu-2311/?_escaped_fragment_=" ?

13. 6. 2016 11:22:50

https://webtrh.cz/diskuse/jak-scrapovat-detail-produktu-na-zbozi-cz/#reply1201910

Luděk Kvapil

13. 6. 2016 11:30:40

Napsal Martin Talavášek;1299028
Nemá to být jen "http://www.zbozi.cz/vyrobek/liebherr-cu-2311/?_escaped_fragment_=" ?

...taktéž jen javascript...

---------- Příspěvek doplněn 13.06.2016 v 11:32 ----------

Respektive ?_escaped_fragment_=data fungovalo, ale pak to najednou fungovat přestalo... (cca měsíc až dva zpětně...)

13. 6. 2016 11:30:40

https://webtrh.cz/diskuse/jak-scrapovat-detail-produktu-na-zbozi-cz/#reply1201909

(20 hodnocení)

13. 6. 2016 11:34:32

http://www.zbozi.cz/api/v1/product/liebherr-cu-2311?availability=&limit=9&maxPrice=&minPrice=

deset sekund hledani...

13. 6. 2016 11:34:32

https://webtrh.cz/diskuse/jak-scrapovat-detail-produktu-na-zbozi-cz/#reply1201908

Luděk Kvapil

13. 6. 2016 11:45:26

Hledat je vždy snadné, když víte co... Proto se ptám. Ono vymyslet dobrou otázku/dotaz je vždy to nejdůležitější. Odpověď už pak příjde sama.. Ale ta otázka....

13. 6. 2016 11:45:26

https://webtrh.cz/diskuse/jak-scrapovat-detail-produktu-na-zbozi-cz/#reply1201907

(20 hodnocení)

13. 6. 2016 12:38:10

otazka byla tady zcela logicka - co nacita ten javascript, kdyz se to nacita javascriptem ;)

13. 6. 2016 12:38:10

https://webtrh.cz/diskuse/jak-scrapovat-detail-produktu-na-zbozi-cz/#reply1201906

Luděk Kvapil

13. 6. 2016 12:51:43

A jak se doberu k té URL? Zkusil jsem nahradit "http://www.zbozi.cz/vyrobek/" za "http://www.zbozi.cz/api/v1/product/", ale výsledek nefunguje (prázdná stránka)

13. 6. 2016 12:51:43

https://webtrh.cz/diskuse/jak-scrapovat-detail-produktu-na-zbozi-cz/#reply1201905

(20 hodnocení)

13. 6. 2016 12:59:56

protoze

zbozi.cz/api/v1/product/liebherr-cu-2311/

neni to same co

zbozi.cz/api/v1/product/liebherr-cu-2311

(lomitko na konci) :)

13. 6. 2016 12:59:56

https://webtrh.cz/diskuse/jak-scrapovat-detail-produktu-na-zbozi-cz/#reply1201904

Luděk Kvapil

13. 6. 2016 13:03:23

jj.. už to funguje

13. 6. 2016 13:03:23

https://webtrh.cz/diskuse/jak-scrapovat-detail-produktu-na-zbozi-cz/#reply1201903

(20 hodnocení)

13. 6. 2016 13:06:57

za nas se tomuhle btw rikalo vykradani :D scrapovani je nakej novotvar, aby se clovek citil lip?

13. 6. 2016 13:06:57

https://webtrh.cz/diskuse/jak-scrapovat-detail-produktu-na-zbozi-cz/#reply1201902

Luděk Kvapil

13. 6. 2016 14:04:11

Já tomu říkám analýza dat...

---------- Příspěvek doplněn 13.06.2016 v 14:07 ----------

Mimochodem mám z toho fakt skvělá data.. Vím třeba, jaký je modus cen, nejnižší cena, nejvyšší cena, či kdo je na jaké pozici... Což jsou přesně ta data, která potřebuju znát, abychom mohli efektivně uplatňovat cenovou strategii a zároveň vím, kde mám přihodit a kde jsem obsadil klíčové pozice...

Srovnávače sice mají své reporty, ale žádný neobsahuje data, které já potřebuju. Heureka to anonymizuje a navíc ve svém Sortiment reportu udává špatné pozice. A na Zbozi.cz takové statistiky vůbec nejsou.

---------- Příspěvek doplněn 13.06.2016 v 14:09 ----------

PS: jelikož zrovna Heureka a následně polovina prodejců používají u produktů LIEBHERR popisky produktů, které jsem napsal já, tak bych o vykrádání raději mlčel... Něco za něco. Já jim dávám data a beru si data. Fér obchod.

---------- Příspěvek doplněn 13.06.2016 v 14:15 ----------

PS2: i Zbozi.cz má možnost čerpat popisky zboží a zakládat nové produkty.. To, že to vytvrale odmítají dělat, je už jejich problém...

13. 6. 2016 14:04:11

https://webtrh.cz/diskuse/jak-scrapovat-detail-produktu-na-zbozi-cz/#reply1201901

Pavel

(11 hodnocení)

13. 6. 2016 14:18:12

je někde návod jak to používat ? (vidím to poprvé)

13. 6. 2016 14:18:12

https://webtrh.cz/diskuse/jak-scrapovat-detail-produktu-na-zbozi-cz/#reply1201900

(20 hodnocení)

13. 6. 2016 14:30:11

Napsal pleskanec;1299113
je někde návod jak to používat ? (vidím to poprvé)

o cem mluvis?

13. 6. 2016 14:30:11

https://webtrh.cz/diskuse/jak-scrapovat-detail-produktu-na-zbozi-cz/#reply1201899

Pavel

(11 hodnocení)

13. 6. 2016 14:47:40

Asi o tom to http://www.zbozi.cz/api/v1/product/liebherr-cu-2311?availability=&limit=9&maxPrice=&minPrice= sám reálně nevím co přesně chci , jen jsme nahlédl do támata a pobraal to ve stylu že si vyjedete data a pak si je někde z formulujete a vytřídíte .

13. 6. 2016 14:47:40

https://webtrh.cz/diskuse/jak-scrapovat-detail-produktu-na-zbozi-cz/#reply1201898

(20 hodnocení)

13. 6. 2016 14:50:05

jojo... vsak siva rikal na co to pouziva...

13. 6. 2016 14:50:05

https://webtrh.cz/diskuse/jak-scrapovat-detail-produktu-na-zbozi-cz/#reply1201897