Vytvoření parseru – prohledávání webu se stovkami stránek

verified

(118 hodnocení)

6. 6. 2013 19:06:34

Zdravím, potřeboval bych poradit jak nejlépe prohledat zdrojový kod jednotlivých stránek webu. Web má více jak 800 stránek a potřebuji zjistit zda se v daném zdrojovém kodu vyskytuje určitá html značka, respk. tag s určitým id. Web bohužel nemám k dispozici na lokálním PC.

Co by jste mi poradili ?

Děkuji

6. 6. 2013 19:06:34

0 0

Líbí se: zatím nikdo

Nelíbí se: zatím nikdo

https://webtrh.cz/diskuse/vytvoreni-parseru-prohledavani-webu-se-stovkami-stranek/#reply909943

verified

6. 6. 2013 19:19:54

http://simplehtmldom.sourceforge.net a napsat si robota, který stránky projde. Má to jedinou podmínku - na každou z těch stránek musí vést přinejmenším jeden odkaz. Pokud to bude splněno, lze to napsat.

6. 6. 2013 19:19:54

0 0

Líbí se: zatím nikdo

Nelíbí se: zatím nikdo

https://webtrh.cz/diskuse/vytvoreni-parseru-prohledavani-webu-se-stovkami-stranek/#reply909942

verified

6. 6. 2013 19:43:22

pokud jde o jednorazovou akci, da se stahnout cely web (httrack.com) a prohledat ho pak na lokalnim disku.

6. 6. 2013 19:43:22

0 0

Líbí se: zatím nikdo

Nelíbí se: zatím nikdo

https://webtrh.cz/diskuse/vytvoreni-parseru-prohledavani-webu-se-stovkami-stranek/#reply909941

verified

(118 hodnocení)

7. 6. 2013 12:38:46

tsistud

odkazy mám k dispozici, ale myslím si, že problém nastane asi s pamětí

7. 6. 2013 12:38:46

0 0

Líbí se: zatím nikdo

Nelíbí se: zatím nikdo

https://webtrh.cz/diskuse/vytvoreni-parseru-prohledavani-webu-se-stovkami-stranek/#reply909940

verified

7. 6. 2013 12:55:55

Napsal Taps;958980
tsistud
odkazy mám k dispozici, ale myslím si, že problém nastane asi s pamětí

A jak postupuješ? Vzal bych index, hledal výskyty toho co tě tam zajímá, pak prošel všechny a do nějaké tabulky v databázi přidal všechny soubory, které tam ještě nejsou a tím s index.php končíš. Pak stejný postup aplikuješ na první soubor v té pomocné tabulce, načež ho vymažeš.

Popisovat to je mnohem míň zajímavá činnost, než to naprogramovat.

7. 6. 2013 12:55:55

Líbí se: zatím nikdo

Nelíbí se: zatím nikdo

https://webtrh.cz/diskuse/vytvoreni-parseru-prohledavani-webu-se-stovkami-stranek/#reply909939

verified

(118 hodnocení)

7. 6. 2013 12:59:18

Odkazy čerpám z mapy webu a tyto odkazy poté postupně procházím. Ještě podotýkám, že nemám přístup k hostingu a ani databázi webu

7. 6. 2013 12:59:18

0 0

Líbí se: zatím nikdo

Nelíbí se: zatím nikdo

https://webtrh.cz/diskuse/vytvoreni-parseru-prohledavani-webu-se-stovkami-stranek/#reply909938

verified

7. 6. 2013 13:09:14

Těžko radit.. Jdeš na to asi dobře. Ta hláška ale odpovídá tomu, že opravdu není dost paměti. Jestli neukážeš konkrétní php, víc asi neporadím.

7. 6. 2013 13:09:14

0 0

Líbí se: zatím nikdo

Nelíbí se: zatím nikdo

https://webtrh.cz/diskuse/vytvoreni-parseru-prohledavani-webu-se-stovkami-stranek/#reply909937

verified

(118 hodnocení)

7. 6. 2013 13:12:47

7. 6. 2013 13:12:47

0 0

Líbí se: zatím nikdo

Nelíbí se: zatím nikdo

https://webtrh.cz/diskuse/vytvoreni-parseru-prohledavani-webu-se-stovkami-stranek/#reply909936

Pro odpověď se přihlašte.

Prodej Více

Bezpečnostní systémy a slaboproudé instalace – zavedená firma s 30letou historií

8 200 000 Kč

0 příhozů

NaBurzu.cz + Na-burzu.cz – 2 atraktivní .CZ domény pro burzy, investování, obchodování a inzertní portály

27 990 Kč

0 příhozů

eshop na prodej pneumatik pro Tesla

50 000 Kč

0 příhozů

Prodej zavedené půjčovny lodí (kanoe, rafty) v jižních Čechách

5 900 000 Kč

0 příhozů

Prodej realhit.cz inzertního portálu

1 900 000 Kč

0 příhozů

Poptávky Více

Poptávka na focení s australským ovčákem v Praze

Poptávka fotografa na párové podzimní focení v exteriéru (rychle)

Poptávka fotografky na newborn focení

Poptávka po vánočních fotkách

Poptávka vánočního focení v Brně

Pracovní nabídky Více

Junior IT Analyst

Hradec Králové, Pardubice

Backend vývojář systémového jádra (C++/Python)

Brno, Práce z domu

Junior Developer Python / Django / AI projekty

Práce z domu, Praha

Junior Project Manager

IT Security Officer

Hradec Králové, Praha

Nabídky Více

Linux servery, DevOps, automatizace a AI | 9 let praxe

Hledám spolupráce

Hledám spolupráce

Tvorba webových aplikací a MVP pomocí AI – od nápadu po funkční řešení

Spravuju Google Ads pro e-shopy a firmy. Nejdřív zjistím, kam vám teď mizí peníze, a řeknu to bez obalu.