Zadejte hledaný výraz...

Vseobecny Parser/Crawler na prehladavanie webov. Je to mozne spravit? Nieco ako google boti

mirov
verified
rating uzivatele
(2 hodnocení)
30. 7. 2015 21:14:38
Ahojte,
pohravam sa s jednou myslienkou ale niesom programator a potreboval by som pomoc.
Je mozne spravit univerzalny script, ktory by neustale prehladaval urcite weby a kontroloval urcite informacie na strankach a pri akejkolvek zmene by ich hned vedel identifkovat.
Je nieco take mozne ?
30. 7. 2015 21:14:38
https://webtrh.cz/diskuse/vseobecny-parser-crawler-na-prehladavanie-webov-je-to-mozne-spravit-nieco-ako-google-boti/#reply1130323
bbautodiely
verified
rating uzivatele
(14 hodnocení)
30. 7. 2015 22:45:49
napr mozenda.com
30. 7. 2015 22:45:49
https://webtrh.cz/diskuse/vseobecny-parser-crawler-na-prehladavanie-webov-je-to-mozne-spravit-nieco-ako-google-boti/#reply1130322
alex93
verified
rating uzivatele
(70 hodnocení)
30. 7. 2015 23:31:25
Proč, by to nebylo možné? Nicméně vždycky je tam nějaké, ale...
30. 7. 2015 23:31:25
https://webtrh.cz/diskuse/vseobecny-parser-crawler-na-prehladavanie-webov-je-to-mozne-spravit-nieco-ako-google-boti/#reply1130321
devilsaccountant
verified
rating uzivatele
31. 7. 2015 00:42:38
Ja na niecom podobnom pracujem uz 4 roky, a urcite to mozne je. Avsak ani po 4 rokoch vyvoja nie som schopny zaindexovat kazdu jednu stranku bezchybne - momentalne priblizne z miliona odkazov zaindexujem chybne 1000-3000. Ak chces tip na konkretnu sluzbu, skus Diffbot, bezpochyb jedna z najlepsich.
31. 7. 2015 00:42:38
https://webtrh.cz/diskuse/vseobecny-parser-crawler-na-prehladavanie-webov-je-to-mozne-spravit-nieco-ako-google-boti/#reply1130320
alex93
verified
rating uzivatele
(70 hodnocení)
2. 8. 2015 10:18:33
Napsal Martin Bariak;1214148
momentalne priblizne z miliona odkazov zaindexujem chybne 1000-3000.
Ani tak to není úplně špatná bilance, v čem je to napsaný?
2. 8. 2015 10:18:33
https://webtrh.cz/diskuse/vseobecny-parser-crawler-na-prehladavanie-webov-je-to-mozne-spravit-nieco-ako-google-boti/#reply1130319
devilsaccountant
verified
rating uzivatele
18. 8. 2015 23:36:04
Napsal alex93;1214560
Ani tak to není úplně špatná bilance, v čem je to napsaný?
Erlang sa stara o spracovanie dat, prechadzanie webu, data ukladam do hypertable.
18. 8. 2015 23:36:04
https://webtrh.cz/diskuse/vseobecny-parser-crawler-na-prehladavanie-webov-je-to-mozne-spravit-nieco-ako-google-boti/#reply1130318
Pro odpověď se přihlašte.
Přihlásit