Máte zkušenosti s převodem obrázku na text?

Zdravím webtržníci, Je tu někdo, kdo má zkušenosti s převodem obrázku na text? Plánujeme mobilní aplikaci, která by fungovala podobně, jako při detekci QR kódů. Potřebuji rozeznat hledaný text na fotografii. Zajímalo by mě jak moc je to náročné. Děkuju za info a těším se na případnou spolupráci.

A na jaké platformě? U Android lze využít třeba https://github.com/smart-mobile-software/ocrapiservice.Moc jste toho nenapsal, tak jen spekuluji.. Pokud bude rozpoznávání probíhat na již hotové fotografii, úspěšnost nebude valná. Pokud by to mělo fungovat jako QR, tedy přístup ke kameře a až Vaše aplikace text nadetekuje, počítejte s obrovskou zátěží na to zařízení, což se projeví jednak na spotřebě, u kovových při opakovaném použití i na teplotě :p

Platformy ideálně všechny, ale primárně klasicky ANdroid a iPhone.Rozeznávání by mělo probíhat pomocí přístupu ke kameře. Nadefinuju seznam hledaných slov a když je kamera rozezná, dá mi aplikace znamení.Nejednalo by se o dlouhodobé používání. Bylo by fajn, aby 15 minut chodu aplikace nepřivedlo mobil k explozi :-)

Nevím, zkuste si udělat demo a otestovat, ale abych pravdu řekl, dívám se na to trošku skepticky..Tím 15 minut myslíte, že bude dotyčný mířit na text? A Vaše app pak 10x za sekundu provede analýzu obrazu? To asi nepůjde. U QR je to ttrošku obejito, páč má ve 3 rozích záchytné body a hledá obsah v tom pomysleném čtverci. Vaše app se bude muset vypořádat s různými bravami, velikosti písma, různými fonty, italicou, boldem.. To je úplně někde jinde. Možná, kdybyste popsal co je cílem a jak to á fungovat by se dalo vymyslet jiné řešení.. Ten podklad s textem je Váš, nebo náhodný? Pokud Váš, šlo by tam třeba umístit alespoň nějaké záchytné body a držet se tak měřítka.

Aby to rozpoznávání prováděla přímo Androidí aplikace, to mi příjde (s omezeným rozpočtem) nereálné. Fungovat by to mohlo tak, že aplikace odešle fotografii na server, ten jí zpracuje a výsledek zašle zpět. Ale spolehlivost by určitě nebyla nic extra.

Fonty a barvy budou problém. Aplikace by měla hledat jednotlivé příměsi ve složení na etiketě potravin.To s odesíláním dat na server mě taky napadlo, ale otázka jak rychlé by to mohlo být. Děkuju za nápady :-)

Napsal apophys;1261644

Aplikace by měla hledat jednotlivé příměsi ve složení na etiketě potravin.

No tak tady bych se asi vydal cestou nějaké komunitou budované databáze složení jednotlivých výrobků a aplikace by když tak mohla skenovat jenom čárový kód. To OCR z obalů je celkem nerálné, kvůli různým písmům, barvám, podkladům, atd. Zrovna teď se dívám na složení jogurtu, drobné zlaté písmo na červeném podkladu, celé se to slévá a leskne, mám problém to přečíst i já. To opravdu nepůjde.

Tak Google má překladač, který taky čte realtime text z fotoaparátu a nahrazuje ho textem v jiném jazyce. A taky se mi ještě neuvařil mobil. Ale nevím jak to přesně funguje - jestli to odesílá na server, nebo to čte přímo ta aplikace. A dokonce to přečte i mikroskopické písmo na výrobcích. Zkoušel jsem text vytištěný na obale od baterií. Jestli to přečte i rozpitý text na jogurtu nevím a do lednice se mi teď nechce :) Ale můj mobil má ostření. U mobilů bez ostření by to asi těžko přečetlo.---------- Příspěvek doplněn 29.01.2016 v 00:02 ----------Jo, tak se zahnutýma věcma to má docela problém. Tak jogurt by to asi nedalo už jen kvůli tomu zahnutí

Napsal cech;1261657

Tak Google má překladač, který taky čte realtime text z fotoaparátu a nahrazuje ho textem v jiném jazyce. A taky se mi ještě neuvařil mobil. Ale nevím jak to přesně funguje - jestli to odesílá na server, nebo to čte přímo ta aplikace. A dokonce to přečte i mikroskopické písmo na výrobcích. Zkoušel jsem text vytištěný na obale od baterií. Jestli to přečte i rozpitý text na jogurtu nevím a do lednice se mi teď nechce :) Ale můj mobil má ostření. U mobilů bez ostření by to asi těžko přečetlo.

---------- Příspěvek doplněn 29.01.2016 v 00:02 ----------

Jo, tak se zahnutýma věcma to má docela problém. Tak jogurt by to asi nedalo už jen kvůli tomu zahnutí

Takovy ty aplikace prectu vsechno barva, font, velikost neni problem pouzivaji masivni API, vpodstate jen vezmou fotku poslou ji za more do kompu velikosti materske skoly a ten posila odpoved zpet. Volne dostupne algoritmy, ktere se vejdou na mobil maji uspesnost tak 60% a ten obrazek musi byt vazne dobrej (vysoka hustota, maximalni kontrast, centimetrovy pismo, zaber kolmo bez zkresleni)

Skus si to otestovat.Zober doma fotak, odfot etiketu a skus prehnat tu etiketu na PC nejakym OCR programom. Urcite sa najdu nejake free alebo skusobne verzie OCR.Potom si vyhodnot uspesnost.

Lze to realizovat, hlavní problém bude ale s malým písmem, nerovností plochy a lesklým povrchem. Na barvy se vykašli, při hledání textu se bere pouze jasová složka, z té se udělá mapa, mapa se převede na vektory (nebo třeba do šachovnice 15x15) a v nich se hledají vzory. U tohohle článku máš ke stažení již ucelený balíček free fontů k učení.Pokud bych měl poradit jak bys měl postupovat, jdi do obchodu, nafoť si co nejvíce etiket a snaž se na počítači najít způsob jak je s vysokou přesností rozpoznávat a až poté řeš, jak algoritmus přepsat do mobilů. Nikam fotky neposílej, rozpoznávat text musíš lokálně na mobilu jinak to nebude použitelné. Strojové učení v tomhle hodně pomůže a součástí aplikace již může být naučená databáze.Pokud bys s tím měl opravdu problém a nešlo to, budeš muset udělat kompromis. Z fotky vyseparuješ pouze písmo, srovnáš deformace, odstraníš barvy a pošleš na rozpoznání na server, nebude to tak velké, ale zpoždění bude několik s. Běžně je možné na mobilu rozpoznat větu do 500ms, pár algoritmů jsem již psal. Budeš bojovat s nedostatkem poměti, rychlostí telefonu a hlavně efektivitě hledání. Nemůžeš analyzovat každý snímek, který dostaneš od kamery, v první řadě v něm musíš primitivním způsobem hledat text (třeba podle kontrastu a poměru barev na pozadí/popředí), pokud si myslíš, že na snímku je text, musíš nejprve vytyčit místa, kde chceš spustit rozpoznávání. Také si kontroluj jaký snímek jsi analyzoval naposledy, abys pořád dokola nedělal to stejné, ale šel na věc až se obraz změní nebo posune.Vyber si v počátku jen konkrétní telefon (iphone je ideální) a na něm to laď. Nesnaž se hned zaujmout celou škálu nebo narazíš na to, že to většině nebude fungovat, ať už kvůli nedostatečné kameře tak i nedostatku systémových prostředků.