CSI zoomovanie je možné, Google to dokázal pomocou umelej inteligencie

Značky: Googleobrázkynové technológie

DSL.sk, 7.2.2017

Spoločnosť Google aktuálne prezentovala technológiu zvyšovania rozlíšenia obrázkov s pôsobivými kvalitami, ktorá sa približuje fiktívnym technológiám zvyšovania rozlíšenia známym z rozličných televíznych seriálov a najmä CSI.

Technológie zvyšovania rozlíšenia, tzv. super resolution technológie, nie sú novinkou. V poslednej dobe dosahujú ale pôsobivé výsledky nasadením techník umelej inteligencie a to najmä neurónových sietí.

Vo všeobecnosti pri ľubovoľných fotografiách s nízkym rozlíšením samozrejme nie je možné výrazne zvýšiť rozlíšenie a obnoviť detaily nezachytené v nižšom rozlíšení, keď sa zmenšením rozlíšenia časť dát stratila. Špeciálne ak ide o zväčšovanie fotografií zachytávajúcich len špecifické objekty, pre podobu objektov na nich platia zákonitosti a nachádzajú sa na nich typické prvky pre daný typ objektov. S využitím týchto informácií je tak možné časť chýbajúcich detailov doplniť respektíve odhadnúť.

Explicitne naprogramovať takéto zákonitosti nie je väčšinou praktické, výsledky ale výrazne zlepšujú najmä neurónové siete učiace sa pri správnom modeli samé na základe natrénovania na vzorkách dát.

Len v polovici uplynulého mesiaca Google nasadil jednu takúto technológiu RAISR na zmenšovanie veľkosti prenášaných obrázkov v Google+, detailne sme o tom informovali v tomto článku. Technológia je použitá len na zoštvornásobenie rozlíšenia a zvýšenie úrovne detailov obrázkov s rozlíšením napríklad 500 x 750.

Výsledky dosiahnuté algoritmom Google, vpravo pôvodný 32 x 32 obrázok, vľavo obrázok zmenšený na 8 x 8 a v strede jeho zväčšenina vyprodukovaná algoritmom Google len z obrázku s rozlíšením 8 x 8, kliknite pre zväčšenie (obrázok: Ryan Dahl a tím / Google)

Teraz ale výskumníci Google predstavili inú a na prvý pohľad pôsobivejšiu technológiu, ktorá dokáže pomerne efektívne zväčšiť obrázok s rozlíšením len 8 x 8 pixelov zachytávajúci väčší objekt na rozlíšenie 32 x 32 pixelov, teda 16-krát viac pixelov. Napríklad pri tvárach rozlíšenie 8 x 8 znamená absenciu akýchkoľvek detailov a ide prakticky len o farebné machule, obrázok 32 x 32 pixelov ale už zachytáva rysy tváre pomerne presne.

Novú technológiu Google demonštroval okrem iného práve na ľudských tvárach. Technológia využíva dve neurónové siete, jedna 8 x 8 obrázky mapuje na najpravdepodobnejšie obrázky s vyšším rozlíšením a druhá pridáva realistické detaily.

Algoritmus najskôr natrénoval na databáze tvárí celebrít zmenšených na obrázky s rozlíšením 32 x 32 a následne 8 x 8 a potom ho otestoval pri zväčšovaní obrázkov zmenšených na rozlíšenie 8 x 8 a porovnával s pôvodnými obrázkami. Koľko tvárí bolo v použitej databáze, odkiaľ boli vyberané tváre použité pri následnom teste a či algoritmus dosahuje rovnaké výsledky následne pri ľubovoľných tvárach a v ľubovoľnej pozícii nie je jasné. Prezentované výsledky sú ale v každom prípade pre väčšinu tvárí pomerne pôsobivé, aj keď u niektorých výsledky nie sú dobré.

Autori zároveň algoritmus testovali na fotografiách spální, kde dosahoval ešte lepšie výsledky.

Výsledky svojej práce prezentujú v tejto práci.




Najnovšie články:



Diskusia:

dnes má meniny Vanda Od reg.: akoze | Pridané: 7.2.2017 20:35 posobive. zaujmalo by ma aku sarzu to dokaze s 8x8 obrazkom rozpixelovaneho penisu. Odpovedať Známka: 8.8 Hodnotiť:

Re: dnes má meniny Vanda Od: jebe jebe jebe | Pridané: 7.2.2017 20:50 to potom zobrazi 32x32 roberta fica. Odpovedať Známka: 9.0 Hodnotiť:

Re: dnes má meniny Vanda Od: Anal Fabet | Pridané: 7.2.2017 22:31 Oci, usi a vlasy budu Robert(ko), usta a brada Danko... Odpovedať Známka: 2.7 Hodnotiť:

Re: dnes má meniny Vanda Od: Danko Horalka | Pridané: 7.2.2017 23:08 Keby radsej vynasli algoritmus ktory vie z ciernobieleho obrazka uárobit farebny... Uz ma nebavi pozerat ciernobiely televizor :( Odpovedať Známka: 1.0 Hodnotiť:

Re: dnes má meniny Vanda Od: knjiCdo | Pridané: 8.2.2017 2:50 Asi by som ti mal niečo povedať... ale čo... uži si svoj moderný čiernobiely televízor! :D Odpovedať Známka: 0.0 Hodnotiť:

Re: dnes má meniny Vanda Od: 48484 | Pridané: 8.2.2017 3:06 No zaspal si dobu, takze veci uz davno existuju. http://demos.algorithmia.com/colorize-photos/ Odpovedať Známka: 7.3 Hodnotiť:

Re: dnes má meniny Vanda Od: jesper | Pridané: 8.2.2017 8:47 To si mu čo poslal za link? Si si povedal, že pošleš link na najhorší algoritmus? Aj si to niekedy skúsil, čo je to za otras? To si sám krajšie predstavím ako tento grc prekonvertuje... Odpovedať Známka: 0.0 Hodnotiť:

Re: dnes má meniny Vanda Od: čitateľ | Pridané: 8.2.2017 9:36 Málokto si tu stojí za svojimi tvrdeniami. Každý ale chce ukázať, že dokáže kopypastnúť predmetnú frázu do gúgla. Odpovedať Známka: 3.3 Hodnotiť:

Re: dnes má meniny Vanda Od: xyz. | Pridané: 8.2.2017 0:54 Nebuďme ale zaujatí voči nášmu premiérovi... tých možností koho by tam tá umelá inteligencia mohla dosadiť je predsa viac. Odpovedať Známka: 0.0 Hodnotiť:

Re: dnes má meniny Vanda Od: 78569822365 | Pridané: 8.2.2017 11:43 Napríklad hajlujúceho fúzača. Odpovedať Známka: -5.0 Hodnotiť:

Re: dnes má meniny Vanda Od: ersgfasd | Pridané: 8.2.2017 7:14 Príspevok bol zmazaný pre nevhodný a/alebo vulgárny obsah. Odpovedať Známka: 10.0 Hodnotiť:

Re: dnes má meniny Vanda Od: joyo | Pridané: 8.2.2017 7:41 Zalezi na com budu trenovat neuronovu siet. Ak na fotke tvojej drzky, malo by to dosiahnut realistickych vysledkov. Odpovedať Hodnotiť:

..... Od: čorv | Pridané: 7.2.2017 20:59 K*rrrrrrrva mať do hajzlu, ani nechcem vedieť, čoho bude AI schopná za 20 rokov... Odpovedať Známka: -1.7 Hodnotiť:

Re: ..... Od: ffdf | Pridané: 7.2.2017 21:00 šag sa zabi a nemusíš vedieť čo bude vedieť zajtra :-) Odpovedať Známka: 5.0 Hodnotiť:

Re: ..... Od: Hrbáč jožo | Pridané: 7.2.2017 21:04 Takže už to začína... nejakému debilkovi struhnem jednu výchovnú, 20px kamera z vedľajšieho kebab house-u alebo od nejakého mrda s 50€ coool fónom z aliexpressu ma zachytí, foto sa porovná s profilovkami na G+ a som v piči Odpovedať Známka: 2.7 Hodnotiť:

Re: ..... Od: Meno: | Pridané: 7.2.2017 21:13 Pripadne by sa to dalo nasadit na "stare pripady", ked zaznam existuje, no nie je dostatocne kvalitny na identifikaciu a takto by mozno v nejakom percente (mizivom?) dalo aspon odrazit k dalsiemu vysetrovaniu. Dokaz by to priamo samo nebol, kedze ta info je extrapolovana. Odpovedať Známka: 8.6 Hodnotiť:

Re: ..... Od reg.: akoze | Pridané: 7.2.2017 21:22 staci ze to pocas vysetrovania "ujde" do bulvaru a zlyncuje ta sudca z ludu. Odpovedať Známka: 5.0 Hodnotiť:

Re: ..... Od: syntaxterrorXXX | Pridané: 8.2.2017 10:32 Pripadne by sa to dalo umelej inteligencii mozno v nejakom percente rovno i poradit zelane vysledne riesenie . Odpovedať Známka: 10.0 Hodnotiť:

Re: ..... Od: Anal Fabet | Pridané: 7.2.2017 22:29 V pohode, za teba si to odserie Bruce Willis (chlapik na zvacsenej 32x32 foto ma jeho usta na 100%) Odpovedať Známka: 10.0 Hodnotiť:

Re: ..... Od: dj_v | Pridané: 7.2.2017 21:07 maternicové mlyny melú pomaly, ale isto Odpovedať Známka: 2.0 Hodnotiť:

CSICSICSI Od: Bludič | Pridané: 7.2.2017 21:13 To ešte potrvá, kým nejaká AI doženie borcov z CSI http://dopice.sk/j4K (sledujte klávesnicu) Odpovedať Známka: 10.0 Hodnotiť:

Re: CSICSICSI Od: sak ja ne? | Pridané: 8.2.2017 8:22 *puts on sunglasses* Yeaaaaaaaaaaaaaaaaw Odpovedať Známka: 10.0 Hodnotiť:

Re: CSICSICSI Od reg.: Pjetro de | Pridané: 8.2.2017 8:51 ale kdeze to je prdkanie po klavesnici so 600 udermi za minutu, ale toto nedokaze AI ani v 2050: ------------- ------------- ------------- https://youtu.be/3uoM5kfZIQ0?t=44 ------------- ------------- ------------- tam retardacia dosahuje svoje limity Odpovedať Známka: 10.0 Hodnotiť:

Re: CSICSICSI Od reg.: Pjetro de | Pridané: 8.2.2017 8:59 hlavne zoom toho oka az na rohovku je uuuplne iny obrazok uuuuplne ineho oka nafoteneho pekne priamo a spredu Odpovedať Známka: 10.0 Hodnotiť:

myslim ze trosku vedla Od: iExploder | Pridané: 7.2.2017 21:23 uz je prvy april Odpovedať Známka: 7.1 Hodnotiť:

Re: myslim ze trosku vedla Od: vsevec | Pridané: 8.2.2017 7:16 prvá ochutnávka Odpovedať Známka: 10.0 Hodnotiť:

Spravy od google Od: Kamtcho | Pridané: 7.2.2017 21:23 Poslednou dobou ma vzdy po novinkach od google mrazi. Ako tesim sa tomu ale mrazi :) Odpovedať Známka: 2.0 Hodnotiť:

Re: Spravy od google Od: Roztopasniik | Pridané: 8.2.2017 1:16 Ja sa vobec netesim a tiez mrazi. Odpovedať Známka: 6.0 Hodnotiť:

Titulok: Od: Meno: | Pridané: 7.2.2017 21:31 podla mna to funguje dobre, ci? http://dopice.sk/j4M Odpovedať Známka: 10.0 Hodnotiť:

Re: Titulok: Od: EL_Pepinko | Pridané: 8.2.2017 10:14 Ale az takto dobre nie: http://images-cdn.9gag.com/photo/2078832_700b.jpg Odpovedať Známka: 10.0 Hodnotiť:

podobnost Od reg.: miroc | Pridané: 7.2.2017 22:11 Podla mna su iba podobne ti obrazky. Povedal by som ze sa standardne podobaju na beznu tvar cloveka muz\zena. Odpovedať Známka: 10.0 Hodnotiť:

domyslanina Od: trololoman | Pridané: 7.2.2017 22:13 akurat ze na tej vyprodukovanej zvacsenine je nejaka ina osoba ako povodne, hlavne ta na tej prvej fotke je dost ina Odpovedať Známka: 8.8 Hodnotiť:

Re: domyslanina Od: fdssfd | Pridané: 8.2.2017 0:47 Kde udelal soudruh Umela Inteligencia chybu? Odpovedať Známka: 6.0 Hodnotiť:

Re: domyslanina Od: čitateľ | Pridané: 8.2.2017 9:42 Gúgl zaspal dobu. U nás táto tradičná stáročná technika zľudovela pod známym príslovím: Z hovna upliesť bič. Odpovedať Hodnotiť:

Re: domyslanina Od: čitateľ | Pridané: 8.2.2017 9:45 Aktuálne teda pod kodóvým označením dekompresnej metódy BZH. Odpovedať Hodnotiť:

Re: domyslanina Od: 78569822365 | Pridané: 8.2.2017 11:46 Výsledok zväčšenia je priamo závislý od subjektívnych predstáv alebo preferencií tvorcov algoritmu. Prípadne od štatisticky vyhodnotených priemerov vzhľadu tvárí. Pravdivé spätné zobrazenie reálne zmenšenej tváre je nemožné. Odpovedať Známka: 3.3 Hodnotiť:

Re: domyslanina Od: Eric | Pridané: 8.2.2017 8:23 Tie obrázky vôbec sú dosť rozdielne .... Prečo neurobili fotku čistú a zlú a vložiť všetko na porovnanie ako bude vyzerať výsledok UI či sa bude podobať realite, toto je sci-fi, lebo nevieme reálnu tvár, či sa priblížil výsledok alebo ani vo sne... Ale asi to druhé, hlúposť... Programy dokážu generovať tváre na počkanie, a filmové štúdiá ani nespomeniem :D Odpovedať Známka: -4.3 Hodnotiť:

Re: domyslanina Od: ludska inteligencia | Pridané: 8.2.2017 15:06 A citat vies? Odpovedať Známka: 10.0 Hodnotiť:

Re: domyslanina Od: vkr | Pridané: 8.2.2017 8:23 nech tam skusia dat foto psa alebo nejaku rybu a tiez to bude clovek Odpovedať Známka: 3.3 Hodnotiť:

Re: domyslanina Od: partizann | Pridané: 8.2.2017 10:17 Inak povedane AI si to tam dokreslilo ako sa mu pacilo :) Uz vidim ako podobne obrzky z kamier budu pouzivat ako usvedcujuci dokaz - dokreslia tam tvar obzalovaneho :D Odpovedať Hodnotiť:

hah csi Od: captain | Pridané: 7.2.2017 22:24 tak, čím ďalej idem od toho 8x8 obrázka, tým jasnejšie vidno črty tváre, kto vie ako by to išlo keby sa to učilo na 1 mil. tvárach a malo to dokresliť, no chcelo by to viac testov Odpovedať Známka: -2.0 Hodnotiť:

Re: hah csi Od: Trololo | Pridané: 8.2.2017 9:01 Cize zasa sa amateri z Google neprisli poradit na DSL.sk a namiesto trenovania na milione tvari to trenovali prave na tych troch z prezentacie :( Odpovedať Známka: 5.6 Hodnotiť:

Slabota Od: SkajnetBejbe | Pridané: 7.2.2017 23:45 Čiže,môžeme povedať to,že algoritmus od Google v podstate skresľuje realitu a vytvára obrázky s vyšším rozlíšením tým spôsobom,že si dopľňuje pixle z už vopred naskenovaných obrázkov..Akože na to,aby boli tie obrázky viac hodnoverné potrebuje UI naskenovať v podstate celý svet spolu aj s obyvateľmi a to trojrozmerne..A potom sa môže začať veselo pŕzniť akákoľvek realita a to na počkanie..teším sa :) Odpovedať Známka: 8.0 Hodnotiť:

Re: Slabota Od reg.: Pjetro de | Pridané: 8.2.2017 9:01 nepotrebuje naskenovat cely svet, na dosiahnutie 90% posobivosti a uchvatnosti algoritmu staci naucit sa to na par (desat)tisic fotiek Odpovedať Hodnotiť:

Re: Slabota Od: SkajnetBejbe | Pridané: 8.2.2017 9:06 No áno,ale 90% je pre mňa stále málo rozmanité,možno stačí povedzme 10000 obrázkov,ale z každej rasy.A 3D sken celej hlavy by bol najlepší.. Odpovedať Známka: 10.0 Hodnotiť:

AI a plastika Od: MiMiosdn | Pridané: 8.2.2017 0:08 Databáza fotografií celebrít bola istotne dostupnou, no neviem či bolo správne kŕmiť ten program práve fotkami ľudí, z ktorých väčšina prešla plastikou. Asi to je dôvod výrazných pier a líc na tej prvej fotke.. Možno nadstavbou toho programu bude robo-plastický-chirug? Ale inak skvelé. Žasnem. Odpovedať Známka: 5.0 Hodnotiť:

dk sdsdonsdvo Od: gertrudo | Pridané: 8.2.2017 0:16 Viacej by ma zaujimalo ako to dokaze zaostrit ten obrazok napravo. Odpovedať Známka: 10.0 Hodnotiť:

Titulok príspevku musí mať dĺžku aspoň 5 znakov. Od: dfsgsdgsdfg | Pridané: 8.2.2017 7:35 akurát že neukázali zoomovanie, ale len určitú podobnosť fľaku s nejakou tvárou z databáze. pokiaľ nie je obrázok v databáze, fľak zostane fľakom a nerozoznajú z naho ani len to, či je to vôbec nejaká tvár. Odpovedať Hodnotiť:

cakam Od: real name | Pridané: 8.2.2017 7:45 este cakam kym sa to bude dat aj otacat ako v nepriatelovi statu Odpovedať Hodnotiť:

kopia lepsia nez original Od: risototh | Pridané: 8.2.2017 7:52 tie "zrekonstruovane" zeny su krajsie ako tie originaly :D Odpovedať Známka: 10.0 Hodnotiť:

Re: kopia lepsia nez original Od: mrfdnfbs | Pridané: 8.2.2017 10:28 tento je tiez krajsi ako original ;-) http://imageshack.cz/image/mPU Odpovedať Hodnotiť:

ožné, Google to do Od: trigger.* | Pridané: 8.2.2017 8:40 umela inteligencia vyguglila povodne obrazky, trochu ich zhorsila a velky zazrak je z toho... Odpovedať Hodnotiť:

posobive Od reg.: Pjetro de | Pridané: 8.2.2017 8:58 cloveku sa az nechce verit co to dokazalo urobit s tou 8x8 machulou, kedze vacsia cast informacie tam prakticky vobec nebola daham nieco take za par rokov nasadia aj do resize filtrov programov na editaciu obrazkov, ponivac pixel, bilinear ci bikubic transformacia tomu nesaha ani po paty (akurat instalacka by mala asi 1 TB miesto zopar 100 MB, pretoze tie naucene schemy ako-co dolpnat by niekde museli byt :) Odpovedať Hodnotiť:

Re: posobive Od reg.: Pjetro de | Pridané: 8.2.2017 9:05 --------- --------- --------- --------- ALE: Zmensite si stranku v browseri cca na 10% aby mali obrazky absolutnu velkost 1cm x 1cm a potom kuknite na 8x8 machule !!! A hned uvidite ze sa jedna o ludsku tvar !!! Takze mozne to je :))) --------- --------- --------- --------- Odpovedať Hodnotiť:

Re: posobive Od: bmbmb | Pridané: 8.2.2017 14:40 možné čo? pri malinkom obrázku je možné rozoznať akú-takú tvár, ale detaily, o ktoré ide si tam nedomyslí žiadna super-hyper neurónová AI, tie musí doplniť jedine z databáze fotografií, čiže žiadne CSI/Blade Runner zázraky, ale len a len dostatočne veľká databáza tvárí. čo asi tak bude zázračná neurónová AI rozoznávať na 8*8 pixelovom obrázku môjho ľavého vajca? Odpovedať Hodnotiť:

Re: posobive Od: :Pjetro de | Pridané: 8.2.2017 20:08 praveze "domysli", len si to akosi nestihol pochopit !!! AI doplna detaily nie Z NAUCENYCH TVARI, ale NA ZAKLADE NAUCENYCH TVARI t.j. musela sa najprv naucit je to vlastne ludska tvar, co je pre nu typicke a na zaklade toho doplnila detaily tvárí, KTORE V DATABAZE VOBEC NEMALA Odpovedať Hodnotiť:

Re: posobive Od: gfjffgh | Pridané: 9.2.2017 10:29 tak ako to popisuješ je to "domýšľanie detailov" už v princípe nezmysel, pretože každá tvár je v detaile trochu iná a z 8x8 pixelu tak ako je to prezentované je identifikácia NEVIEROHODNÁ, jedine s pomocou už známej vzorky s dostatočne vysokým rozlíšením. Odpovedať Hodnotiť:

Re: posobive Od: poldinko | Pridané: 8.2.2017 9:17 kym toto pride do realneho pouzitia 1TB ti bude pripadat ako dnes 1MB nehovoriac ze vsetko bude v cloude a doma budes mat iba terminal (obrazovku s pristupom do cloudu) Odpovedať Hodnotiť:

pochybovačov je tu dosť Od: Samael | Pridané: 8.2.2017 9:40 A aj ja sa pre tentokrát zaradím medzi nich. Medzi tých ktorí nič nedokázali, ale prácu druhých dokážu zhodiť. Takže toto podľa mňa nebude v realite fungovať. Tu to použili na na obrázkoch ktoré vznikli zmenšením pôvodných obrázkov - čiže už na ich zmenšenie bol použitý nejaký algoritmus. Avšak v realite, kde v origináli je zachytený objekt, tak aj keby už bol v RAW formáte, tak časť z toho obrázka vo veľkosti 8×8px by bol iba šum a nie nejakým algoritmom zmenšený originál. Odpovedať Hodnotiť:

Re: pochybovačov je tu dosť Od reg.: Pjetro de | Pridané: 8.2.2017 9:51 nerozumiem .... myslis ze snimac s velkostou 8x8 pixelov (a teda rozlisenim 64 pix) by mal horsie vystupy jak tie 8x8 machule? proste tzv. "normalna" odfotena fotka celej tvare s rozliseim 8x8 ... ci ten snimac bude mat 1x1 mm, alebo bude APS-C alebo fullframe 36x24 mm je ina vec (https://goo.gl/MNyLzo) v zasade aj 1x1 mm snimac by mal super-bohovo velke pixely o ktorych sa moze kompaktom len snivat ... Odpovedať Hodnotiť:

Re: pochybovačov je tu dosť Od: Samael | Pridané: 8.2.2017 11:48 nie - myslel som to tak, že mňa by o fungovaní tejto technológie presvedčili, keby urobili fotku normálnym aparátom s akýmkoľvek bežným rozlíšením, ale napríklad v tomto prípade osoba, by bola tak ďaleko, že jej tvár by na tej fotke zabrala práve tých 8×8px. A nie ako je to v tomto prípade, že fotku tváre na 8×8 zmenšil nejaký počítačový algoritmus a potom to tá umelá inteligencia samplovala nazad. Odpovedať Hodnotiť:

Re: pochybovačov je tu dosť Od reg.: Pjetro de | Pridané: 8.2.2017 12:49 tak to by neslo, pretoze vysek z nejakej 10-20 Mpix fotky takej malej matice 8x8 pixelov (co je mimochodom matica pre fourierovu transofmaciu pre vacsinu stratovych kompresii) by bol tak zatazeny softverovym postprocesingom, ze by to vydalo o dost odlisny vysledok to je zrejme, na to sa ani netreba pytat Odpovedať Hodnotiť:

Re: pochybovačov je tu dosť Od: Samael | Pridané: 8.2.2017 13:44 Ja som sa na to predsa ani nepýtal, ja som to rovno spochybnil a to aj v prípade ak by to bolo v RAW formáte - surové dáta bez kompresie.... inak povedané žiadne CSI sa nekoná. Odpovedať Hodnotiť:

Pridať komentár