Piltidega töötamise algoritmide loomine on alati olnud üsna keeruline, kuid paljulubav ülesanne. Kui ma veel 1999. aastal oma lõputööd kirjutasin, oli "mustrituvastuse" teema automaatsetes juhtimis- ja haldussüsteemides väga asjakohane.
Seda saavad nad tänapäeval teha. India arendajad on esitanud süsteemi, mis suudab hägustest piltidest lühikesi videoid luua. Algoritm töötab konvolutsiooniliste ja korduvate närvivõrkude baasil ja võimaldab teil muuta piltide liikumisartiklid lühikeseks (kuni kümme kaadrit) videoks.
Rohkem detaile …
Hägust pilti vaadates saab inimene vaimselt pildi toimuvast. Näiteks võib foto nägemine uduste tiibadega linnust näha, et pildi hägusus on tingitud tiibade omandamise ajal esinevatest artefaktidest. Arvutinägemissüsteemide jaoks on see ülesanne aga keerulisem ja enamus teadaolevatest meetoditest on suunatud ainult liikumisartiklite ja raamide silumiseks.
India tehnoloogiainstituudi teadlased AN Rajagopalani juhtimisel tegid ettepaneku, et terve lühikese video loomiseks võiks kasutada ühte udust pilti: st taastada originaalne liikumine selle kujutisel olevatest esemetest. Selleks töötasid nad välja konvolutsioonilistel närvivõrkudel põhineva algoritmi, mida kasutatakse aktiivselt nii automaatse pildituvastusega kui ka korduvate närvivõrkude jaoks.
Mudelit treenitakse suurel hulgal kaadriteks jagatud videol. Pärast seda otsib närvivõrk sellist kaadrit, mille artefaktid vastavad kõige paremini treeningvalimi raami artefaktidele. Pärast seda "taastab" dekooder videopildile jäädvustatud treeningvalimi raami artefaktid. Seega salvestab mudel andmed treeningvalimis saadaolevate iga hägustunud kaadri võimalike taastatud liikumiste kohta.
Reklaamvideo:
Töö tulemusel valmib närvivõrk hägustunud pildist rekonstrueeritud video, mis koosneb kümnest kaadrist. Välja töötatud algoritm aitab loojate sõnul tulevikus parandada mitte ainult hägustunud piltide, vaid ka videote enda taastamist.
Liikumisartiklite eemaldamine üksikutest kaadritest võib parandada ka video voogesitust. Siiani kasutatakse sel eesmärgil peamiselt algoritme bitikiiruse kohandamiseks sõltuvalt video kiirusest ja selle puhverdusest.
Elizaveta Ivtushok
