Kuvien kanssa työskentelevien algoritmien luominen on aina ollut melko vaikea, mutta lupaava tehtävä. Kun kirjoitin vielä valmistumisprojektiani vuonna 1999, aihe "kuvioiden tunnistus" oli erittäin tärkeä automaattisissa ohjaus- ja hallintajärjestelmissä.
Sitä he voivat tehdä tänään. Intialaiset kehittäjät ovat esittäneet järjestelmän, joka voi luoda lyhyitä videoita epäselvistä kuvista. Algoritmi toimii konvoluutio- ja toistuvien hermoverkkojen perusteella ja antaa sinun kääntää kuvien liiketaiheita lyhyeksi (enintään kymmeneen kehykseen) videoksi.
Lisätietoja …
Kun tarkastelet epäselvää kuvaa, henkilö voi henkisesti saada kuvan tapahtumasta. Esimerkiksi valokuvan näyttäminen linnusta, jolla on sumeaita siipiä, viittaa siihen, että kuvan hämärtyminen johtuu siipien liikkeessä olevista esineistä hankinnan aikana. Tietokonenäköjärjestelmillä tämä tehtävä on kuitenkin vaikeampi, ja suurin osa tunnetuista menetelmistä on tarkoitettu vain liiketaiheiden ja kehyksien tasoittamiseen.
AN Rajagopalanin johtamat Intian teknologiainstituutin tutkijat ehdottivat, että yhtä epäselvää kuvaa voitaisiin käyttää kokonaisen lyhyen videon luomiseen: toisin sanoen alkuperäisen liikkeen palauttaminen kuvan esineistä. Tätä varten he kehittivät konvoluutiohermoverkkoihin perustuvan algoritmin, jota käytetään aktiivisesti automaattiseen kuvan tunnistamiseen liittyvissä tehtävissä, sekä toistuvia hermoverkkoja.
Malli on koulutettu useille videoille, jotka on jaettu kehyksiin. Sen jälkeen hermoverkko etsii sellaista kehystä, esineet, joilla läheisimmin vastaavat harjoitusnäytekehyksen artefakteja. Sen jälkeen dekooderi "palauttaa" harjoitusnäytekehyksen esineet videolle kaapattuihin liikkeisiin. Siten malli tallentaa tietoja mahdollisista palautetuista liikkeistä jokaisesta harjoittelunäytteessä olevasta epäselvästä kehyksestä.
Mainosvideo:
Työn tuloksena hermoverkko tuottaa videon, joka on rekonstruoitu sumetusta kuvasta ja joka koostuu kymmenestä kehyksestä. Kehitetty algoritmi voi tekijöiden mukaan tulevaisuudessa auttaa parantamaan epäselvien kuvien, myös videoiden, palauttamista.
Liiketoimenpiteiden poistaminen yksittäisistä kehyksistä voi myös parantaa videon suoratoistoa. Toistaiseksi tähän tarkoitukseen on käytetty pääasiassa algoritmeja bittinopeuden mukauttamiseksi videon nopeudesta ja sen puskurista riippuen.
Elizaveta Ivtushok