Reklāma

Radīta mākslīgā intelekta sistēma, kas liek cilvēkiem ticēt, ka sintezētie skaņas efekti ir īsti

Jaunākie raksti

Nothing ear (1) austiņu apskats – “Nasing spešal” vai tomēr “Spešal”?

Pēc Stīva Džobsa došanās viņsaulē, gana daudz tehnoloģiju personības bija gatavas uzvilkt melnu bītleni un zilas džinsenes, lai piedomātu...

Kens Bloks sadarbosies ar Audi, lai rādītu trikus ar jaudīgiem elektroauto

Pēc 11 gadu sadarbības pazīstamais autosportists Kens Bloks pārtraucis sadarbību ar Ford, un šobrīd gatavojas uzsākt jaunus projektus tieši...

“Twitter” publicētie video iegūs labāku kvalitāti

"Twitter" nācis klajā ar savu jaunāko uzlabojumu, kas šoreiz saistīts ar lietotāju augšupielādēto videoklipu kvalitātes pacelšanu. Oficiālais "Twitter" atbalsta...

Latvijā ieradies pilnībā elektriskais Mercedes-Benz EQV minivens

Mercedes-Benz EQV ir pirmais augstākās klases minivens ar pilnībā elektrisku piedziņu. Ar sasniedzamību līdz pat 418 kilometriem, EQV nosaka...

Forumā “5G Techritory” diskutēs par 300 miljardu eiro vērto ES fondu lietderīgu izmantošanu digitalizācijas veicināšanai

No š.g. 22. līdz 25. novembrim Rīgā notiks Eiropas vadošais ekosistēmas forums “5G Techritory”, kurā nozīmīgākie 5G lēmumu pieņēmēji un praktiķi apspriedīs...

Teju neviena filma nav iedomājama bez valdzinošiem, biedējošiem un kādiem tik vēl ne skaņas efektiem. Parasti tos rada tā sauktie Foley mākslinieki, kuru uzdevums ir iegūt sižetam atbilstošās skaņas, izmantojot esošo ekipējumu. Taču tagad Foley cilvēku ikdienu iespējams manāmi atvieglot – pētnieki izveidojuši automatizētu programmu “AutoFoley”, kas analizē kustību video kadros un rada mākslīgos skaņas efektus, perfekti atbilstošus konkrētajai ainai.

AutoFoley programmas līdzradītājs Džefs Prevosts (Jeff Prevost) skaidro, ka skaņas efektu pievienošana pēcapstrādē, izmantojot Foley mākslu, bijusi sarežģīta filmu un televīzijas skaņu celiņu sastāvdaļa kopš pagājušā gadsimta 30. gadiem. Bez Foley risinājuma filmas šķistu dobjas un attālas. Vienlaikus līdz šim Foley skaņas sintēzes process radījis lielas izmaksas un patērē daudz laika. Tādā ziņā AutoFoley sistēmas šīs problēmas izslēdz.

AutoFoley būtībā ir daudzslāņu mašīnmācīšanās programma. Šobrīd pētnieki izveidojuši divus dažādus modeļus, ko var izmantot skaņas sintēzes procesa pirmajā posmā – darbību identificēšanai video un atbilstošas skaņas noteikšanā.

Pirmais mašīnmācīšanās modelis no video klipu kadriem izvelk attēla funkcijas (piemēram, krāsu un kustību), lai noteiktu atbilstošu skaņas efektu. Savukārt otrs modelis analizē objekta attiecības atsevišķos kadros. Tāpat šis modelis var paredzēt, kāda darbība nākamā būs vērojama video. Tikmēr pēdējā posmā tiek sintezēta skaņa, kas atbilstu aktivitātei vai kustībai, ko paredz kāds no modeļiem.

Pētnieki līdz šim izmantojuši AutoFoley programmu, lai mākslīgi radītu skaņu 1000 īsiem filmu klipiem, atdarinot, piemēram, lietus līšanu, tikšķošu pulksteni, skrejoša zirga soļu dipoņu un daudzas citas skaņas.

Reklāma

1 komentārs

Paziņot par jaunumiem
Paziņot par
1 Comment
vecākie
jaunākie novērtētākie
Inline Feedbacks
View all comments

Zirgs uz kaut ko sēž, ja spēj dabūt tādu skaņu uz mīksta zāliena

Reklāma
Reklāma
Reklāma