Teju neviena filma nav iedomājama bez valdzinošiem, biedējošiem un kādiem tik vēl ne skaņas efektiem. Parasti tos rada tā sauktie Foley mākslinieki, kuru uzdevums ir iegūt sižetam atbilstošās skaņas, izmantojot esošo ekipējumu. Taču tagad Foley cilvēku ikdienu iespējams manāmi atvieglot – pētnieki izveidojuši automatizētu programmu “AutoFoley”, kas analizē kustību video kadros un rada mākslīgos skaņas efektus, perfekti atbilstošus konkrētajai ainai.
AutoFoley programmas līdzradītājs Džefs Prevosts (Jeff Prevost) skaidro, ka skaņas efektu pievienošana pēcapstrādē, izmantojot Foley mākslu, bijusi sarežģīta filmu un televīzijas skaņu celiņu sastāvdaļa kopš pagājušā gadsimta 30. gadiem. Bez Foley risinājuma filmas šķistu dobjas un attālas. Vienlaikus līdz šim Foley skaņas sintēzes process radījis lielas izmaksas un patērē daudz laika. Tādā ziņā AutoFoley sistēmas šīs problēmas izslēdz.
AutoFoley būtībā ir daudzslāņu mašīnmācīšanās programma. Šobrīd pētnieki izveidojuši divus dažādus modeļus, ko var izmantot skaņas sintēzes procesa pirmajā posmā – darbību identificēšanai video un atbilstošas skaņas noteikšanā.
Pirmais mašīnmācīšanās modelis no video klipu kadriem izvelk attēla funkcijas (piemēram, krāsu un kustību), lai noteiktu atbilstošu skaņas efektu. Savukārt otrs modelis analizē objekta attiecības atsevišķos kadros. Tāpat šis modelis var paredzēt, kāda darbība nākamā būs vērojama video. Tikmēr pēdējā posmā tiek sintezēta skaņa, kas atbilstu aktivitātei vai kustībai, ko paredz kāds no modeļiem.
Pētnieki līdz šim izmantojuši AutoFoley programmu, lai mākslīgi radītu skaņu 1000 īsiem filmu klipiem, atdarinot, piemēram, lietus līšanu, tikšķošu pulksteni, skrejoša zirga soļu dipoņu un daudzas citas skaņas.
Zirgs uz kaut ko sēž, ja spēj dabūt tādu skaņu uz mīksta zāliena