VIDEO: Robot prepoznaje smiješak prije nego se nasmiješite

Yuhang Hu i njegovi kolege u Hod Lipson's Labu na odjelu Columbia Engineering na Sveučilištu Columbia u New Yorku, razvili su robotsku ljudsku glavu s licem pod nazivom Emo, koja je opremljena sa 26 pokretača koji omogućuju širok raspon nijansiranih izraza lica.

Glava je prekrivena mekom silikonskom kožom s magnetskim sustavom pričvršćivanja, što omogućuje jednostavno prilagođavanje i brzo održavanje. Za realističnije interakcije, istraživači su integrirali kamere visoke razlučivosti unutar zjenice svakog oka, omogućujući Emu da uspostavi kontakt očima, ključan za neverbalnu komunikaciju, kao što možete vidjeti u ovom videu.

Tim je razvio dva modela umjetne inteligencije: jedan koji predviđa ljudske izraze lica analizirajući suptilne promjene na ciljanom licu i drugi koji generira motoričke naredbe koristeći odgovarajuće izraze lica. 

Kako bi istrenirali robota kako praviti izraze lica, istraživači su stavili Ema ispred kamere i pustili ga da radi nasumične pokrete. Nakon nekoliko sati, robot je naučio odnos između njihovih izraza lica i motoričkih naredbi, otprilike onako kako ljudi vježbaju izraze lica gledajući se u ogledalo. To je ono što tim naziva "samomodeliranje", slično našoj sposobnosti da zamislimo kako izgledamo kada napravimo određene izraze.

Zatim je tim pustio videozapise ljudskih izraza lica kako bi ih Emo promatrao kadar po kadar. Nakon treninga, koji je trajao nekoliko sati, Emo je mogao predvidjeti izraze lica ljudi promatrajući sitne promjene na njihovim licima dok počinju stvarati namjeru da se nasmiješe. 

“Mislim da je točno predviđanje ljudskih izraza lica revolucija. Tradicionalno, roboti nisu dizajnirani da uzimaju u obzir ljudske izraze tijekom interakcije. Sada robot može integrirati izraze ljudskog lica kao povratnu informaciju,” rekao je glavni autor studije Yuhang Hu, doktorand na Columbia Engineeringu. „Kada robot radi suizražavanje s ljudima u stvarnom vremenu, to ne samo da poboljšava kvalitetu interakcije, već također pomaže u izgradnji povjerenja između ljudi i robota. U budućnosti, kada bude u interakciji s robotom, promatrat će i tumačiti vaše izraze lica, baš kao stvarna osoba.”

Istraživači sada rade na integraciji verbalne komunikacije, koristeći veliki jezični model poput ChatGPT-a u Emo.