Il volto del robot con sincronizzazione labiale è un passo avanti verso l’aiuto dei futuri robot a parlare come noi

Il disagio che ti fa rabbrividire quando vedi qualcosa che si comporta come un essere umano ma non lo è continua a essere un grosso problema nella robotica; soprattutto per i robot costruiti per assomigliare e parlare come noi.

Questa strana sensazione è chiamata la valle misteriosa. Un modo in cui i robotisti stanno cercando di superare questa valle è abbinando i movimenti delle labbra del robot alla sua voce. Mercoledì scorso lo ha annunciato la Columbia University ricerca Esplora come una nuova ondata di volti di robot potrebbe parlare in modo più realistico.

Hod Lipson, un professore di ingegneria della Columbia che ha lavorato alla ricerca, ha detto a CNET che la ragione principale per cui i robot sono “enigmatici” è che non muovono le labbra quando parlano come facciamo noi. “Il nostro obiettivo è risolvere questo problema trascurato nella robotica”, ha affermato Lipson.

Non perdere i nostri contenuti tecnologici imparziali e le recensioni basate sui laboratori. Aggiungi CNET come risorsa Google preferita.

Questa ricerca arriva in un momento in cui c’è un crescente entusiasmo per i robot progettati per l’uso a casa e al lavoro. SU: CES2026 Ad esempio, all’inizio di questo mese CNET ha pubblicato a gamma di robot progettato per interagire con le persone. Tutto dall’ultimo Atlante della Boston Dynamics al robot robot domestici come questi piegare la biancheriae anche a barca a forma di tartaruga Progettato per la ricerca ambientale, è apparso alla più grande fiera tecnologica del mondo. Se il CES è indicativo, il 2026 potrebbe essere un anno. grande anno per la robotica di consumo.

Al centro di questi ci sono robot umanoidi con corpi, volti e pelle sintetica che imitano i nostri. Inclusa la coorte del CES robot dall’aspetto umano Così come Realbotix che può operare negli stand informativi o fornire conforto alle persone Robot di Lovense È pensato per le relazioni, dotato di intelligenza artificiale per “ricordare” le conversazioni intime.

Ma una momentanea discrepanza tra il movimento delle labbra e il parlato può fare la differenza tra una macchina con cui puoi connetterti emotivamente e una che è poco più di una macchina. animatronico inquietante.

Quindi, se le persone accettano che i robot umanoidi “vivano” tra noi nella vita quotidiana, probabilmente sarebbe meglio se non ci disturbassero nemmeno un po’ quando parlano.

Robot con sincronizzazione labiale

Per realizzare robot con volti umani che parlino come noi, le labbra del robot devono essere attentamente sincronizzate con la sua voce parlante. Concentrandosi sul modo in cui la lingua produce i suoni, un gruppo di ricerca della Columbia ha sviluppato una tecnica che aiuta le bocche dei robot a muoversi come le nostre.

Il team ha innanzitutto creato il volto di un robot umanoide con una bocca in grado di parlare e cantare, riducendo l’effetto valle inquietante. Il volto del robot, realizzato in pelle di silicone, è dotato di connettori magnetici per movimenti complessi delle labbra. Ciò consente al viso di formare forme di labbra che si estendono su 24 consonanti e 16 vocali.

Hanno progettato una “conduttura di apprendimento” che raccoglierebbe dati visivi dai movimenti delle labbra per abbinare i movimenti delle labbra con il parlato. Un modello di intelligenza artificiale utilizza questi dati per l’addestramento e quindi crea punti di riferimento per i comandi motori. Quindi, un “trasformatore del movimento facciale” converte i comandi motori in movimenti della bocca che si sincronizzano con la voce.

Utilizzando questa struttura, il volto del robot, chiamato Emo, poteva “parlare” in più lingue, comprese lingue che non facevano parte dell’addestramento, come francese, cinese e arabo. Il trucco è che il framework analizza i suoni della lingua, non il significato dietro il suono.

“Abbiamo evitato il problema specifico della lingua addestrando un modello che va direttamente dalla voce al movimento delle labbra”, ha detto Lipson. “Non esiste il concetto di linguaggio.”

Perché un robot dovrebbe aver bisogno di una faccia e di labbra?

Gli esseri umani lavorano con i robot da molto tempo, ma hanno sempre avuto l’aspetto più di macchine che di esseri umani; i bracci disincarnati e dall’aspetto piuttosto meccanico delle catene di montaggio, o lo spesso disco di un robot aspirapolvere che striscia sui pavimenti della nostra cucina.

Ma man mano che i modelli linguistici di intelligenza artificiale alla base dei chatbot diventano più comuni, le aziende tecnologiche stanno lavorando duramente per insegnare ai robot come comunicare con noi in tempo reale utilizzando il linguaggio.

C’è un intero spazio di lavoro interazione uomo-robot esamina come i robot dovrebbero coesistere con gli esseri umani, sia fisicamente che socialmente. nel 2024 uno studio Lo studio di Berlino, che ha utilizzato 157 partecipanti, ha scoperto che la capacità di un robot di esprimere empatia ed emozioni attraverso la comunicazione verbale è fondamentale per interagire in modo efficace con gli esseri umani. E un’altra corsa nel 2024 Alcuni ricercatori italiani hanno scoperto che la conversazione attiva è importante per la collaborazione tra esseri umani e robot quando si lavora su compiti complessi come l’assemblaggio.

Se vogliamo fidarci dei robot a casa e al lavoro, dobbiamo essere in grado di parlare con loro nello stesso modo in cui lo facciamo tra loro. Lipson afferma che la ricerca futura con i robot con sincronizzazione labiale sarà utile per qualsiasi robot umanoide che abbia bisogno di interagire con gli esseri umani.

È anche facile immaginare un futuro in cui i robot umanoidi saranno uguali a noi. Lipson sostiene che un’attenta progettazione può aiutare le persone a capire che stanno parlando con un robot, non con un essere umano. Ad esempio, Lipson afferma che i robot umanoidi devono avere la pelle blu, “quindi non possono essere confusi con un essere umano”.