Het ongemak dat door je ruggengraat kruipt als je iets ziet dat zich menselijk gedraagt, maar dat niet is, blijft een groot probleem in de robotica, vooral voor robots die zijn gebouwd om er net zo uit te zien en te spreken als wij.
Dat eigenaardige gevoel wordt de griezelige vallei genoemd. Eén manier waarop robotici die vallei proberen te overbruggen, is door de lipbewegingen van een robot te matchen met zijn stem. Dat maakte Columbia University afgelopen woensdag bekend onderzoek waarin wordt onderzocht hoe een nieuwe golf robotgezichten realistischer kan spreken.
Hod Lipson, een hoogleraar techniek uit Columbia die aan het onderzoek heeft meegewerkt, vertelde CNET dat een van de belangrijkste redenen waarom robots ‘griezelig’ zijn, is dat ze hun lippen niet bewegen zoals wij als ze praten. “We streven ernaar dit probleem op te lossen, dat in de robotica verwaarloosd is”, zei Lipson.
Mis geen enkele van onze onpartijdige technische inhoud en laboratoriumbeoordelingen. CNET toevoegen als favoriete Google-bron.
Dit onderzoek komt op het moment dat er een hype rond robots is ontstaan die zijn ontworpen voor gebruik thuis en op het werk. Bij CES 2026 eerder deze maand zag CNET bijvoorbeeld een scala aan robots ontworpen om met mensen te communiceren. Alles van het nieuwste Boston Dynamics-atlas robot naar huishoudelijke robots zoals degenen die wasgoed opvouwenen zelfs een schildpadvormige bot ontworpen voor milieuonderzoek, verscheen op ’s werelds grootste technologiebeurs. Als CES een indicatie is, zou 2026 een groot jaar voor consumentenrobotica.
Centraal daarbij staan mensachtige robots met lichamen, gezichten en een synthetische huid die de onze nabootst. Het CES-cohort inbegrepen mensachtige robots van Realbotix dat informatiehokjes zou kunnen gebruiken of mensen comfort zou kunnen bieden, evenals a robot van Lovense ontworpen voor relaties die zijn uitgerust met AI om intieme gesprekken te ‘onthouden’.
Maar een fractie van een seconde dat de lipbeweging en de spraak niet op elkaar aansluiten, kan het verschil betekenen tussen een machine waaraan je emotioneel gehecht kunt raken, en een machine die weinig meer is dan een machine. verontrustende animatronic.
Dus als mensen accepteren dat mensachtige robots in het dagelijks leven onder ons ‘leven’, is het waarschijnlijk beter als ze ons niet een beetje ongemakkelijk maken als ze praten.
Bekijk dit: Lipsynchroniserende robot zingt een liedje
Lip-synchroniserende robots
Om robots te maken met menselijke gezichten die spreken zoals wij, moeten de lippen van de robot zorgvuldig worden gesynchroniseerd met de audio van zijn spraak. Het onderzoeksteam van Columbia heeft een techniek ontwikkeld die robotmonden laat bewegen zoals de onze, door zich te concentreren op hoe taal klinkt.
Ten eerste bouwde het team een mensachtig robotgezicht met een mond die kan praten (en zingen) op een manier die het griezelige vallei-effect vermindert. Het robotgezicht, gemaakt met siliconenhuid, heeft magneetconnectoren voor complexe lipbewegingen. Hierdoor kan het gezicht lipvormen vormen die 24 medeklinkers en 16 klinkers bedekken.
Bekijk dit: Lipsynchroniserend robotgezicht laat individuele woorden horen
Om de lipbewegingen te matchen met spraak, ontwierpen ze een ‘leerpijplijn’ om visuele gegevens van lipbewegingen te verzamelen. Een AI-model gebruikt deze gegevens voor training en genereert vervolgens referentiepunten voor motorische commando’s. Vervolgens verandert een “gezichtsactietransformator” de motorcommando’s in mondbewegingen die synchroniseren met audio.
Met behulp van dit raamwerk kon het robotgezicht, Emo genaamd, in meerdere talen ‘spreken’, inclusief talen die geen deel uitmaakten van de training, zoals Frans, Chinees en Arabisch. De truc is dat het raamwerk de klanken van taal analyseert, en niet de betekenis achter de klank.
“We hebben het taalspecifieke probleem vermeden door een model te trainen dat rechtstreeks van audio naar lipbeweging gaat”, aldus Lipson. “Er is geen begrip van taal.”
Bekijk dit: Lip-Syncing Robot Face introduceert zichzelf
Waarom heeft een robot überhaupt een gezicht en lippen nodig?
Mensen werken al heel lang samen met robots, maar ze hebben er altijd uitgezien als machines, en niet als mensen: de onstoffelijke en zeer mechanisch ogende armen op lopende banden of de dikke schijf die een robotvacuüm is die over onze keukenvloeren beweegt.
Nu de AI-taalmodellen achter chatbots echter steeds vaker voorkomen, werken technologiebedrijven er hard aan om robots te leren hoe ze in realtime met ons kunnen communiceren door middel van taal.
Er is een heel vakgebied genaamd mens-robot interactie dat onderzoekt hoe robots naast mensen moeten bestaan, zowel fysiek als sociaal. In 2024, een studie uit Berlijn, waarbij 157 deelnemers betrokken waren, ontdekte dat het vermogen van een robot om empathie en emotie uit te drukken via verbale communicatie van cruciaal belang is voor effectieve interactie met mensen. En nog een onderzoek uit 2024 uit Italië ontdekte dat actieve spraak belangrijk was voor de samenwerking tussen mens en robot bij het werken aan complexe taken zoals montage.
Als we thuis en op het werk afhankelijk zijn van robots, moeten we met hen kunnen praten zoals we dat met elkaar doen. In de toekomst, zegt Lipson, zou onderzoek met lipsynchroniserende robots nuttig kunnen zijn voor elk soort mensachtige robot die met mensen moet communiceren.
Het is ook gemakkelijk om je een toekomst voor te stellen waarin mensachtige robots identiek zijn aan ons. Lipson zegt dat een zorgvuldig ontwerp ervoor kan zorgen dat mensen begrijpen dat ze met een robot praten en niet met een persoon. Een voorbeeld zou zijn dat humanoïde robots een blauwe huid moeten hebben, zegt Lipson, “zodat ze niet voor een mens kunnen worden aangezien.”
