Pesquisadores da Columbia construíram um rosto de robô de 26 motores que aprende a sincronização labial de vídeo usando IA, melhorando a interação humano-robô. Columbia researchers built a 26-motor robot face that learns lip-syncing from video using AI, improving human-robot interaction.

Pesquisadores da Universidade de Columbia criaram um rosto de robô com 26 motores que aprende a sincronizar os lábios observando humanos em vídeo, usando IA para combinar sons com movimentos labiais realistas. Researchers at Columbia University have created a robot face with 26 motors that learns to lip-sync by observing humans on video, using AI to match sounds to realistic lip movements. O sistema, treinado através da auto-observação e estudando fala e música, pode sincronizar lábios com áudio através de línguas e tons, melhorando a interação humano-robô natural. The system, trained through self-observation and studying speech and song, can synchronize lips with audio across languages and tones, improving natural human-robot interaction. Embora os desafios permaneçam com certos sons, a tecnologia visa melhorar a conexão emocional em aplicações como saúde e educação, abordando uma lacuna fundamental na expressão robótica. Though challenges remain with certain sounds, the technology aims to enhance emotional connection in applications like healthcare and education by addressing a key gap in robotic expression.