产品

Nuance Labs 推出 Emma:基于 Nuplex 1.0 全双工模型的双向实时 AI 视频人设

精选理由

Nuance Labs 搞了个能边听边说的视频角色 Emma,回复时机 89% 对齐真人。有意思的是她的表情来自一位真实演员的录制数据,眨眼、眼神这些小动作都是一个人的。做数字人或虚拟主播的可以看看思路。

Nuance Labs 发布 AI 视频人设 Emma,其回复时机与真人说话者的匹配率达到 89%。Emma 底层由全双工视听模型 Nuplex 1.0 驱动,能在用户仍在说话时同步听与说,实现边听边答的实时对话。

正文

Emma 的面部表情与声音来自一位真实演员,团队录制了她真实聆听、反应和说话的方式,再喂给 Nuplex 模型训练,使整套动作属于同一角色。具体细节包括:用来强调的长时间眨眼、眯眼、目光飘走又回来的眼神、情绪激动时的小幅度跳动,以及跟随句子的头部动作。

这类产品的关键差异点在于对话时机而非画面逼真度——全双工能力让 Emma 在用户说话中途就能做出反应,接近真人交流节奏。对做虚拟主播、客服数字人、陪伴类产品的团队来说,表情细节与时机数据的结合是目前可参考的方向。

原文 · rohanpaul_ai

Once a talking face can hold a live conversation, timing matters more than how real it looks.

Nuance Labs launched Emma, an AI video persona whose reply timing matched real human speakers 89% of the time.

She runs on Nuplex 1.0, a full-duplex audiovisual model that listens and speaks at once, so her face reacts while you’re still talking.

A very interesting part is that Emma’s face and voice come from a real actress who worked with Nuance Labs to record how she actually listens, reacts and speaks, then fed into their Nuplex model.

The result is a set of mannerisms that belong to one character.

A long blink for emphasis. A squint. Eyes that drift away and come back. A small jump when she can’t hold back how strongly she feels. A head that moves with the sentence.

产业坐标与信源核验

本条情报归属 AITOP「产品」核心追踪栏目。在跨区域产业观察坐标中,该动态直接关联「AI 开发者工具链、Coding Agent 与工程化实践」研究主线,反映出当前技术演进与商业落地的最新风向。涉及核心实体与技术议题包括:Nuance Labs、Nuplex 1.0、数字人、全双工,读者可通过下方标签进入对应专题页查阅历史脉络与关联对比。

信源核验说明:本文原始线索采编自「rohanpaul_ai」(@rohanpaul_ai),经 AITOP 多维评分管线结构化提炼。截至目前,全网已有 2 家独立信源对该事件进行交叉印证与跟进报道(含 elvis 等),属于近期高关注度行业信号。