AI资讯

亚马逊Prime Video上线AI口型同步功能,解决跨语言配音痛点

智能摘要

Video全面上线全新的AI口型同步功能。同时,亚马逊官方确认,即将在12月9日上线的第三季也将同步支持该项AI口型同步功能,并在未来逐步扩展到更多影视作品中。

观赏外语影视剧期间最让人出戏的是什么? 配音和角色口型完全对不上? 现下这个让人难受的问题总算要解决了, 亚马逊旗下的Prime Video刚刚官宣要全面上线AI口型同步功能, 演员的嘴型定会和翻译后的语音精准适配!

技术突破让配音更真实

这次上线的AI口型同步技术, 能自动把演员面部动作调整匹配到新语音音轨的相应状况。过往配音最突出的大问题就是画面里的演员明明在说原语言, 声音却跑换成了另外的语言, 观众始终会有那种莫名的异样割裂感。

当前这项技术使得英语观众观看德语剧集时, 演员嘴巴的形态看起来宛若在说英语那样自然流畅。这绝非单纯的声音替换, 而是自始至终重新合成面部表情。

首发项目德国热门剧集

目前这项技术率先应用于位于德国的剧集《贵族高中: 我们之间的鸿沟》。包括这部剧集在全球范围内乃至在各类相关领域均有大量受众, 而选用它作为首发项目具备相当鲜明的代表性。

全球订阅用户已经可以在该剧第一和第二季中体验新功能。亚马逊还确认十二月九日上线的第三季也会同步支持AI口型同步, 说明他们打算把这个功能长期做下去。

技术背后是AI加视觉特效

这项功能不是单一技术, 而是结合了AI与视觉特效。演员说出台词经翻译后时, 脸部表情、嘴型动作都能和收到声音完美契合。

近期生成式AI在视频领域发展很快, Meta等平台也在力推类似的自动配音功能。亚马逊这次走在了最前面, 径直将技术落地应用到真实生动的影视内容之中。

早期测试积累丰富经验

其实亚马逊早就开始探索这个方向了, 去年他们在12部电视剧、电影中进行了初步试验, 这些当中包括《熙德: 传奇》、《我的鹦鹉妈妈》等作品呢。

彼时专门针对英语跟西班牙语配音展开了有关测试, 通过一整年的积聚与改进, 此刻正式全方位推出上线, 表示他们相关技术已经算是较为有信心的了。

流媒体全球化迎来升级

这项技术对于流媒体行业全球化分发意义十分重大, 此前一部剧集若想做成多语言版本, 配音阶段出现成本高, 效果差的问题, 使得众多平台都摒弃了深层面的本地化处理工作。

如今AI技术能让不同语言观众看到更贴进原版似的体验, 这意味着未来将有更多小语种剧集普及推广到全球, 观众的选择会更具丰富多样性。

行业竞争将进一步加剧

不仅是亚马逊, 整个行业都在布局 AI 配音、口型同步两类技术, 谁能做出体验优良方案, 谁就能争取来更多订阅用户。

这项技术的成熟或许没准可能大概会被改动观众鉴赏外语剧集观受的习惯,相当繁多的人群搞不好只会选择配音版式而非字幕版式, 尤为是那些不爱观看字母的家庭受众。

你觉着以后看上外国语言做的剧时还会死死坚持看那些字幕吗? 欢迎在评论区聊下你的各种看法, 如果觉着有关这方面的文章对你有用, 可别忘记点个赞还得帮忙分享出去哦!

相关文章

OPPO陈明永谈AI不是替代人 是解决难题以人为本

AI资讯 # AI # CEO # OPPO