1
免责声明:Al优秘圈所有资讯仅代表作者个人观点,不构成任何投资理财建议。请确保访问网址为(kx.umi6.com) 投诉及建议

AI配音产品LipDub的开发者马特·佩诺西斯表示,团队注意到《鱿鱼游戏》中的口型与音频不同步问题,于是开发了LipDub,旨在自动同步口型与配音音轨。该技术现已服务于好莱坞、广告、在线教育和YouTube等多个领域,尤其是在中国,由于庞大的方言和语言市场,LipDub技术有广阔的应用前景。

马特认为,AI音频技术在全球范围内有着广阔的场景,中国在这一领域迅速进步,与美国等国家展开竞争。LipDub不仅帮助英语内容进入非英语市场,还能助力中文内容进入英语及其他语言市场,打破文化和语言障碍。LipDub可以帮助中国公司让特朗普说中文,显示了中国在AI音频领域的技术实力。

LipDub的核心竞争力在于其高质量的清晰度、分辨率以及对复杂内容如侧面、光照变化的处理能力。平台允许用户在多个语言之间转换,为个人和企业提供本地化解决方案。用户上传视频后,系统会自动检测并标记所有面孔,用户标记完成,系统进行训练,最后将新音频文件与扬声器相关联。

LipDub的运营模式为订阅制,用户在平台上购买积分,用于生成视频内容。生成一分钟新内容的时间约为10至20分钟,具体取决于场景的动态程度。马特指出,随着技术发展,未来有望实现实时口型同步和配音。

AI配音领域存在翻译准确性和口语、俚语处理的挑战,但马特表示,这些问题可以通过改进翻译算法和技术逐步解决。同时,LipDub也在关注音频隐私和滥用可能性,制定了严格的内容审核制度,确保平台的健康发展。

马特强调,AI音频技术具有巨大潜力,但并非完美无缺,仍需要人类的持续优化和改进。团队正在努力解决上述挑战,同时加强数字水印等技术手段,以防止音频滥用。此外,LipDub的团队由一流的研究人员组成,他们致力于在AI音频领域进行创新研究,为全球用户提供高质量的本地化解决方案。

LipDub已在好莱坞的ADR(额外录音)工作中发挥作用,同时也与YouTube创作者、广告公司等进行合作,提供定制化的本地化服务。随着公司的发展,LipDub将继续推出新产品,旨在让用户能够以创意的方式访问和利用各种视觉特效应用程序,让个人参与到艺术创作中。

原文链接
本文链接:https://kx.umi6.com/article/4437.html
转载请注明文章出处
分享至
打开微信扫一扫
内容投诉
生成图片
相关推荐
换一换
英伟达吞下45亿美元“哑巴亏”
2025-05-30 19:55:06
跌出前五,苹果真的在中国吃不开了?
2024-07-29 16:15:59
NVIDIA缩水版H20 GPU在中国被疯抢!贡献数百亿美元
2024-12-30 10:16:20
黄仁勋向特朗普呼吁:美国科技公司不能被排除出中国市场
2025-08-28 12:21:12
黄仁勋:对英伟达而言 中国市场独一无二
2025-07-17 14:26:40
暗示特朗普?黄仁勋:中国AI市场有望达500亿美元,绝不能错过!
2025-05-07 08:03:04
商务部部长王文涛会见美国英伟达公司总裁兼首席执行官黄仁勋
2025-07-18 14:43:11
苹果2024大事盘点:推出AI、Vision Pro 在中国表现令人失望
2024-12-22 15:25:44
苹果高管:正努力将“Apple Intelligence”引入中国市场
2024-06-12 07:56:23
英伟达对华芯片供应最新消息:售价将大幅低于先前的H20芯片 预计最快于6月开始量产
2025-05-25 15:23:39
一季度卖出1190万部AI手机,中国成了AI手机的最大潜在市场
2024-06-25 20:46:08
IDC:预测到2029年全球机器人市场规模将超过4000亿美元
2025-08-01 09:21:12
OpenAI 视频生成工具 Sora 在好莱坞遇阻,仍未与电影公司达成任何合作
2025-02-05 16:08:01
24小时热文
更多
扫一扫体验小程序