AI换声工具成为热门应用,但需警惕深度造假风险

新知榜官方账号

2023-11-25 22:07:16

AI换声工具成为热门应用,但需警惕深度造假风险

近期,AI应用领域刮起一阵“名人换声”的旋风。市面上已经出现了多款视频语音翻译或口型同步的工具平台,还有语音识别、口型匹配类的开源模型。该产品的初衷是为了“消除语言障碍”。不过,需注意训练数据来源的合法性、模型的透明度、算法的可解释性、违法信息监测等,从合规层面而言,也需警惕生成内容被滥用于“深度造假”、生产虚假信息、个人信息泄露以及被非法利用等产生的伦理风险。

名人AI换声风靡:声称3分钟生成“没有译制片的腔调翻译”在哔哩哔哩、视频号、抖音等短视频平台上,“霉霉说中文”“AI郭德纲用英文说相声”等成为热门搜索词,相关视频中,不仅有特朗普、泰勒·斯威夫特、憨豆、埃玛·沃森等等一众国外政客、明星,也不乏蔡明、赵本山、郭德纲等国内知名的相声小品演员。

多款应用工具涌现:HeyGen创始人称产品初衷为“消除语言障碍”从今年下半年开始,HeyGen在网络上风靡,据悉,其背后的公司是一家名为“诗云科技”的公司,2020年12月在深圳成立,如今已获得来自IDG、红杉中国、真格基金累计近千万元的投资。一位相关数据分析师统计,今年8-9月,各大文图类AI网站的访问量均开始呈现下降趋势,但HeyGen的访问量却上升了92%,流量跃居各大独立AI网站之首。除了爆火的HeyGen,如今市面上已经出现了LipDub、Verbalate、Rask.ai等多款与其类似的一站式AI视频语音翻译工具平台。

需警惕深度造假风险:已有引发政治风波、诈骗和色情犯罪先例无论是AI绘画,AI换脸视频、AI声音克隆或者AI视频翻译等底层技术,在业内都被认为是一种AI“深度造假”技术。可以看到,从生成静态画面,到克隆声音,再到可替换人物语言和口型的视频处理,支持各个环节“造假”的生成式AI技术和产品正在快速迭代,也带来风险隐忧。

出品:南都大数据研究院 采写:南都记者 张雨亭 熊润淼 李伟锋

本页网址:https://www.xinzhibang.net/article_detail-21100.html

寻求报道,请 点击这里 微信扫码咨询

关键词

AI应用 换声工具 语音翻译 口型同步 深度造假 风险

分享至微信: 微信扫码阅读

相关工具

相关文章

相关快讯