Meta的新“Voicebox”人工智能是一种文本转语音工具,类似于ChatGPT的学习方式

Meta AI最近推出了一款声音转文本(TTS)生成器,声称其产生的结果比同类性能的最先进的人工智能模型快20倍。

这个新系统被称为Voicebox,它摒弃了传统的TTS架构,而采用了更类似于OpenAI的ChatGPT或Google的Bard的模型。

与ElevenLabs Prime Voice AI等类似的TTS模型相比,Voicebox的主要区别在于Meta的产品可以通过上下文学习进行概括。

与ChatGPT或其他变形器模型一样,Voicebox使用大规模的训练数据集。以前使用大量音频数据的尝试导致严重降低的音频输出。因此,大多数TTS系统使用小型、高度策划的、标记数据集。

Meta通过一种新颖的训练方案克服了这个限制,该方案放弃了标签和策划,而采用了一种能够“填充”音频信息的架构。

正如Meta AI在6月16日的博客文章中所说,Voicebox是“第一个能够在没有特定训练的情况下推广到语音生成任务,并具有最先进性能的模型。”

这使得Voicebox可以将文本翻译成语音,通过合成替换语音来消除不必要的噪声,甚至可以将说话者的声音应用于不同的语言输出。

根据Meta发布的一篇相关研究论文,其预先训练的Voicebox系统只需使用所需的输出文本和三秒钟的音频剪辑即可完成所有这些操作。

强大的语音生成的到来正值特别敏感的时期,因为社交媒体公司继续与审查斗争,而在美国,一场即将到来的总统选举威胁着再次测试在线虚假信息检测的极限。

例如,美国前总统唐纳德·特朗普目前面临在离任后处理机密政府材料的指控。针对他的案件中引用的据称包含他承认可能存在不当行为的音频记录。

虽然目前没有迹象表明前总统打算否认音频文件中描述的内容,但他的案件说明数据完整性是美国法律体系和其民主制度的核心。

Voicebox不是其类中的第一个工具,但似乎是最强大的工具之一。因此,Meta开发了一个工具来确定语音是由其生成的,该公司声称可以“轻松检测”真实音频和虚假音频之间的区别。根据博客文章:

“与其他强大的新型人工智能创新一样,我们认识到这种技术带来的潜在误用和意外危害。在我们的论文中,我们详细说明了如何构建高效的分类器,以区分使用Voicebox生成的真实语音和音频,以减轻这些可能的未来风险。”

在加密货币世界中,人工智能已经成为大多数企业日常运营的重要组成部分,就像互联网或电力一样。最大的交易所依赖于AI聊天机器人进行客户交互和情感分析,交易机器人已经变得司空见惯。

相关内容:Bybit插入ChatGPT进行AI驱动的交易工具

强大的文本到语音系统(如Voicebox)的出现与自动化交易相结合,可以帮助那些依赖TTS系统的潜在加密货币交易者弥合差距,目前这些系统可能会在加密货币术语或多语言支持方面遇到困难。

We will continue to update 算娘; if you have any questions or suggestions, please contact us!

Share:

Was this article helpful?

93 out of 132 found this helpful

Discover more

市场行情

以太坊价格暴跌:这是否预示着看涨势头的结束?

随着成功平仓的杠杆长期头寸增至1亿美元,使得以太坊衍生品市场更加强劲和可行当前,以太坊期货市场已出现反弹

区块链

塔楼、火灾、以太坊和逃生舱:Layer2的强制提款机制

在最近的文章《Different types of layer 2s》中,Vitalik提到,用户能否顺利将资产从Layer2撤回至Layer1,是一个非常重要的...

区块链

以太坊价格关键指标表明1700美元以下卖盘兴趣上升

以太坊价格在美元面前难以恢复到1,700美元的阻力上方如果ETH在1,700美元和1,720美元下方持续停留,可能会开始新一轮下跌

比特币

马拉松数字控股与安杜罗一起挑战比特币的极限

在2月29日至3月6日期间,发现区块链技术的最新进展,包括令人兴奋的更新、成功的资金公告和利润丰厚的交易

区块链

“FTX的攻击者在过去24小时内转移了超过1700万美元的以太币”

与FTX漏洞有关的地址0x3e9,在最近的活动中转移了超过10,000个ETH

区块链

PayPal的新PYUSD稳定币面临法律风险和“功能较少”的挑战

行业专家解释了PayPal的PYUSD稳定币的好处和劣势