人人都将是歌手时代带来临,AI 驱动的 Sing-to-Sing 实时矫音技术
想象一下一个未来,AI 能够实时改变你的歌唱声音,使你能够以完全不同于自己的声音(而且是音准的!)进行歌唱?不用再想象了。事实上,已经有大约 100 款应用程序承诺并且有些已经实现了这一点,更不用说所有音乐制作软件提供的替代 Antares Auto-Tune 的选项,这些软件是领先的创意和声乐增强应用程序。其中一些专注于实时处理,而另一些则专注于离线处理现有录音。
Voicemod 的 Sing-to-Sing AI 技术使用户能够实时修改其歌唱声音,包括音高、音色调整和自动音调校准,具有合唱、二重唱、演化器和 Calitune 等功能。首次,Voicemod 的 Sing-to-Sing AI 技术通过 Voicemod 的 SDK 向第三方开发者和硬件制造商开放,该 SDK 还支持公司的 Speech-to-Speech 和 Soundboard 功能。

Voicemod 是一家西班牙公司,最初专注于为游戏和在线聊天板提供语音改变效果,并将其软件发展为支持实时 AI 语音转换和合成语音。Voicemod 的 Speech-to-Speech AI 技术允许用户像切换游戏皮肤一样轻松地实时改变声音。Voicemod 的 Windows 和 Mac 应用程序已被下载超过 4500 万次,拥有数百万用户,提供数百种 AI 语音选项和超过 150,000 种声音的音效库。

从用于游戏、流媒体、内容创作或简单地在网上社交的工具,Voicemod 现在将其技术改编为创建 AI 歌唱声音生成器(文本到歌曲),并正在开发 Sing-to-Sing 技术。但这次,Voicemod 决定探索不同的路线,不只是创建另一个在线服务,而是首次将其 Sing-to-Sing 技术交到第三方开发者的手中,包括音乐软件制造商。
正如公司所解释的那样,“有了 Voicemod 的实时声乐转换能力,用户现在可以前所未有地轻松修改其歌唱声音——使音乐表达对每个人都变得触手可及。从调整音高和音色到应用自动音调校准,该技术允许实时音乐表达,适合那些希望在现场表演和录音中增强声音效果的人。”
目标是使开发者能够超越语音和声音效果,通过集成 AI 驱动的歌唱功能实现更多可能性。这是通过 Voicemod 的软件开发工具包(SDK)来实现的,该 SDK 已经支持 Speech-to-Speech 和 Soundboard 功能,允许第三方开发者,包括应用程序创建者、游戏开发者、音乐开发者和硬件制造商实时转换声乐表演。
该 SDK 拥有多功能的实时“AI Voice Tune”套件,提供自动音调校准和各种效果选项,如合唱、二重唱、演化器和 Calitune。为了扩展歌唱工具,Voicemod 还与 Warner 和 Rovio 等 IP 持有者合作,提供独家内容,为作者和权利持有人提供新的收入来源。公司还表示,它是该类别中首个获得 Fairly Trained 认证的公司,表明其 AI 语音和歌唱模型经过伦理培训。
“该技术不仅迎合音乐人,还使音乐表达对每个人都变得触手可及。它允许用户即时改变其歌唱声音,可以调整音高和音色,甚至应用自动音调校准以实现完美的表演,”公司详细说明。
Voicemod 的 Sing-to-Sing AI 在休闲和专业音乐创作、互动音乐会和在 Fortnite、Roblox 等平台上的卡拉 OK 中具有潜在应用,任何在线音乐和语音起关键作用的地方。这些工具还解决了人们在网上使用自己声音时常有的犹豫,提供了一种增强信心、促进包容和无拘无束自我表达的工具。