量子位 报道 | 公众号 QbitAI
5月25日,成都,“高晓松”声音响彻会场,欢迎听众参会:
大家好,欢迎来到极客公园2019年现场和大家一起分享人和机器的共创未来。
但实际站在舞台中央的人,却是王小川。
王小川,搜狗CEO,成都七中知名校友,中国互联网进程里最知名的川娃子,中学时代就打响了IT天才名气,后来又在历史际会创造出一方天地。
现在,因一场活动,王小川带着一项全球领先的技术再次回到成都,没错,就是那一声“高晓松”的欢迎。
因为它在秒秒钟经过手机App前,还是王小川的原声。
搜狗“变声”,颠覆性进展
通过计算机合成某一个人的“声音”,自然在AI江湖里算不上什么。
但如果真正实现“千人千声”也能瞬间“迁移”,并且在小小手机上实现,那确实得竖大拇指。
因为全球AI第一大厂,Google,也还没做到。
就在一年一度亮肌肉的Google I/O上,也有“变声”方面的进展演示,但体现的是一种语料输入到另一种语料输出的“平行迁移”。
更AI的方式来说,one to one,从指定A到指定B.
但像王小川展示,无论说话者是谁,无论说什么,不用考虑说话人的特点(如王小川的“川普”),最后能够将“任意说话人”音色实时高逼真度变换到“指定说话人”音色,则是 Any to one.
该过程中,不光是输入输出两端的映射关系变化,更是技术实现难度上指数级提升。
因为核心问题在于,每一个人的音调、音色和语言节奏都不尽相同,正如同世上没有两片相同的树叶一样,世上也没有两个完全相同的说话人。
如何将“千人千声”通过技术处理,变为同一种指定声音,同时还不丢失原说话人的语言习惯?
离不开展现真正技术的语音表征学习和迁移学习的突破,简要来说三步:
首先,使用表征学习技术学习到源端说话人语音的音色、内容和韵律(讲话节奏、情感语气等信息)三大特征。
其次,将学习到的源端说话人音色特征替换成目标说话人。
最后,基于新的语音变声技术,使用内容(源端)、韵律(源端)、音色(目标端)三类特征,合成最终生成变声音频。
所以大会现场,王小川的“说”到高晓松的“声”,实际经历了这样的过程。
然而,这样一短句,实现背后也有数千层深度学习网络的努力。
如表征学习使用,上图所示,A部分对目标音色语料进行声纹特征编码,提取说话人的音色embedding。
B和C分别从输入音频中学习内容和韵律embedding,通过“说话人归一化”模块对内容embedding进行统一规整,去除音色信息,通过对音频特征的压缩编码及特征抽取,学习表征韵律的风格特征。
而语音变声,基于表征学习得到的特征,通过Attention和Decoder模块进行加权特征编码,并利用WaveRNN神经网络声码器恢复成波形,最终得到带有目标音色的音频。
当然,最具现实意义也最具技术挑战的还是落地。
这也是搜狗突破称得上颠覆性的原因——这是全球首次将如此难度的变声能力落实到消费级产品中。
并且还不是自家用软件专门定义打造的终端硬件,而是融会贯通到小小“搜狗输入法”App中。
通过App,无论安卓还是iOS,无论什么品牌、何种价位的手机,都能实现“变声”,实时迁移成“表情语音包”。
未来应用自然不止于此。
语音届的“换脸”术
之前,Deepfakes带动的“换脸”已经实现了风靡,哔哩哔哩就出现了不少杨幂主演的《射雕英雄传》,惟妙惟肖,真假难辨。
但相比换脸的道德问题和法律危机,“变声”却能立竿见影创造价值。
凡有音频处,皆能让AI变声发挥效用。
比如在线教育、景点导游、电商广告等等场景的音频制作。
一个有口音的老师,一个普通话不标准的地方导游,以及各种流量奶生。
特别是实力待丰的流量偶像们,雇佣一个熟练掌握“换脸”和“变声”技术的AI团队,就完全能靠脸吃饭,人在家中坐,钱源源不断来。
总之,只要有音频的需求,变声就能降低成本、提高效率。
王小川还想借此应用表明,我们正在身处一个怎样的技术时代。
跟技术结合,人类才能更强大。不要狂妄心怀碾压排斥,而是接受技术的变革和改造,成为新人类,真正人与机器协同,变得更强大,创造更迷人的未来。
搜狗CEO毫无疑问想推动这样的未来。
AlphaGo洗礼,搜狗进化
在活动上,王小川也再次从AlphaGo讲起。
他认为这是这个时代的文艺复兴、启蒙运动,让我们开始换另外的世界观看待技术和未来。
对于他自己,这种进化更是显著。
在AlphaGo期间,他就是“机器必胜”的笃定支持者。而AlphaGo获胜后,搜狗CEO更是直接为此开辟了一天“狗胜节”的带薪假。
很多人都说搜狗会借势,但少有人了解王小川的遗憾。
因为在AlphaGo宣布挑战李世石之时,王小川就感叹过,搜狗内部其实也认真讨论过深度学习下围棋的可能性和可行性。
但后来不少工程师认为需要太多资源、小公司更该务实……最终没有真正展开,直到AlphaGo在Nature上的论文发表,才慨叹思路和技术所见略同。
这让搜狗CEO学到一课:光有务实主义不够,工程师也得展现出敢想敢上的“浪漫主义”那一面。
所以“狗胜节”与其说是庆祝,不如说警醒。
这也是搜狗蜕变和进化的开始。
之前搜狗是产品力突出的形象,从浏览器、搜索到输入法,江湖享有名气,特别是输入法,在国内堪称“国民应用”。
但现在,搜狗的旗帜也越来越多出现在全球AI的“华山论剑”中。
全球CoQA机器阅读理解大赛夺冠;
世界MegaFace百万级人脸识别竞赛中夺冠;
WMT2017机器翻译顶级评测大赛中英和英中第一;
国际顶级口语机器翻译大赛IWSLT决赛第一;
《基于模态注意力的端到端音视觉语音识别》中标国际顶级学术会议ICASSP;
……
此外,还有人工智能应用领域的引领性创新。
比如全球首个AI合成主播上岗新华社、CCTV,以及刚刚取得突破的“千人千声”变声落地输入法。
还需要提及的是,这只不过王小川和搜狗将自己的技术底色更鲜明地亮出来而已。
对于技术、AI的投入,更早之前就能从两件公益大于其他的“投资”事件中窥见一斑。
清华学子的年度AI“华山论剑”——智能体大赛,创办21年的搜狗连续赞助15年,至今都是王小川必会参加的活动。
另一件也跟清华有关。2016年,搜狗向清华捐资1.8亿元用于成立“清华大学天工智能计算研究院”,集中研究AI等前沿领域技术。
值得一提的是,最近发表于全球顶会的端到端音视觉语音识别论文,正是搜狗和清华天工研究院的联手之作。
中国AI创新缩影
最后,也是时候借搜狗重新认知中国AI的发展现状和未来了。
谈论中国AI的时候,恐怕你依然会有这样的印象:中国应用有优势,但基础研究方面差距太大。
但从搜狗“变声”突破和应用来看,一种越来越明显的趋势正在展现。
图灵奖唯一华人得主、清华姚班创始人姚期智教授更是有准确概况,在接受《人民日报》采访时,姚院士这样说:
中国的人工智能在应用上绝对是杰出的,相对来讲对于算法基础研究没有那么强,但是对于这个问题从长期的观点来看,我还是相当乐观的。
姚期智教授认为,AI正在变得热门,受到越来越多重视,也有越来越人才投身其中,基础算法和理论研究也都被更集中攻坚。
我觉得我们现在没那么强,但是以后的几年我们能够追上。
所以结合王小川和搜狗的种种努力及其结果,姚期智教授之言,并非单纯乐观而已。
虽要戒骄戒躁,但也没必要妄自菲薄。
如今局势,我们希望更多创新诞生,既要有信心、也要给耐心,同时也要给予更多关注,不吝给每一次突破献上掌声。
本文首发于微信公众号:量子位。文章内容属作者个人观点,不代表和讯网立场。投资者据此操作,风险请自担。