合成特朗普的西班牙语演讲,新研究实现跨语言语音克隆 | 一周AI最火论文

本文主要是介绍合成特朗普的西班牙语演讲,新研究实现跨语言语音克隆 | 一周AI最火论文,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

大数据文摘专栏作品

作者:Christopher Dossman

编译:conrad、Jiaxu、云舟

 

呜啦啦啦啦啦啦啦大家好,本周的AI Scholar Weekly栏目又和大家见面啦!

 

AI ScholarWeekly是AI领域的学术专栏,致力于为你带来最新潮、最全面、最深度的AI学术概览,一网打尽每周AI学术的前沿资讯。

 

每周更新,做AI科研,每周从这一篇开始就够啦!

 

本周关键词:半监督学习、语音合成、语音克隆、机器人

 

 

本周热门学术研究

 

纳米光子介质在人工神经干涉中的应用

 

本文中,学者们介绍了一种纳米光子神经介质,可以执行相当于人工神经计算的复杂和非线性模式映射。具体而言,他们的工作证明了通过纳米光子介质的光波能够执行人工神经计算,测试集的精度约为84%。

 

许多现有的光学神经计算技术通过利用分层前馈网络遵循数字ANN的架构。但是对于新的纳米光子神经介质(NNM),研究人员表明,通过利用光学反射,可以超越分层前馈网络的范例,以连续和无层的方式实现人工神经计算。

 

复杂信息是输入光的波前编码。该介质转换波前可以实现复杂的计算任务,例如图像识别。在输出端,光能集中在明确定义的位置,例如,可以将其解释为图像中物体的身份。这些计算媒体可以小到几十个波长,并提供超高的计算密度。他们利用亚波长散射体实现复杂的输入/输出映射,超越了传统纳米光子器件的功能。

 

一段时间以来,AI社区一直在寻找减少神经网络训练和推理所需的内存和功耗的方法。与传统方法不同,NNM非常具有前景,因为它的能耗最低。

 

该方法的固有并行性可以显著提高计算速度。结合超高计算密度,NNM方法可用作各种信息设备中的模拟预处理单元。

 

原文:shorturl.at/sJPS4

 

 

 

无监督数据增强(UDA),实现更高效,更连续的半监督学习

 

在最近的一篇论文中,Google AI研究人员证明,数据增强也可以应用于未标记的数据,用来推进半监督学习。他们的方法,即所谓的无监督数据增强或UDA,能够促进模型预测在未标记的样本和增强的未标记样本之间保持一致。

 

在评估方面,UDA取得了出色的成果。例如,在IMDb文本分类数据集中,UDA仅使用20个标记样本实现了4.20的错误率,超过了在25,000个标记样本上训练的传统模型。

 

在标准的半监督学习基准CIFAR-10和SVHN上,UDA优于所有前述方法,CIFAR-10的错误率为2.7%,仅有4,000个样本,SVHN的错误率为2.85%,只有250个样本。

 

 

UDA也适用于像ImageNet这样的大型数据集。当使用标记组的10%进行训练时,UDA将前1/前5精度从55.1/77.3%提高到68.7/88.5%。对于具有130万额外未标记数据的完整ImageNet,UDA进一步将性能从78.3/94.4%提升至79.0/94.5%。

 

这项工作表明,可以应用数据增强来增强半监督学习。对于半监督学习方法的数据稀缺,这一方法非常有效。此外,即使有大规模数据,UDA也能提供强劲的收益。

 

为了避免UDA过度拟合,研究人员提出了一种称为TSA的技术,用于存在大量未标记数据的情况。这种学习已被证明与数据提升相匹配并且令人惊讶地超越了监督学习。

 

代码:

https://github.com/google-research/uda

 

原文:

https://ai.googleblog.com/2019/07/advancing-semi-supervised-learning-with.html

 

 

增强神经网络的泛化

 

Google AI的研究人员建议在网络层使用标准化的边际分配作为推广差距的预测因子。在对边际分布与概括之间的关系进行实证研究后,他们证明了距离的正确归一化和边际分布的一些基本统计可以准确地预测广义差距。

 

研究人员还介绍了深度模型推广(DEMOGEN)数据集,包括756个训练深度模型,以及他们在CIFAR-10和CIFAR-100数据集上的训练和测试性能。这些模型是CNN和ResNet-32的变体,具有不同的流行正则化技术和超参数设置,从而引发了广泛的泛化行为。例如,在CIFAR-10上训练的CNN模型的测试精度范围为60%至90.5%,一般化差距为1%至35%。

这项工作为AI社区提供了一个用于研究泛化的工具。它还鼓励进一步研究隐藏层中的泛化间隙预测器和边缘分布。

 

数据集:

https://github.com/google-research/google-research/tree/master/demogen

 

原文:

https://ai.googleblog.com/2019/07/predicting-generalization-gap-in-deep.html

 

 

多语言语音合成和跨语言语音克隆

 

学者们提出了一种基于Tacotron(中文语音合成)的多人多种语言文本到语音(TTS)的合成算法,能够在多种语言中生成高质量的语音。模型结构采用基于注意力机制的序列到序列模型,根据输入文本序列生成倒谱梅频(log-mel,来自MFCC梅尔频率倒谱系数)图帧序列。

 

 

该模型是通过使用音位输入表示来设计的,以激励跨语言的模型容量共享。它还包含了一个对抗性的损失,以帮助理清它的说话者表示。通过对每种语言的多名使用者进行训练,加入自动编码输入,并在训练期间来帮助稳定注意力,从而进一步扩大了训练规模。

 

该模型对三种语言的高质量语音合成和语音训练的跨语言传输具有重要的应用潜力。例如,不需要任何双语或并行语言的训练,它就能够使用英语使用者的声音合成流利的西班牙语。此外,该模型在学习说外语的同时还会适量调节口音。

 

它可以扩展并利用大量低质的训练数据,来支持更多的使用者和语言。

 

原文:https://arxiv.org/abs/1907.04448

 

机器人物联网的分析、挑战与解决方案

 

机器人物联网(IoRT)是一种新引入的理论,旨在定义机器人在物联网场景中的综合运用。物联网和机器人研究领域的研究现在已经紧密地联系在一起了,不能再分别看待。

它们的紧密联系使两个研究领域走到了一起,研究人员只有合作才能推动这两个领域的进步。本文试图将这两个领域结合在一起,提供了关于互联网机器人的一个概述,分析和挑战,可能的解决方案。该研究探讨了IoRT架构、智能空间集成以及机器人应用等问题。

 

当两个或两个以上的领域紧密联系在一起时,将它们的研究和开发结合起来,并快速推进它们就变得至关重要。机器人和物联网结合的时代已经到来,目的是帮助研究人员共同努力,推动相关理论、模型和应用的发展。

 

它们的综合运用将有助于促进研究,这些研究可用于帮助开发更多更好的应用,例如家庭自动化、卫生健康、交通、物流等。

 

原文:https://arxiv.org/abs/1907.03817

 

 

其他爆款论文

 

英国研究人员发布了一个开源的大型合成点云数据集以帮助研究:

https://arxiv.org/abs/1907.04758

 

回顾现有的三维分类、目标检测和分割的深度学习技术:

https://arxiv.org/abs/1907.04444

 

准确、简单、实时的在线三维多目标跟踪基线系统:

https://arxiv.org/abs/1907.03961

 

一种新的记忆和高效计算的深度学习模型:

https://arxiv.org/abs/1907.03739

 

 

AI新闻

 

一旦谈到需要人工帮助审核内容时,人工智能就显得力不从心了:

https://www.pcmag.com/news/369398/human-help-wanted-why-ai-is-terrible-at-content-moderation

 

AI如何改变商业模式:

https://www.forbes.com/sites/cognitiveworld/2019/07/10/how-artificial-intelligence-is-transforming-business-models/amp/

 

《星际争霸2》玩家现在可以在战网上与DeepMind's 的AI匹配交战了:

https://www.pcmag.com/news/369467/deepminds-ai-to-take-on-human-starcraft-ii-players-on-battl

 

专栏作者介绍

Christopher Dossman是Wonder Technologies的首席数据科学家,在北京生活5年。他是深度学习系统部署方面的专家,在开发新的AI产品方面拥有丰富的经验。除了卓越的工程经验,他还教授了1000名学生了解深度学习基础。

LinkedIn:

https://www.linkedin.com/in/christopherdossman/

 

这篇关于合成特朗普的西班牙语演讲,新研究实现跨语言语音克隆 | 一周AI最火论文的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/234801

相关文章

Ilya-AI分享的他在OpenAI学习到的15个提示工程技巧

Ilya(不是本人,claude AI)在社交媒体上分享了他在OpenAI学习到的15个Prompt撰写技巧。 以下是详细的内容: 提示精确化:在编写提示时,力求表达清晰准确。清楚地阐述任务需求和概念定义至关重要。例:不用"分析文本",而用"判断这段话的情感倾向:积极、消极还是中性"。 快速迭代:善于快速连续调整提示。熟练的提示工程师能够灵活地进行多轮优化。例:从"总结文章"到"用

AI绘图怎么变现?想做点副业的小白必看!

在科技飞速发展的今天,AI绘图作为一种新兴技术,不仅改变了艺术创作的方式,也为创作者提供了多种变现途径。本文将详细探讨几种常见的AI绘图变现方式,帮助创作者更好地利用这一技术实现经济收益。 更多实操教程和AI绘画工具,可以扫描下方,免费获取 定制服务:个性化的创意商机 个性化定制 AI绘图技术能够根据用户需求生成个性化的头像、壁纸、插画等作品。例如,姓氏头像在电商平台上非常受欢迎,

从去中心化到智能化:Web3如何与AI共同塑造数字生态

在数字时代的演进中,Web3和人工智能(AI)正成为塑造未来互联网的两大核心力量。Web3的去中心化理念与AI的智能化技术,正相互交织,共同推动数字生态的变革。本文将探讨Web3与AI的融合如何改变数字世界,并展望这一新兴组合如何重塑我们的在线体验。 Web3的去中心化愿景 Web3代表了互联网的第三代发展,它基于去中心化的区块链技术,旨在创建一个开放、透明且用户主导的数字生态。不同于传统

hdu1043(八数码问题,广搜 + hash(实现状态压缩) )

利用康拓展开将一个排列映射成一个自然数,然后就变成了普通的广搜题。 #include<iostream>#include<algorithm>#include<string>#include<stack>#include<queue>#include<map>#include<stdio.h>#include<stdlib.h>#include<ctype.h>#inclu

AI一键生成 PPT

AI一键生成 PPT 操作步骤 作为一名打工人,是不是经常需要制作各种PPT来分享我的生活和想法。但是,你们知道,有时候灵感来了,时间却不够用了!😩直到我发现了Kimi AI——一个能够自动生成PPT的神奇助手!🌟 什么是Kimi? 一款月之暗面科技有限公司开发的AI办公工具,帮助用户快速生成高质量的演示文稿。 无论你是职场人士、学生还是教师,Kimi都能够为你的办公文

Andrej Karpathy最新采访:认知核心模型10亿参数就够了,AI会打破教育不公的僵局

夕小瑶科技说 原创  作者 | 海野 AI圈子的红人,AI大神Andrej Karpathy,曾是OpenAI联合创始人之一,特斯拉AI总监。上一次的动态是官宣创办一家名为 Eureka Labs 的人工智能+教育公司 ,宣布将长期致力于AI原生教育。 近日,Andrej Karpathy接受了No Priors(投资博客)的采访,与硅谷知名投资人 Sara Guo 和 Elad G

阿里开源语音识别SenseVoiceWindows环境部署

SenseVoice介绍 SenseVoice 专注于高精度多语言语音识别、情感辨识和音频事件检测多语言识别: 采用超过 40 万小时数据训练,支持超过 50 种语言,识别效果上优于 Whisper 模型。富文本识别:具备优秀的情感识别,能够在测试数据上达到和超过目前最佳情感识别模型的效果。支持声音事件检测能力,支持音乐、掌声、笑声、哭声、咳嗽、喷嚏等多种常见人机交互事件进行检测。高效推

【C++】_list常用方法解析及模拟实现

相信自己的力量,只要对自己始终保持信心,尽自己最大努力去完成任何事,就算事情最终结果是失败了,努力了也不留遗憾。💓💓💓 目录   ✨说在前面 🍋知识点一:什么是list? •🌰1.list的定义 •🌰2.list的基本特性 •🌰3.常用接口介绍 🍋知识点二:list常用接口 •🌰1.默认成员函数 🔥构造函数(⭐) 🔥析构函数 •🌰2.list对象

【Prometheus】PromQL向量匹配实现不同标签的向量数据进行运算

✨✨ 欢迎大家来到景天科技苑✨✨ 🎈🎈 养成好习惯,先赞后看哦~🎈🎈 🏆 作者简介:景天科技苑 🏆《头衔》:大厂架构师,华为云开发者社区专家博主,阿里云开发者社区专家博主,CSDN全栈领域优质创作者,掘金优秀博主,51CTO博客专家等。 🏆《博客》:Python全栈,前后端开发,小程序开发,人工智能,js逆向,App逆向,网络系统安全,数据分析,Django,fastapi

让树莓派智能语音助手实现定时提醒功能

最初的时候是想直接在rasa 的chatbot上实现,因为rasa本身是带有remindschedule模块的。不过经过一番折腾后,忽然发现,chatbot上实现的定时,语音助手不一定会有响应。因为,我目前语音助手的代码设置了长时间无应答会结束对话,这样一来,chatbot定时提醒的触发就不会被语音助手获悉。那怎么让语音助手也具有定时提醒功能呢? 我最后选择的方法是用threading.Time