作者|编辑万宇|范志辉
2023年伊始,ChatGPT的现象级火爆引发了全球互联网巨头关于AIGC的“军备竞赛”,微软、微软、百度、meta等均已落下帷幕。 可以与人自然对话、回答问题的ChatGPT的出现,也让小语言模型具体而高端的概念成为了人人都可以使用的“私人助理”,一时间风头正劲。
日前,ChatGPT开发公司OpenAI发布了下一代小语言模型GPT-4,它不仅是支持ChatGPT和新Bing的最新AI小语言模型,还支持Microsoft365的新功能Copilot来帮助用户工作更有效率。 据了解,ChatGPT在多项专业测试中的表现都超过了“人类水平”。 消息一出,人们再次引发了AIGC的高度讨论。
所谓AIGC(AI-Generate Content)就是人工智能生成的内容。 简而言之,人工智能可以利用现有的素材库,根据用户需求生成相应的内容。 目前,AIGC已经应用于音乐、绘画、音频等各个领域,让公众深刻感知科技革命背后的创造力。
在音乐领域,AIGC技术不仅辅助音乐创作,也开始用于创新用户体验。 例如,在美国,Spotify最近推出了DJ模式,让AI改善推荐歌曲的体验; 在国外,QQ音乐等音乐平台已经对AIGC技术进行了多次尝试。 本文将以QQ音乐的AI功能应用为例,盘点音乐与AIGC结合的想象空间。
AIGC 如何改变音乐体验?
现在,当你打开QQ音乐时,你会发现AIGC已经覆盖了QQ音乐的每一个细节,并从聆听体验、视觉呈现、社交分享等多个维度做出了许多有趣的创新尝试。
当您点击推荐的歌曲并开始聆听时,设计精美的 AIGC 黑胶播放器就会吸引您的眼球。
与往年歌曲专辑封面播放不同,QQ音乐新推出的AI播放器是国外音乐行业在AIGC领域的首次视觉尝试。 原理就是将关键词输入到AI工具中,让AI算法结合各种元素。 生成富有创意的球员风格。 如今,QQ音乐推出了机械铠甲、雪山白、积木游戏、工业灰等6款供用户选择。
如果播放的歌词符合当下心情,想分享到同学、微博等社交媒体上,这时候“AI歌词海报”功能就派上用场了。 无论是古风、流行还是说唱,基于Stablediffusion和Discodiffusion两种模式,只需几秒钟,就可以根据歌词生成对应画风的海报,节省用户找图片的时间。
而这背后,是腾讯音乐天琴实验室业界首个AI音乐视觉生成技术MUSE(MusicEnvision)带来的支持。 作为国外音乐行业首个部署AIGC的平台,QQ音乐凭借对音频歌词的深刻理解以及对用户需求的前瞻性洞察,实现了音乐行业首个大型音乐海报绘制技术。
此外,该技术还用于为曲库中大量无专辑隶属关系的免费单曲生成改编歌曲封面,极大提升了用户的视觉体验。 音乐家也可以基于该技术独立制作专辑图片。
在MuseAI算法的支持下,QQ音乐还开发了可播放的“AI次元专属BGM”功能。 用户只需上传角色照片即可生成相应的动画风格图片,并且还配备专属BGM。
此外,联动天琴实验室的AI技术,我们还可以通过AI发声贺卡的功能,自行编辑问候语、选歌,获取AI生成的问候语隐藏歌词,与所选歌曲的旋律。 键生成自定义问候语。 不得不说,无论是过年还是同学生日,爸爸再也不怕我因为问候而秃头了。
当我们打开QQ音乐登录时,我们不仅会收到根据用户喜好和每天音乐收听记录推荐的歌曲,还可以刷卡查看当天的运势,并收到生成的“今日运势画”由 AIGC 提供。 据悉,这幅画是根据当天推荐歌曲的内容制作的,并融入了明天的幸运色元素。 听起来不错,看起来也不错。
对于音乐爱好者来说,QQ音乐基于AIGC的“智能歌本”功能也非常实用和受欢迎。
因为网上的乐谱大多不完整,而且筛选成本极高,如果你想学会弹自己喜欢的歌曲的钢琴,第一步就是日积月累地把乐谱捡起来。 现在,得益于智能乐谱功能,连《我记得》这样的新歌都可以直接找到乐谱,钢琴谱、钢琴谱、尤克里里等主流乐谱一应俱全。
在此基础上,QQ音乐还让静态图片乐谱动起来,并在业内率先推出“乐谱OCR”功能,可手动识别音阶、音高、五线谱休止符等10类音乐信息基于图像识别。 之后结合QQ音乐的高精度歌词信息,一键生成对应的智能歌谱,帮助粉丝轻松翻歌,无需中途停车,自动转和弦。
与通常的人工乐谱不同,QQ音乐的智能乐谱还具有AB复读、原声、节拍器、常用节奏选择和编辑等一系列功能选项。除此之外,我们还可以在QQ音乐播放中分享学习后分组,与朋友交朋友。 这个功能一经推出就受到了好评,特别好用。
总而言之,无论是QQ音乐积极结合AIGC让用户体验更加个性化,还是提高音乐爱好者的学习效率,都可以看出AIGC技术在音乐领域的高度兼容,也拓展了行业的认知AIGC与音乐的结合。 想象空间。
嫁接音乐后,如何打开AIGC的想象空间?
此前,美国著名DJ David Duetta在演出时使用AIGC工具,以Eminem的风格写了一首关于Future Rave的歌曲,并用Eminem的声音录制。 它在人工智能中。”
大卫·杜埃塔 (David Duetta) 绝不是唯一持有这一信念的人。
在音乐领域,AIGC在作曲、作曲、声乐合成等方面都取得了巨大的成就。 仅仅依靠AIGC来制作功能音乐就可以创造巨大的商机,更不用说成为辅助音乐创作的主流技术,或者构建虚拟演员等等想象空间。 可以说,AIGC应该是继流媒体之后对音乐行业最具颠覆性的技术。
面对这一历史机遇,Spotify、三大唱片等音乐公司早已积极进军AIGC领域,试图占据先机。 例如,华纳投资了AI音乐创作平台Lifescore,环球音乐投资了AI音乐创作平台Soundful,索尼音乐独立开发了AI辅助音乐创作应用FlowMachines。 毫无疑问,音乐公司争相寻找AIGC已成为新趋势。
在国外,QQ音乐率先意识到人工智能和AIGC的巨大潜力,并进行了布局。 2019年,QQ音乐歌曲识别团队在Mirex音频指纹大赛中获得亚军,并打破三项世界纪录; 2020年,QQ音乐独创的预测模型(PDM)技术也打破了“预测模式”的世界纪录,推动了潜在好歌曲的发现,已成为行业标准赋能工具; 还成功将基于DNN的无伴奏合唱识别技术引入听歌识歌场景,开创了革命性的第一代听歌识歌。 增加了12%。
2021年dj软件教程,在QQ音乐多媒体研发中心的基础上,TME将成立首个音视频技术研发中心——天琴实验室,专注于音视频相关AI研究,开发了听歌、智能音响等校正和音频超分辨率。 、母带、翻唱识别、歌谱以及业界首款MUSEAI音乐视觉生成技术明星产品。 其中,天琴实验室研发的“歌词生成方法”和歌唱识别还荣获国家专利奖和上海市专利奖。
截至目前,天琴实验室已发表国际顶级会议论文10余篇,获得发明专利500余项,主导和参与多项音乐行业标准制定,已成为行业顶尖的音视频研究实验室。 近日,天琴实验室还首次在国内外发布了三套开源数据集,分别涉及无伴奏识别、哼唱识别和歌唱评价,为产业发展奠定坚实的基础,为行业注入新的活力。数字音乐产业升级。
据悉,通过输入歌词就能唱歌跳舞的虚拟人“小琴”也是天琴实验室制作的。 基于天琴实验室的MusicXRMaker系统和MUX设计中心的支持,小琴展示了天琴实验室在拟人化嘻哈生成、歌唱表演生成、音乐灯光秀等方面的综合成果。
不难看出,QQ音乐布局AIGC从底层技术创新到产品功能升级融合已初见成效,不断满足和丰富用户的音频娱乐体验,提升行业先发优势。
结语
如果你观察QQ音乐功能设计上的变化dj软件教程,你会发现QQ音乐不仅依赖于过硬的技术,更依赖于不断提升用户体验的核心理念。 只有这样,才能持续推动音频娱乐体验的迭代创新。
正如用户体验专家 Sean Gerety 所说,“能够震撼所有人的不是你使用的技术,而是你用技术创造的体验。”
在日新月异的科技革命中,只有积极拥抱新技术、为己所用、推动行业创新,才能在新浪潮中站稳脚跟。 QQ音乐在人工智能领域的不断布局,不仅将为用户带来更具前瞻性、个性化的音频娱乐体验,打开AIGC及音乐领域的想象空间,也将加速音乐娱乐生产的进化。生态。