谷歌的新年礼物: 为你唱作乐曲的Blob Opera和超现实主义欧洲旅行

将门创投 · 2021-01-13
​让blob们送你一首新年快乐歌!

编者按:本文来自微信公众号“将门创投”(ID:thejiangmen),作者:让创新获得认可,36氪经授权发布。

From: The Verge;编译: Shelly

伴随着浓郁的圣诞氛围,谷歌推出了一款可爱的小礼物:Blob Opera。在谷歌最新的机器学习实验中,四个可爱灵动、色彩鲜艳的blob组成了小合唱团Blob Opera,唱作歌剧乐曲。用户每上下拖动一个blob,就能更改他们唱歌的音高;左右拖动blob,能更改元音。Blob之间也能自动地相互协调,这是非常不可思议的。

值得一提的是,除了造型可爱、和声动听,Blob Opera还能为用户放送“假日惊喜”。用户只要单击blob上的圣诞树图标,即可激活“假日惊喜”进行点歌,blob们就会化身麦霸,演唱各式流行节日颂歌。

那么blob究竟是啥?接着往下看吧!

还在寻找那个完美的新年礼物吗?为什么不送节日歌呢? 

Blob Opera是艺术家David Li的一项最新机器学习实验,用户可在Google Arts&Culture中利用Blob Opera创作融合歌剧元素的节日歌曲。David Li与Google Arts&Culture团队合作创作的Blob Opera不仅是四个可爱的玩具,而且还很好地尝试了如何利用机器学习从现有数据中创建新的内容。

四只blob已经准备就绪,上下左右四个方向拖动它们,即可改变音调和元音,随时ready把你的音乐构想转化为优美的和声。快来利用blob记录下你的创作,与家人和朋友分享吧

Blob Opera实验入口:https://artsandculture.google.com/experiment/blob-opera/AAHWrq360NcGbw?cp=e30

机器学唱作:向四位人类歌剧家学习!

谷歌的Blob Opera实验向传统歌剧致敬,并进行了创新性的探索。David团队开发的机器学习模型在四位歌剧音乐家的声音基础上训练,以便为用户打造引人入胜的音乐体验。各种音乐水平的用户都能在blob上轻松上手。

男高音Christian Joel、男低音Frederick Tong、女中音Joanna Gamble和女高音Olivia Doutney都分别录制了16个小时。但在blob的使用体验中,你听到的不是四位音乐家的真实歌喉,而是机器学习通过学习和理解而认为的歌剧声音。机器学习模型正是从演唱者那里学习,并以此来理解歌剧演唱的声音和原理。

Blob Opera的使用方法非常简单,它是交互式的。比如,Blob的眼睛会跟随用户的光标,当用户点击画面,它们就会保持静音。blob们自己也会实时响应并相互协调,使旋律和谐。

如果用户缺乏创作灵感,点击圣诞树图标即可激活“假日惊喜”进行点歌,blob们就会化身麦霸,演唱《铃儿响叮当》(Jingle Bells)、《神圣之夜》(O Holy Night)等经典节日颂歌。启用该点歌功能后,用户同样可以用滑块和静音按钮来修改歌曲。

Blob Opera有趣的核心在于,用户不需要知晓任何有关音乐的专业知识,就可以生成有意思的歌曲,并且这些歌曲带有浓浓的歌剧风。虽然这并不是谷歌发布的第一个音乐实验,但它是最精致、最容易使用的一个。

永无止境的假日探索:机器学习打造超现实主义线上旅行

假日的乐趣远不止于此。Google Arts&Culture还创建了贴合假期主题的虚拟填色书。日后的某一天,在谷歌上搜索“光明节”“圣诞节”“宽扎节”等冬季节日,没准就可以发现它们喔。

或者再让创意飞得更远一些。在谷歌另一个机器学习实验“永无止境的旅程”(The Never-Ending Holiday)中,由计算机生成、受超现实主义启发的短片使用了谷歌地图和街景视图数据,能带领玩家线上探索法国、意大利和西班牙的著名地标和遥远海岸线。

“永无止境的旅程”实验入口:https://experiments.withgoogle.com/never-ending-holiday

在技术层面,“永无止境的旅程”使用了生成对抗网络NVIDIA StyleGAN2,在数千幅来自每个国家的著名地标图像上进行了训练。

使用Google地图和街景视图数据,研究员在每个国家或地区的标志性建筑间创建了虚拟的往返行程,并从无休止的幻觉步行中生成了数千张图像。将这些数据与旅程中每一个地标的创意照片相结合,最终实现了法国、意大利和西班牙这三个目的地的可视化。

在法国,旅程停留点有埃菲尔铁塔、圣米歇尔山、霞慕尼、科西嘉、皮拉特沙丘以及法国许多美丽村庄。

在西班牙,玩家会经过巴塞罗那、塔巴纳斯沙漠、泰德纳斯沙漠、泰德山和孔查海滩的屋顶,经过马德里皇家宫殿、凯旋门、卡达克斯市;在意大利,沿途街景包括西西里岛的海滩、威尼斯运河、罗马斗兽场、比萨斜塔、拉佩洛萨塔、特莱维喷泉和埃特纳火山。

在美好的假日,跟着Google Arts&Culture带上音乐、踏上旅程,即使足不出户,也能发现满满乐趣!

ref:

https://blog.google/outreach-initiatives/arts-culture/create-festive-song-blob-opera/

https://www.theverge.com/tldr/2020/12/15/22176785/google-blob-opera-machine-learning-singing-christmas-carols

+1
9

好文章,需要你的鼓励

参与评论
登录后才能参与讨论哦...
后参与讨论
提交评论0/1000

请回复有价值的信息,无意义的评论将很快被删除,账号将被禁止发言。

文章提及的项目

下一篇

“睡眠债”能治疗失眠。

2021-01-13

36氪APP让一部分人先看到未来
36氪
鲸准
氪空间

为你推送和解读最前沿、最有料的科技创投资讯

一级市场金融信息和系统服务提供商

聚集全球最优秀的创业者,项目融资率接近97%,领跑行业