全球首部AI交响变奏曲诞生 AI音乐赋能场景再突围

张十柒 · 2019-10-12 14:18

AI在音乐领域已经初露峥嵘

8j0avv66qhfiwoil.jpg

从公元前4000年左右人类发明轮子开始,不断创造工具来帮助甚至替代自己工作,已成为推动人类物质文明前进的主要动力。

如今,随着AI技术的不断发展,人类对工具的使用不再仅仅满足于生产力的提升,已开始进入反映思想与情感的艺术领域。人工智能在音乐领域的探索便是其中最重要,也最热闹的方向之一。

如果从宏观角度去考量的话,目前人类日常生活中听到的音乐的内容是较为单一的,并且内容面有越来越狭窄的趋势。一方面是人类创作的音乐作品和自身经历正相关,而个人经历本身就是有限的;另一方面,在流通环节当中能够纳入流通体系的音乐也是比较有限。音乐内容的匮乏对应的是人们千变万化音乐需求,形成的这个落差之中所蕴含的便是AI音乐的无限的想象空间。

日前,中国平安人工智能研究院打造了全球首部AI交响变奏曲《我和我的祖国》,首次运用人工智能技术创作多声部、广维度,同时具备复杂性和经典传承性的长篇幅交响乐曲作品,创作过程中开拓性地运用了多重技术模型,并首创了基于本次交响曲研发出的AVM自动变奏模型,在科技发展史以及艺术变迁史上都呈现出划时代的里程碑意义。

全球首部AI交响变奏曲

与AI在歌曲等通俗音乐上的热闹景象相比,在交响乐、变奏曲等更为复杂、更具思想性的古典音乐体裁上,AI技术却一直难以得窥门径,应用层面几乎空白。因其复杂多样的创作技术和所能承载的厚重内涵,古典音乐一直被视为高级的情感艺术,这也对AI的创造性提出了更高层次的要求。

即使是对AI技术积累深厚的平安而言,创作《我和我的祖国》AI交响变奏曲也是一项复杂的技术工程。交响曲是管弦乐队演奏的包含多个乐章的大型套曲,而变奏曲一般是对主题的装饰变奏和自由变奏。《我和我的祖国》AI交响变奏曲由5个交响变奏的段落发展而成,通过深度学习与强化学习联合的方案进行分析与学习,通过自动变奏模型等技术,实现多声部交响乐的变奏,和声、对位、调式等变化。

不同于AI在其他领域的分析、归纳,交响诗属于单乐章多声部管弦乐音乐体裁,强调诗意与哲理的表现,因此学习难度更为复杂。同时,交响诗的形式往往不拘一格,常根据奏鸣曲式的原则自由发挥,是按照文学、绘画、历史故事和民间传说等构思作成的大型管弦乐曲。这也对AI的在“创造性”上提出了非常高的要求。

AI技术在通俗音乐领域初露端倪的同时,在复杂、大规模的交响乐创作上却一直未有显著突破。如今,这一空白的局面正在被打破,未来,AI极有可能创作出现象级交响乐作品。

2019年10月11日,中国平安打造的全球首部AI交响变奏曲《我和我的祖国》,由深圳交响乐团进行首演公演,以献礼新中国成立70周年。该变奏曲由已在AI音乐领域探索、储备2年有余,此次历经1个半月左右的中国平安人工智能研究院团队出品。创作过程运用平安首创的AVM自动变奏体系,基于海量的历史音乐作品数据,体系化的音乐标签工程,系统化的自动变奏、音乐评价、专家规则模型,通过深度学习和强化学习融合的AI技术,以《我和我的祖国》《在希望的田野上》等经典曲目为基础,完成了涵盖五个变奏段落的人工智能交响曲创作。该曲目以中国近现代发展史为脉络,表现了自鸦片战争至今中华民族波澜壮阔的发展历程。

《我和我的祖国》创作于1985年,原作者们应该很难想象,在多年以后的新中国成立70周年之际,这首歌将被以AI的方式结合大量的传统经典曲目实现作曲模式上的重塑,并以西方古典音乐的形式再次演绎。在技术层面,作为全球首部AI交响变奏曲《我和我的祖国》可以说既是AI音乐创作上的巨大突破,也是AI音乐产业进一步场景化落地的技术前奏。

因此,《我和我的祖国》AI交响变奏曲在结构上,有着古典音乐结构严谨的一面。因为这种大型的管弦乐的复杂结构和相应效果。交响决定了作品的严谨结构,变奏要求AI必须有一定创作能力。整个交响变奏曲的五段式在循环往复中对主题进行变奏,对应了中国波澜壮阔的近现代史。

总体看来,《我和我的祖国》AI交响变奏曲的诞生,不仅是基于AI的技术层面,结构化层面和音频分析层面的探索,也依靠专业的音乐层面理解,通过把人类的历史上的优秀的作品做深度学习,训练AI模型。平安AI作曲创作团队不断用AI的算法去尝试迁移,生成各种各样风格类型的变奏曲,再对这些变奏曲进行专业评判,并最终通过大型的管弦乐团进行现场呈现。AI的创作和人类的演绎最终以这种方式融合在了一起,这也预示着人工智能技术在艺术领域的深入再次大幅迈进,技术边界不断突围。

那些被AI音乐所改变的场景和人

过去几年,AI在音乐领域已经初露峥嵘,部分流行音乐制作人已开始用AI音乐软件来辅助创作。2016年,谷歌发布可以进行音乐创作的Magenta,索尼的人工智能FlowMachines创作了一首具有披头士乐队风格的流行歌曲。2018年年初,亚马逊语音助手Alexa推出了DeepMusic,为用户提供人工智能创作的歌曲。字节跳动旗下抖音已收购利用AI创作音乐的英国初创公Jukedeck。而Jukedeck的AI技术可以为视频自动配乐,目前视频配乐也是抖音的短板所在。

从国内外科技巨头们在AI音乐上不同程度的探索,可以看出AI 音乐对音乐产业的重构已成趋势,甚至在可以预见的未来,AI音乐将颠覆人类音乐娱乐生活的方方面面。AI的创作速度是人类音乐家的数倍,在提升音乐创作效率的同时,也能极大的降低创作成本。AI技术在影视、广告以及游戏配乐等多个方面都有非常广阔的商业应用前景。

AI还能对人类的原创音乐进行完善和提升,例如对歌曲进行Remix混音。反之,AI音乐还能为创作者提供创作过程所需的素材和灵感,充当辅助创作的角色。无论是哪种形式,AI音乐对人类在音乐创作的丰富性和高效性上的提升都是空前的。

目前,在部分AI音乐平台上,一键编曲已经成为可能。在刚刚结束的“平安920:以AI之名”系列营销活动中,就融入了AI作曲元素。在平安官方活动页面上,用户只需要设定音乐主题、心情,就能创建一首歌曲,以游戏形式创作出个性化的音乐作品,以此吸引消费者的注意力,拓展用户渠道,降低获客门槛,提高主营业务价值。

AI音乐在营销层面的潜力已在全世界范围内凸显。根据BuzzAngle Music发布的2018年年终报告,一年当中美国的音频流点击量高达5346亿次,这对新音乐家们而言,进行自我营销无疑会带来高昂的成本,而如果无法有效完成营销,大量才华横溢的艺术家都有可能遭到埋没。AI技术能够帮助确定不同的粉丝群体匹配相应风格的作曲家,让对的人听到对的音乐,并为这一“对胃口”的音乐深入买单。

此前,AI技术还仅停留于创造流类、单旋律歌曲。现在,随着《我和我的祖国》交响变奏曲的问世,填补了AI音乐在多声部、广维度同时具备复杂性和传承性的长篇交响乐的空白。AI在音乐领域的突围再次向前大踏步跃进,技术的增厚、对音乐领域的改变在更大程度上实现了内容的丰富和改变,未来能够实现落地的场景不可否认地正在增多,以从微小到全面地改变人们的生活。

无论是谷歌的Magenta项目,还是索尼的Flow Machines,以及平安人工智能研究院正在推进中的AVM变奏模型,都对未来的音乐人和音乐行业的专业人士提出了新的要求。掌握这些新的技术技能,利用AI工具的力量,能帮助创作者更好地完成工作。

在这一系列技术改变及优化的背后是音乐创作的门槛大幅降低,让更多的人加入到音乐作品创作之中,在人与人之间的个性、需求不尽相同下,多样化作品被创作出来。与此同时,背后的音乐植入的场景正在扩大,人们听音乐的场景愈发融入生活,医院、电梯、超市、候车厅等多元场所,在不同的心情和需求下,依靠音乐调节心情、改善情绪的需求也不尽相同。在这一刚醒需求下,AI音乐的问世不但能够契合个性化、标签化的听众的音乐需求,同时低门槛、高效率的制作过程也高度契合批量化制作的场景应用。

音乐是人类精神文明发展的重要产物,也是深入人类灵魂的重要艺术门类,其影响无处不在,触及人们生活的方方面面。这一音乐领域供给侧推动需求侧层面的改变,不仅仅满足了人们对更高层次音乐的需求必将日益增长。

泛AI技术环境下的平安布局

此前,在更多人们的认知中,人工智能技术应多层面落地于产业领域,AI交响变奏曲的问世实现了在人类精神领域的突破,成为科技与艺术融合的里程碑事件。平安之所以能够探索AI音乐“无人区”背后是技术的积淀、人才的支撑和科技力量的持续投入。

据悉,平安人工智能研究院早在2017年就已开始探索将AI技术运用于音乐这一在传统思维里始终被定义为人类专属的领域,并启动音乐画像脸谱、音乐流行预测以及人工智能作曲三大方向的研究。

在底层技术领域,包含声纹识别、自然语言处理、语音识别等AI技术已全球领先,建立了丰富而完整的技术架构体系,为AI作曲项目孵化提供了肥沃的土壤。在夯实的底层技术之上,平安集团首席科学家肖京在上层理论上,提出了结构化机器学习的宏大框架,并强调机器学习技术的应用应当结合音乐曲式结构。在人才建设层面,平安人工智能研究院储备了大量既懂得计算机算法有精通乐理知识的复合型人才,成为这次突破最坚实的后备力量。

平安始终致力于构建科技护城河,借前瞻性的判断,先于行业早在2008年,便设立子公司平安科技,过去10年中,平安在科技层面累计投入达500亿元,构建了五大生态圈、布局科技中台,通过大数据、AI科技为前端产品和服务的升级提供坚实支撑。目前,平安科技已经将人工智能覆盖到金融、教育、医疗、智慧城市等行业领域,实现AI在多个行业的场景化。未来仍持续将每年营收的1%投入科研领域,目前已经打造了8大研究院用于基础科技研发。截至2019年中报数据,平安的专利累计达18050项,覆盖金融、医疗、智慧城市等领域,位居国际金融机构前列。

基于领先的AI技术,平安实现了深度内外赋能,利用科技实现降本增效、强化风控、优化服务,并持续向行业输出智能解决方案,实现全行业的智能化提升。

在对内赋能过程中,核心主营业务持续优化。例如,科技赋能寿险业务层面,辅助代理人筛选的AI面谈官面试覆盖率达100%,高仿真对话机器人“AskBob”对代理人咨询的疑问解答准确率高达95%,任务查询和智能办理功能覆盖代理人90%常用需求;平安产险则运用自主研发的AI图片定损技术和精准客户画像技术,针对安全驾驶行为良好的车主推出“信任赔”服务,开创性实现后台零人工作业模式,案均赔付完成时间缩短至168秒;平安银行则建立了覆盖贷前、贷中、贷后全流程的智慧风控平台,实现了智能决策、智能控制、智能预警、智慧管理、智能放款五大智能应用。最新数据显示,平安银行的AI语音客服替代率已达到80%以上,大幅提升了客服效率。同时,在图像识别方面,诸如平安OCR票证通,智能闪陪,猪脸识别等领域不断有所土坯,在医疗影像辅助诊断等领域,平安都已经有实际的业务落地场景,并逐渐发展成通用技术。

同时,平安还依托人工智能技术,以“金融、医疗、房产、汽车、智慧城市”五大生态圈为落脚点口实现对外赋能。致力于构建端到端一体化的金融科技服务平台的金融壹账通已累计为全国3707家机构提供智能金融服务,利用人工智能、区块链、云计算等技术平台化解中小金融机构在营销、获客、产品、渠道、服务等层面的痛点。智能辅助诊疗系统、智能疾病检测系统、智能医疗云平台、智能商保解决方案也在持续赋能医院、医保局、药店、中小保险机构等医疗产业领域的各个机构。面对产业互联网的下半程,平安同样抓住了智慧城市的发展红利,以“智慧、智理、智效”为理念核心,依托人工智能、区块链、云三大核心技术,构建了“1+N”智慧城市平台体系,实现“优政、兴业、惠民”三大领域的智慧城市建设。

当AI技术渗透到各行各业的时候,也将颠覆行业的生产方式。基于“AI+”能力,如今的平安不仅向其他金融机构、医疗机构输出新科技,提升效率,同时平安集团的科技创新正趋向平台化发展,对外输出AI应用等创新服务,助力同类行业升级转型。

(文章来源:36氪 作者:张十柒)