为进一步服务音乐行业的技术生态建设,推动行业产研融合与创新交流,腾讯音乐娱乐集团(以下简称“TME”)第二届“TechME技术周”于10月24日正式拉开帷幕。本届技术周以“协同提效,一码当先”为主题,将持续至10月28日,期间通过线上音乐技术展、技术大咖主题演讲以及内部案例分享等多个活动板块,以专业知识分享和技术成果展示的方式帮助从业者、音乐爱好者更全面地了解音乐领域技术的最新趋势和发展脉搏。
与去年第一届“音乐黑科技狂欢节”不同,本届技术周以TMELAND作为主会场,中之人(指操纵虚拟主播进行直播的人)通过单目摄像头实时驱动面部和肢体动作,化身全民K歌数字人小K担任开幕式线上主持人。基于XR虚拟会展技术,来到现场的真人嘉宾们可以在虚拟场景中活动演出,并且实时与虚拟主持人进行语音互动。不仅如此,这次的开幕式还利用TMELAND的“端云结合”渲染技术,确保复杂场景经过云端预渲染之后,能够实时拉流还原到屏幕前,而观众则可以通过虚拟形象在活动区自由活动,参与弹幕互动,实现真人嘉宾、观众与虚拟场景的完美结合,打造极为沉浸的参会体验。
与此同时,本次大会还实现了深圳与广州两个异地分会场的实时互动:观众能在虚拟会场中通过大屏幕看到广州分会场的嘉宾,而在深圳XR绿幕摄影棚的嘉宾则会出现在屏幕前的舞台上。为了规避延迟问题,会场通过对齐GOP等技术处理,将时延差缩小到了1-3秒,确保两地嘉宾顺畅交流,成功开启一场“同空间、跨次元”的交流盛会。
除了虚实结合的场地设计,开幕式当天还推出了虚拟新星——小琴,这位由TME天琴实验室Music XR Maker系统支持,与MUX设计中心联合推出的虚拟人,在开场中与TME另外两位虚拟偶像小K和扇宝一同带来精彩的唱跳表演。作为实验室第一位虚拟人的首秀,表演基于天琴实验室的音乐内容理解技术,将音乐的情感、段落、节拍等维度逐一拆解,结合专业编舞老师的舞蹈设计及动捕形成的舞蹈动作库,采用AI生成现场的动感舞蹈表演、媲美专业灯光师的炫酷灯光秀,再通过歌声合成模型让虚拟人拥有媲美专业歌声的音域和唱功。最终小琴以最佳的表演效果完成一支堪比发行级的舞蹈作品,为本届技术周拉开了帷幕。
(虚拟人小琴)
在开幕现场也邀请了多位TME高管进行分享,讨论TME眼中音乐与技术之间的关系。腾讯音乐娱乐集团执行董事长彭迦信表示:“我们要把技术融入产品的生命中,从业务角度,要坚持用户导向,以用户为核心带动产品的使用价值,推动技术的落地;从宏观环境来看,要发挥技术的保障能力,例如信息安全和隐私保护,让技术为企业发展和用户权益保驾护航”。腾讯音乐娱乐集团首席执行官梁柱认为:“身处数字音乐行业,所有技术的进步、革新与突破最终还是为音乐内容的发展而服务,TME做技术的本质,也正是为了让用户听到更多优质的音乐内容”。腾讯音乐娱乐集团总裁、首席技术官谢振宇提出:“用户和产业的需求越来越多元,我们需要在产品上走出去,走到音乐外面的世界去。基于音乐但不止于音乐,做更多泛娱乐的产品,不断满足用户和产业的需要,这就是我们产品和技术的创新方向”。
(从左至右:深圳会场小K、梁柱、彭迦信,广州会场谢振宇)
此外,本次技术周也邀请了多位业界大咖畅谈未来音乐技术的发展趋势。人工智能在音乐行业中的辐射越来越广,围绕AI音乐生成中的结构和情感建模,微软亚洲研究院高级研究员谭旭分享了他眼中AI音乐创作中建模的对象、要求和目标;除了人工智能,科学计算也让音乐走向多元,音乐声学博士、中央音乐学院音乐人工智能系教授李子晋则探讨了未来音乐与科学计算之间的相融共生;腾讯云架构平台部存储技术专家朱建平认为不断地技术创新是助力行业提质增效的必要基础;腾讯云架构平台部视频研发中心负责人郑泽栋则深度剖析了当下热门的直播新玩法及技术解析。这些技术专家的精彩分享,获得众多观众的热烈反响。
10月25日起,每日下午都会有TME内部技术大咖开展“技术大讲堂”,围绕“研效提升”、“协同增效”、“运维基建”三大主题,全面分享他们如何在业务实操中整合资源,协同提效,以加强和推动行业内的开放交流。
在去年技术周的活动现场,音乐爱好者们通过线下互动体验直观感受到TME在音乐黑科技研发与应用方面的创新成果。时隔一年,本届“TechME技术周”的音娱狂欢体验也重磅升级,打造二十四小时不间断的线上互动展会,分设案例馆、互动馆、Oteam馆、荣耀馆四大展馆,以互动娱乐、案例分享、成果展示的多元方式集中展示TME黑科技示例,实现所有音乐爱好者的“跨次元”同频互动,感受科技引擎为用户打造的音乐“新体验”。
(TechME技术周线上互动馆)
在互动馆内,全民K歌重磅升级的“KK秀”让用户随心使用自己定制的专属虚拟形象,并一键生成有动态舞蹈动作的MV作品;Music XR Maker技术可以通过歌唱音乐自动生成歌唱动作及表情,让虚拟人物唱歌更加自然、生动;3D虚拟音乐世界TMELAND则打通了虚拟和现实的边界,通过虚拟形象进行实时社交,体验高质量、多层次的音乐享受;在直播场景上,还有“酷狗虚拟主播”,帮助主播们摆脱传统直播间场景搭建,实现真人与3D虚拟舞台的融合。
除了直播与虚拟世界相关科技,音乐爱好者们也可以体验高效的音乐人创作工具:“觅词”歌词AI辅助创作平台的文本生成技术可以进行填词创作;MMatch智能创作工具既可以完成歌单创作,又能实现从一张图或一段视频出发自动匹配适当的音乐,提供独特的视听体验;音乐知识图谱小程序以AI知识图谱为核心引擎,构造及展现数字音乐内容。
不仅如此,本次技术周上还实现了对TME的一次深度探访,可以在荣耀馆了解TME最新的技术专利和获奖案例,学习协同提效的标杆经验,更可以走入案例馆了解TME员工如何在一次次实践中不断突破创新。
长期以来,TME持续服务音乐行业,推动音乐科技发展与探索,在组织上,通过成立TME技术委员会从战略规划层面提速企业资源加持,集中企业技术能量调动内外部技术能力,有效实现行业内外部技术研发能力的交流与加强。在开幕式上做过往一年工作成果回顾时,TME技术委员会主任傅鸿城也提到:“我们致力于研发协同与效率提升,从业务中总结共性,完善技术蓝图,提升研发效率,不断释放创新活力。过往一年技术委员会深度运作了包括互动音视频、多媒体与AI、安全、曲库等12大领域,整合不同业务技术团队力量点亮集团技术图谱2.0,为长远业务稳健发展提供助力“。
除此以外,TME还打造专注培养面向互联网、流媒体时代音乐产业人才的平台——“TME音乐学堂”,以校企合作、公益公开课和词曲创造营等多元形式服务于行业人才培养,为行业孵化更多适应数字经济时代发展的新型音乐人。
数字科技与音乐产业转型的交互与融合已经走入发展的快速期,TME始终坚持以“产品研发、人才培养、知识分享”的多元服务链路,为用户、音乐人与业内外合作伙伴提供高效协同和发展的技术经验,发挥自身力量助力音乐从业者之间的科技交流,为行业发展提供更多服务。未来,TME愿与内外合作伙伴共同学习发展,用技术提升用户的音乐体验,助力音乐产业数字基建的建设升级。