2022.12.27

索尼开发出具有完全基于对象的立体环绕音效的实时现场直播技术

拓展索尼沉浸式音乐体验 "360临场音效"的应用范围以创造新的感动

索尼公司(下称:索尼)开发出具有完全基于对象的立体环绕音效的实时现场直播技术。此外,索尼还拓展了 "360临场音效 "的应用范围,这种音乐体验可以让用户沉浸在一个三维的声场中。

虽然现场直播因其便捷、不受地点和行动限制而受到青睐,但如何实现如临现场的体验感一直是个挑战。索尼升级了其自研的360立体环绕声技术,实现了基于“360临场音效”的三维声音和视频实时传输,用户可以体验到不在现场就能同时欣赏现场表演或音乐会的真实感。

360临场音效
360临场音效

为艺术家和音响师开发的实时直播的 "360临场音效 "编码器

带有位置信息的声源图像被分配并放置在360度的球形空间中
带有位置信息的声源图像被分配并放置在360度的球形空间中

“360临场音效”改进了创作环境并开发了一个实时编码器,为艺术家和音响师提供临场效果和音质。为了创造空间音乐体验,音响师首先为每个声源分配位置信息,如人声、吉他声和鼓声,并将它们安排在一个球形空间中。索尼开发了一个新的 “360临场音效”创作工具,用于实时传输,以提升音响师的创作环境。有了这个工具,音响师们可以自由地、即时地排布声源,并按照预期创造具有三维效果的声音。

除此之外,为了将音乐发送到服务器并传送给用户,音频数据需要经过压缩流程,包括位置信息在内,但要保持高音质还需要一定的处理时间。因此索尼开发了自己的音质处理算法,以实现临场效果,这对现场直播至关重要。此外,利用“360临场音效”这种基于对象的空间音频技术,可以自动优化给予每个声源(对象)的信息量(比特率),而不降低听觉质量。它通过在短时间内压缩音频数据,实现与视频同步的实时直播。

应用开发1:为观众提供“360临场音效”的体验

“360临场音效直播”的模拟场景图
“360临场音效直播”的模拟场景图

索尼与美国软件公司Streamsoft Inc. 联合开发了“360临场音效直播”(360 Reality Audio Live)的APP,致力于给用户带来实时传输的卓越体验。搭配耳机使用这个APP后,用户可以享受到全新的现场娱乐体验2

此外,这个APP还配备了实时聊天的功能,使得艺术家和观众、观众和观众之间的实时交流成为现实,让在线观众也能够身临其境地体验。

“360临场音效直播”专题网站

1 支持安卓和IOS系统的智能手机和平板电脑

2 适配任何型号的耳机;如果使用索尼或者Audio-Technia提供的“360临场音效”认证的耳机,还可通过专用APP中个人功能的调整优化自身体验

什么是“360临场音效”

“360临场音效”使用了索尼独有的基于对象的空间音频技术,能提供媲美音乐会现场的音乐体验。通过排布声源(如人声、合唱和乐器)等位置信息,“360临场音效”能为艺术家和音乐创作者提供360度立体环绕的音乐体验;当听众回放相关内容的时候,创作者的创意思路将被完美呈现,听众将沉浸式地体验各个方位传来的立体环绕音效。

"360临场音效 "专题网站

 

*"索尼"、"SONY "标识和本乐动(中国)稿中使用的任何其他产品名称、服务名称或标识标志是索尼集团公司或其附属公司的注册商标或商标。其他产品名称、服务名称、公司名称或标识标志是其各自所有者和/或授权者的商标和版权财产。

(本文译自索尼官网英文乐动(中国)稿,供参考)

********************************************************************************************
索尼集团公司是一家建立在坚实技术基础上的创意娱乐公司,现运营六大业务板块:游戏与网络服务业务;音乐业务;影视业务;娱乐、技术及服务业务;影像与传感解决方案业务;金融服务业务。索尼的企业宗旨是“用创意和科技的力量感动世界”。公司在截止到2022年3月31日结束的2021财年,合并销售额达883亿美元。
乐动(中国)单位如欲查询更多资料,请联络:pr@sony.com.cn

图片