科大讯飞助力智能汽车打造高阶音效体验

佐思汽研 佐思汽车研究 2021-12-23 13:31

2021年12月17-18日,2021佐思智能汽车年会暨金智奖颁奖典礼在苏州盛大开幕。科大讯飞“飞鱼智能音频管理系统”和“飞鱼智能助理”分别斩获座舱应用系统领域年度最佳产品奖和汽车语音市场领先奖。

图片


图片


佐思汽研对科大讯飞智能汽车事业部副总经理、科大讯飞杰出科学家马桂林进行专访。马桂林,丹麦科技大学声学专业硕士、博士,曾供职于多家全球知名的声学和音频公司,专注于声学信号处理、音频处理和语音前处理的研究,曾为杜比实验室中国区最高级别技术专家、哈曼国际中国区杰出工程师。


图片


马桂林介绍到,飞鱼智能音频管理系统是科大讯飞用AI技术改变智能汽车人机交互领域中又一项重大的突破,系统打通从收音端到放音端完整的声学链路。在软件算法层面,其全自主知识产权的3D沉浸环绕音、虚拟声学空间、发动机主动降噪、车内交流补偿等高级智能车载音响系统的高精尖技术,能够为每一辆车营造出广阔的声场空间。

 

智能网联汽车时代,座舱音响在音效改善之外仍有部分痛点:


  • 受限于座舱空间、车内扬声器布局以及算法能力等限制,现有音频系统听觉体验欠佳;

  • 现有音频系统与车机、应用生态暂未实现共同进步,智能化进程较慢;

  • 车厂为用户提供的“主驾模式”、“副驾模式”、“全车模式”等固有音效模式,无法根据座舱状态进行动态调整,声音效果不够丰富。


图片

图片来源:科大讯飞


飞鱼智能音频管理系统针对以上痛点提供的解决方案,主要有以下三大优势:


3D沉浸环绕音,打造身临其境的声场环境


在音效体验上,飞鱼智能音频管理系统依托纯自主产权 iFLY SOUND™沉浸3D环绕音效算法,可对音频进行实时的高质量呈现。例如,在播放《速度与激情》等动作大片时,可利用其18通道输出,单通道最大功率80瓦的硬件基础能力,为用户提供身临其境的视听感受。


图片

图片来源:科大讯飞


除此之外,飞鱼智能音频管理系统还打造声景空间功能,通过车内扬声器播放场景模拟的背景音效,目前推出有森林、音乐厅、儿童房三种声音场景。例如,用户在车内独处的时候,用语音打开“森林”声景,闭眼就仿佛置身森林内,风声、流水声、鸟叫声在周围环绕,为用户提供一个绝佳的冥想环境。


图片

图片来源:科大讯飞


与音效生态联合,提供更为丰富的乐听体验


在应用生态联动上,科大讯飞携手中央广播电视总台云听、喜马拉雅、爱奇艺、芒果动听、雷石、酷我等音效厂家以及讯飞音乐、讯飞听见等讯飞内部资源,成立“科大讯飞智能音效生态联盟”。未来还将会有更多应用与飞鱼智能音频管理系统形成联动,提供即时最佳听觉体验。
 
例如,使用喜马拉雅听书时,飞鱼智能音频管理系统的AI算法在播放时智能添加背景音效、系统读书更加声情并茂;在车内使用K歌软件时,飞鱼智能音频管理系统可为用户提供媲美专业录音棚的使用环境和AI音效处理。

 

通过摄像头等动态捕捉乘客状态,打造专属听感

飞鱼智能音频管理系统可通过座舱摄像头等通道识别乘客状态,为人耳区域提供实时调音的最佳听觉体验。同时,摄像头还会判断车内乘员的状态,例如识别到车内乘员在聊天,系统自动降低多媒体声音。需要指出的是,科大讯飞在座舱视觉识别上运用的技术均为自研。


图片

图片来源:科大讯飞


飞鱼智能音频管理系统除了以上提到的功能外,还具备独立声场分区、主动降噪、车内交流补偿等功能。


  • 独立声场分区下,车辆行驶过程中,车内接到免提电话,如果电话对方要找的人坐在后排,可通过语音控制将电话转至后排播放器,前排音乐播放、导航等不受影响;

  • 车内交流补偿功能的使用场景在MPV车型。前排与第三排乘客交流时,飞鱼智能音频管理系统可以拾取声源发出位的声音,通过声源接收位的播放器进行补偿播放,减少前排人员向后转身以及高音量喊话的情况。


飞鱼智能音频管理系统现阶段有标准版、高阶版和扩展版三个版本,车厂可以根据搭载车型需要达到的音响效果选择对应系统版本。
 
目前,飞鱼智能音频管理系统已实现不少于6个定点车型,明年将开始大批量的量产装车。科大讯飞在合肥、苏州、上海、长春、武汉、重庆、广州等地均设有研发中心、交付中心等,可最大限度保障客户服务质量和效率。
 
作为科大讯飞智能座舱领域战略级产品,飞鱼智能音频管理系统同样支持OTA升级。科大讯飞智能汽车事业部副总经理马桂林表示,飞鱼智能音频管理系统未来OTA的重点有两个方面,一是音效算法的提升,强化底层技术能力;二是声景空间音效场景、联动的音效生态应用将会更加丰富。
 
飞鱼智能音频管理系统的发布,是科大讯飞在智能汽车道路上的又一大创新。从智能音效生态到用户体验场景,飞鱼智能音频管理系统统筹科大讯飞在语音交互、车机系统、座舱多模态识别、座舱音效应用等多个维度的技术积累,为用户打造智能汽车时代下该有的智能音频系统。


更多佐思报告


佐思 2021年研究报告撰写计划

智能网联汽车产业链全景图(2021年11月版)


主机厂自动驾驶汽车视觉(上)高精度地图
商用车自动驾驶汽车视觉(下)高精度定位
低速自动驾驶汽车仿真(上)OEM信息安全
ADAS与自动驾驶Tier1 汽车仿真(下)汽车网关
汽车与域控制器毫米波雷达APA与AVP
域控制器排名分析车用激光雷达驾驶员监测
激光和毫米波雷达排名车用超声波雷达红外夜视
E/E架构 Radar拆解车载语音
汽车分时租赁充电基础设施人机交互
共享出行及自动驾驶 汽车电机控制器L4自动驾驶
EV热管理系统混合动力报告L2自动驾驶
汽车功率电子汽车PCB研究燃料电池
无线通讯模组汽车IGBT汽车OS研究
汽车5G汽车线束线控底盘
合资品牌车联网V2X和车路协同转向系统
自主品牌车联网路侧智能感知模块化报告
自主品牌ADAS研究商用车车联网商用车ADAS
汽车多模态交互汽车智能座舱车载显示
Tier1智能座舱(上)座舱多屏与联屏智能后视镜
Tier1智能座舱(下)智能座舱设计汽车照明
座舱SOC汽车VCU研究汽车座椅
汽车数字钥匙TSP厂商及产品HUD行业研究
汽车云服务平台

OTA研究

汽车MCU研究
AUTOSAR研究智慧停车研究传感器芯片
软件定义汽车Waymo智能网联布局ADAS/AD主控芯片
T-Box市场研究自动驾驶法规ADAS数据年报
T-Box排名分析智能网联和自动驾驶基地汽车镁合金压铸
乘用车摄像头季报智能汽车个性化飞行汽车
专用车自动驾驶农机自动驾驶矿山自动驾驶
港口自动驾驶自动驾驶重卡

无人接驳车

仪表和中控显示



佐思研究月报

 ADAS/智能汽车月报 | 汽车座舱电子月报 | 汽车视觉和汽车雷达月报 | 电池、电机、电控月报 | 车载信息系统月报 | 乘用车ACC数据月报 | 前视数据月报 | HUD月报 | AEB月报 | APA数据月报 | LKS数据月报 | 前雷达数据月报