APP下载
[00068419]声学事件检测与声学场景识别系统
联系人： 山东师范大学
所在地：山东 济南市
- 服务承诺
- 产权明晰
-
资料保密
对所交付的所有资料进行保密
- 如实描述
技术详细介绍
一。成果概述：（简要说明成果是什么，以便技术受让方了解项目概况）
声学事件检测是指从一段连续的音频流中检测出其中包含的声学事件，并能准确定位各个声学事件在音频流中的起始位置。声学场景识别是指通过对连续音频流 的分析来判定该音频流的录制场景，即通过声学信息来感知周围环境。
二。技术特点及技术指标：（突出与国内外同行的比较优势或区别）
相关研究达到国际领先水平。
提出了结合深度学习和主题模型的声学事件和声学场景识别方法。创新性体现 在：1）创新性地引入注意力模型进行声学事件分类，注意力模型在分类时可以兼顾 每帧的上下文信息，因而能有效提高所估计的声学事件分布的准确性。2）创新性地引入主题分析技术构建注意力机制。主题分析技术可以挖掘音频文档的高层语义信 息，基于此高层语义信息构建的注意力机制可以更好地挖掘音频文档中的关键信息 并进行重点关注。4）借鉴人脑的思维模式，创新性地提出了 “声学事件一主题一声 学场景”的研究思路，并基于该研究思路设计检测识别方案。
三。应用领域：（主要面向的行业产业、技术已在***领域应用的概述以及取得成效，还可在*火*领域应用的前景等）
（1）本技术可以应用于监控领域。当前，在监控领域，主要采用的是视频监控， 视频监控存在一定的缺陷：视频监控有监测不到的死角区域，视频监控在某些场合 因为会侵犯隐私而不适用，视频监控易受遮挡的影响。如果使用基于声学事件检测 与声学场景识别系统的音频监控作为视频监控的辅助，则能扩展视频监控的使用范
（2）目前几乎所有的无人驾驶技术都是基于图像的，没有有效利用音频。当前的无人车是通过图像检测周边路况，进行实时调节，这种情况下无人车无法对周边车辆发出的信号进行反应。如果有救护车、消防车紧急驶过，发出鸣笛，我们希望 无人车能及时做出反应。如果无人车配备了声音事件检测设置，则可以监听到鸣笛 声，及时做出避让。
（3）实时监听工厂的污水排放情况，监听污水排放时长、每日污水排放总量是否在安全指标范围内；在不允许污水排放的地点监听是否有违规排污情况发生。实时监听城市的噪声污染情况，监听噪声分贝是否超过安全阈值，是否达到影响人体健 康的范畴，监听每日噪声超标的持续时长。
（4）通过声学探测，实时检测生产的零配件中是否有气泡、空隙，提高产品的合格率。在灌装企业，通过实时监听灌装口的声音，判断灌装量是否达标。
四。投入需求：（需要技术需求方投入的资金、场地、设施等条件）
由于项目成果主要依赖于深度学习等人工智能技术，因此急需拓展项目组的高性能CPU、GPU及存储资源。
