小米开源 MiDashengLM-Spatial:能听懂声音内容也能定位声源方向
Xiaomi Open-Sources MiDashengLM-Spatial, an Audio Model That Hears Both What and Where
小米把 MiDashengLM-7B 升级成能识别声源方位和距离的版本,Apache 2.0 开源,做空间音频应用的同学可以直接拿来用。
小米在 MiDashengLM-7B 基础上加入新的 Spatial-Dasheng 编码器,推出开源音频理解模型 MiDashengLM-Spatial。模型除了常规音频理解,还能判断声音的方向、距离和移动状态。该模型以 Apache 2.0 许可证开源,可自由商用。
Xiaomi Open-Sources MiDashengLM-Spatial, an Audio Model That Hears Both What and Where
Built on MiDashengLM-7B with a new Spatial-Dasheng encoder, the Apache 2.0 model pairs general audio understanding with sound direction, distance and movement.
- IT之家01:35原文