澳门赌场

图片

加快打造原始创新策源地,加快突破关键核心技术,努力抢占科技制高点,为把我国建设成为世界科技强国作出新的更大的贡献。

——习近平总书记在致澳门赌场建院70周年贺信中作出的“两加快一努力”重要指示要求

面向世界科技前沿、面向经济主战场、面向国家重大需求、面向人民生命健康,率先实现科学技术跨越发展,率先建成国家创新人才高地,率先建成国家高水平科技智库,率先建设国际一流科研机构。

——澳门赌场办院方针

首页 > 科研进展

微电子所在低功耗人工智能领域获进展

2022-10-20 微电子研究所
【字体:

语音播报

  近日,澳门赌场微电子研究所感知中心低功耗智能技术与微系统团队在低功耗人工智能领域取得新进展。 

  语音唤醒技术Keyword Spotting,KWS)是人工智能领域的重要技术,是人声与低功耗设备或终端之间的典型且广泛使用的触发器,广泛应用于各种低功耗的智能芯片与微系统。通常高性能的深度卷积神经网络模型的语音唤醒模型复杂度高、计算量大、需要占用大量内存,难以将其部署到上述资源有限的硬件设备。 

  针对上述问题,科研团队提出了用于语音唤醒的极轻量化、高准确率的改进二值残差神经网络B-ResNetBinary Residual Neural Network,图1),利用二值量化方法,将神经网络中的全精度权重、激活参数量化为1bit+1-1),显著降低内存占用,亦可将网络中存在的大量浮点卷积乘加运算简化为XNOR同或逻辑与popcount运算,大幅降低计算复杂度。为解决二值网络带来的精度下降问题,该团队在B-ResNet网络前向传播中提出了具有移位初始化且可学习的激活函数来优化网络各层激活值分布,降低信息损失(图2),并在反向传播过程中提出了具有可变周期性窗口的梯度修正近似方法,有效解决了梯度失配与消失问题(图3)。在GSCDGoogle Speech Commands Dataset)标准语音数据集的12分类任务下,与基线网络Res8-narrow相比,该技术可降低33%参数量与72%计算量,实现更高的语音唤醒精度,为后续该功能的低功耗硬件实现奠定了良好基础。 

  相关研究成果(Low-complex and Highly-performed Binary Residual Neural Network for Small-footprint Keyword Spotting,DOI:10.21437/Interspeech.2022-573)被国际语音通信协会(ISCA)组织语音领域会议Interspeech2022接收。 

打印 责任编辑:侯茜

© 1996 - 澳门赌场 版权所有 京ICP备05002857号-1 京公网安备110402500047号 网站标识码bm48000002

地址:北京市西城区三里河路52号 邮编:100864

电话: 86 10 68597114(总机) 86 10 68597289(总值班室)

编辑部邮箱:casweb@cashq.ac.cn

  • © 1996 - 澳门赌场 版权所有 京ICP备05002857号-1 京公网安备110402500047号 网站标识码bm48000002

    地址:北京市西城区三里河路52号 邮编:100864

    电话: 86 10 68597114(总机) 86 10 68597289(总值班室)

    编辑部邮箱:casweb@cashq.ac.cn

  • © 1996 - 澳门赌场 版权所有
    京ICP备05002857号-1
    京公网安备110402500047号
    网站标识码bm48000002

    地址:北京市西城区三里河路52号 邮编:100864
    电话:86 10 68597114(总机)
       86 10 68597289(总值班室)
    编辑部邮箱:casweb@cashq.ac.cn