嵌入式AI老兵
-
在Cortex-M这类MCU上部署Transformer:如何从模型结构入手做极致裁剪并平衡精度?
在Cortex-M这类资源极度受限的MCU上部署Transformer,框架优化(如使用CMSIS-NN或专用推理引擎)固然重要,但 模型结构本身的极致裁剪往往是决定性因素 。这不仅仅是“减小模型”,而是在精度、延迟、内存(RAM/Fla...
-
Softmax定点化:Cortex-M上指数计算查表与多项式近似的性能抉择
在嵌入式AI推理,尤其是面向低功耗Cortex-M系列微控制器时,Softmax函数的定点化处理是一个常见而关键的优化环节。Softmax的核心在于 exp(x) 指数运算,而浮点指数计算在资源受限的MCU上通常是性能瓶颈。本文将深入对比...