第二十四期“上海交通大学大学生创新实践计划”项目
基于NPU的低能耗视频分析系统测量及优化
创新训练项目
工学
计算机类
创新类
密西根学院
朱怡飞
指导教师
登录状态下查看
NA
近年来一直从事云计算、边缘计算、多媒体网络等领域研究,强调理论设计与实验部署相结合的研究方式。指导教师提供方法论,参考文献,设计思路,定期周会讨论,论文写作指导。
一、问题概述
对于视频内容实时分析的需求使得越来越多的摄像头从单一的传感元件向具有计算功能的智能摄像头演变。无线智能摄像头由于在部署难易程度上的优势开始被广泛研究。以深度神经网络为代表的视频分析算法对于智能摄像头的能耗提出了更大的要求。为了快速高效的进行神经网络推理,以TPU,NPU为代表的特制化芯片逐渐开始成为在智能摄像头端完成网络推理的主力设备。本研究旨在以特制化芯片NPU支持下的智能摄像头为研究主题,对NPU推理能耗进行测量,并探索保证推理精度同时降低推理能耗的推理调度算法。
二、研究内容
1)数据驱动的NPU模型推理能耗测量
2)基于优化理论的能耗最小化算法设计
3)基于NPU智能摄像头的原型部署和算法实现
4)论文撰写
三、任务分析
本项目以创新研究为导向。学生会在算法设计(理论水平)、实际系统部署(编程经历),以及论文撰写(科研经历)上均有所收获。
三、已有基础
指导教师在视频分析、优化理论上有丰富经验。