详情

基于transformer结构的视觉感知对ADAS平台系统架构的影响

申报人:于海龙 申报日期:2023-04-09

基本情况

2023年“校企专项”大学生创新实践计划
基于transformer结构的视觉感知对ADAS平台系统架构的影响
校企专项
工学
计算机类
创意类
生物医学工程学院
于海龙
指导教师
登录状态下查看

1. 上海交通大学——生物医学工程学院——2020年青年研究创新项目:面向肺部微小结节活检机器人的术区多模态信息感知技术研究,在研,主持人。

2. 横向课题《电流控制功放模块开发》,结题,主持人。

3. 上海交通大学——2020年新进青年教师启动计划——面向人体下呼吸道的连续体取样机器人的多模态信息感知技术研究,在研,主持人。

4. 上海交通大学“交大之星”计划“医工交叉研究基金”项目:颌骨外科术后康复机器人的开发设计及关键技术的研究,在研,主持人。

5.横向课题《面向动目标的视触融合软件系统开发》,在研,主持人。

6. 国家自然科学基金委员会中德科学中心中德国际合作与交流项目《基于医学图像与力反馈的微创手术机器人局部自主操作研究》,在研,参与者。

7. 国家自然科学基金委员会,“共融机器人基础理论与关键技术研究”重大研究计划,《安全自主及智能演进的人机共融检疫机器人》,在研,参与者

8.上海市“科技创新行动计划”国际科技合作项目,《柔性外骨骼下肢康复机器人研究》,在研,参与者

9.上海市2022年度“科技创新行动计划”生物医药科技支撑专项项目, 《小儿大便失禁骶尾神经刺激治疗仪优化及遥操作植入系统的研发》,在研,参与者。

10.中国舰船研究设计中心-横向课题《脉冲发射模块》,结项,主持人。

校内导师及团队提供全程指导与交流平台,提供经费保障。

企业导师及团队提供项目的技术支持与指导;可为优秀学员提供参观或实习的机会。

(1)项目简介:

    基于transformer结构的深度神经网络在自然语言理解、计算机视觉等领域取得了耀眼的成果,但是在ADAS的视觉感知领域的应用还处于初级阶段。主要原因是ADAS硬件和软件平台对于transformer结构的部署还存在很多问题,传统的系统架构需要在其中找到合适的可行的解决方案,因此需要分析其中的影响因素和关联,以期指导未来的部署。

(2)预期成果:

    项目拟研究基于transformer结构的深度学习网络在ADAS平台上的视觉感知应用,并给出对于系统架构影响的分析报告。

(3)现有基础:

    哈曼在ADAS领域有超过十年的经验,并已经在多款车型上搭载相关软硬件系统,有丰富的研发和量产经验。企业具备深度学习资源,包括亚马逊AWS和高性能GPU训练平台,ADAS软硬件平台等;搭载视觉设备的数据采集车。

选题成员

0

指导教师

序号 教师姓名 电子邮箱 所属学院
1 于海龙 登录状态下查看 生物医学工程学院 第一指导教师

选题附件

结束