徐刚 博士 高级工程师 硕士生导师
中国科学院宁波材料技术与工程研究所“关键人才”高级工程师
宁波市青年科技创新领军人才，宁波市领军与拔尖人才培养工程入选者

个人概况：

男，1986年9月出生，长期致力于计算机视觉、图像视频分析理解、多模态自主无人系统及生成式人工智能的前沿研究与工程转化。核心工作是构建面向开放与复杂环境下的“感知-理解-决策”一体化智能视觉系统，旨在攻克复杂动态场景下的鲁棒感知、低空极小目标理解、以及数据与知识闭环等关键挑战。研究深度融合多模态大模型等前沿技术，形成了从理论创新、技术突破到产业应用的完整闭环，多项成果在公共安全、智能制造、智慧农业、无人系统、以及智慧医疗康养等领域实现产业化应用。发表期刊会议论文30余篇，授权专利16项，作为项目/课题负责人主持浙江省自然基金、广西省重点研发、宁波市“科创甬江2035”重点研发等项目10余项，承担/完成企业技术委托开发横向项目30余项，作为核心骨干参与国家科技支撑计划、国家863、中科院区域重点研发（STS）、宁波市/区科技攻关等各类国家省市科研项目30余项。获浙江省农业机械科技进步一等奖、宁波市科技进步二等奖、中国研究生机器人创新设计大赛三等奖及优秀指导教师等奖励10项。

研究方向：

  课题组研究紧密围绕“大模型AI时代的多模态数据感知-理解-应用”主线，专注于以下四个相互支撑的研究方向：

• 大视差场景多相机标定与动态感知全景拼接技术：解决大视差、弱纹理及动态干扰环境下，传统特征匹配失效、相机标定不稳、运动物体导致拼接伪影与对齐误差等难题；研究基于深度学习与几何先验融合的快速自动外参标定与在线时空同步方法，开发融合动态物体分割与补偿的轻量化实时全景拼接算法与全景摄像机，实现复杂场景的高一致性360度感知与定位。
• 低空动态场景下极小目标检测与跟踪技术：克服低空无人机或广域监控场景下人、车、物等小目标因分辨率低、特征稀少导致的检测漏报率高、轨迹跟踪易丢失等瓶颈。构建针对亚像素级微小目标的高精度检测模型与长时鲁棒跟踪框架；研究高质量、大规模小目标标注数据集的构建方法与半自动标注工具，以降低标注成本、提升数据质量。
• 基于多模态大模型的样本可控生成与自动标注技术：破解垂直应用场景中高质量标注数据稀缺、获取成本高昂的核心瓶颈，并保证生成数据的多样性与真实性。设计基于生成式人工智能（AIGC）的高效自动标注流程；研究在少样本/零样本条件下的可控数据生成技术，实现对生成样本在姿态、光照、背景等属性上的精细控制，避免模式崩溃与分布偏差。
• 多模态大模型驱动的视频多任务协同理解与零样本泛化技术：构建统一的视频理解框架以协同处理多种任务，并提升模型对未知场景和罕见对象的泛化能力。探索基于统一多模态大模型架构的视频多任务协同学习范式，实现检测、跟踪、分割、描述与问答等任务的知识迁移与互增强；研究零样本/少样本泛化机制，提升模型对未知场景、罕见事件及新物体类别的快速适应能力。

部分主持/参与科研项目：

1. 广西省重点研发计划，结合无人机多尺度感知的道路安全主动防控AI大模型关键技术研究与应用示范，2025/12-2026/12，220万，在研，课题负责人
2. 广西省重点研发计划，高速公路动态风险智能感知与主动安全防控的应用场景建设及示范，2025/12-2027/12，212万，在研，课题负责人
3. 2025年度宁波市青年科技创新领军人才，基于多模态大模型的AI视频理解关键技术研究及应用，2025/12-2027/12,30万，在研，项目负责人
4. 浙江省自然科学基金公益研究计划，面向大棚蔬菜自动化种植中的图像识别关键技术研究及应用，2020/01-2023/12，10万元，结题，项目负责人
5. 宁波市科创甬江2035重大专项，基于全景拼接与AI视频分析的智慧道路管理系统关键技术研究与应用示范， 2024/02--2027/02，120万，在研，课题负责人
6. 企业联合共建技术中心，基础设施安全风险智慧管理联合研究中心，2023/07--2026/07，210万，项目负责人
7. 企业委托技术开发，AI智能电梯异常场景感知技术研究和应用，2023/07--2025/07，150万，项目负责人
8. 国家市场监督管理总局科技项目，基于AI大模型的电梯多模态风险预警与智能应急处置技术研究与应用，2026/1-2027/12，50万，在研，课题负责人
9. 浙江省市场监督管理局科技项目，基于多模态融合的电梯运行风险智能感知与主动防控关键技术及应用，2026/1-2027/12，30万，在研，课题负责人
10. 宁波市“科创甬江”2035重大专项，面向设施农业的垂直大模型与具身作业机器人关键技术及装备，2025/1-2027/12，180万，在研，课题负责人
11. 宁波市科创甬江2035重大专项，工厂化设施农业成套智能装备的研制， 2024/01-2026/12，70万，在研，课题负责人
12. 宁波市科创甬江2035重大专项，面向数字孪生城市的多尺度自适应城市建筑三维模型智能建模关键技术研究， 2024/01--2025/12，56万，在研，课题负责人
13. 宁波市科技创新2025重大专项，高性能微型处理器高精密LQFP框架关键技术研发， 2023/01--2025/12，90万，课题负责人
14. 宁波市“科创甬江”2035重大专项，高性能稀土永磁材料AI智能检测装备关键研究技术，2024/1-2026/12，200万，在研，课题负责人
15. 宁波市高新区科技攻关专项，智能化超广角眼底成像系统研究及产业化，2025/6-2027/6，400万，在研，课题负责人
16. 宁波市科技创新2025重大专项，机器人2D/3D视觉伺服控制与目标抓取技术及系统，2021/1-2023/12，175万，结题，课题负责人
17. 中国科学院区域重点研发（STS）项目，全景智能三维可视化预警调度管理系统，2019/01-2020/12，150万，结题，第二负责人
18. 中国科学院机器人与智能制造创新研究院自主项目，面向DJ的跨平台、多模态全向态势感知能力的空间监控关键技术研发，2019/05-2021/04，200万，结题，第二负责人
19. 宁波市科技创新2025重大专项，高性能微型处理器高精密LQFP框架关键技术研发，2023/03-2026/03，90/500万，在研，核心骨干
20. 国家863项目，虚实融合动态演化技术，2015/01-2017/12，45万，结题，核心骨干
21. 国家科技支撑计划项目，机器人用低成本全向视觉传感器及示范应用，2015/01-2017/12，352万，结题，核心骨干
22. 国家重点研发计划，无支撑粉末床增材制造工艺及装备航天应用示范，2023/6-2026/6，200万，在研，核心骨干
23. 浙江省重点研发计划项目，基于VR/AR的室内移动装置自主定位导航技术研究及应用-基于蜂窝式全景视觉的移动机器人定位导航技术研究，2018/01-2020/12，200万，结题，核心骨干
24. 中科院宁波材料所所长基金项目，红外测温与人脸识别系统，2020/03-2020/05，50万，结题，核心骨干
25. 企业横向项目，视觉监控系统项目产业化框架协议，2021/07-2029/07，400万，在研，第二负责人
26. 企业横向项目，智能综合安全技术研究中心，2017/01-2020/01，90万，已结题，第二负责人
27. 企业横向项目，全景三维可视化技术中心，2017/05-2020/05，90万，已结题，第二负责人
28. 企业横向项目，全景摄像机AI分析平台开发项目，2022/09-2022/12，5万，已结题，主持
29. 宁波市公益重点项目，蔬菜数字化栽培及智能装备的关键技术研发与应用，2022/05-2025/05，12/30万，在研，第二负责人

代表性论文

1. Zhaoming Luo,Gang Xu*,Wenjun Ouyang,Mingze Ni and Jiazong Wu,Leveraging Prior Knowledge and Synthetic Data for Elevator Anomaly Object Segmentation,Electronics,2025,14,1970
2. Xiang Zhou, Yue Cui , Gang Xu* , Hongliang Chen, Jing Zeng, Yutong Li and Jiangjian Xiao，Sleep Action Recognition Based on Segmentation Strategy， Journal of Imaging，2023,9,60
3. Quan Jiang, Zichen Huang, Gang Xu, Yingying Su. MIoP-NMS: Perfecting crops target detection and counting in dense occlusion from high-resolution UAV imagery.Smart Agricultural Technology，2023:100226
4. Jun Wu; Yiren Shen; Gang Xu.Integrating Fresnel Diffraction, Multi-Phase Retrieval, and Hyper-Chaos Mapping for Color Image Encryption. Applied Optics, 2022, 2022, 62(4):844-859
5. Mingyi Huang; Jun Wu; Zhiyong Peng; Xuemei Zhao; Gang Xu. 3D Browsing of Wide‐Angle Fisheye Images Under View‐Dependent Perspective Correction. Photogrammetric Record, 2022, 37(178):185-207
6. Mingyi Huang; Jun Wu; JiongLi Gao; Ying Luo; Gang Xu. Geo-Registration and Real-Time Correction of Multiple Fisheye Videos for Wide-Area Surveillance. SSRN Electronic Journal, 2022, 10(2139):301-324
7. Jing Zeng; Gang Xu*; Yunkuan Xu; Yue Cui; Yougang Zhao; Jiangjan Xiao. Time series based method for classification of plug seedlings. ISPDS2022,10.1109
8. Jianfei Ge, Chao Liu, Li Lv, Gen Xu, Gang Xu, Ningbo Bu, Jiangjian Xiao*.LiDAR and Camera Calibration Using Near-Far Dual Targets. 3rd International Conference on Advances in Computer Vision.CVIV 2021
9. Li Xian,Zhang Jiahuan,Wang Minjie,Xu Gang.Deep Generate Residual Similar Feature Networks for Image Super-Resolution. Journal of Physics: Conference Series. IOP Publishing,2019,1302(3):032036
10. Haolei Ru, Kuo Su, Jiangjan iao, Gen Xu, Kangkang Song ,Gang Xu，Jianfe Ge , Weicheng Huang , Meiping Sheng. Research status and development trend of magnetic adsorption wall climbing robot，RobCE 2023
11. Wu Jun，Xu Gang．Calibration of Digital Camera IOP Using Radial Alignment Constrain and Vanish Point Geometry．SPIE ICDIP 2011
12. Jun Wu, Gang Xu. One Valid Framework of Integrating Intensity Discontinuity and Edge Continuity for Image Straight-line Extraction．SPIE MIPPR 2009
13. 吴军，王刚，徐刚*. 结合计算全息与混沌的彩色图像加密方法[J]. 光学学报.2021(19)
14. 吴军，崔玥，赵雪梅，陈睿星，徐刚. SSA-PointNet++: 空间自注意力机制下的3D点云语义分割网络[J].计算机辅助设计与图形学学报.2021
15. 高炯笠，吴军，刘祺昌，徐刚.统筹图像变换与缝合线生成的无参数影像拼接[J]. 中国图象图形学报.2020(05)
16. 吴军，徐刚，董增来，汪杰君.引入灭点约束的TSAI两步法相机标定改进研究[J]. 武汉大学学报(信息科学版).2012 (01)

代表性专利

1. 徐刚;赵有港;肖江剑;许允款;曾晶.一种工件抓取和拨动干预方法及系统.ZL202110582191.7，发明专利,已授权
2. 徐刚;赵明;肖江剑;许根;王菊.一种轴承三维缺陷检测方法及系统.ZL202110439649.3. 发明专利,已授权
3. 徐刚;赵有港;崔玥;周翔;许允款;曾晶;肖江剑.工件识别和位姿检测方法、系统及机械臂的抓取控制方法. 202210732860.9. 发明专利,已授权
4. 徐刚;曾晶;许允款;周翔;崔玥;肖江剑.一种穴盘苗分类方法及系统.202210659950.X. 发明专利，实审
5. 徐刚;许允款;曾晶;崔玥;赵有港;肖江剑.钵苗剔补苗末端执行器及其剔补苗方法. 202210033570.5.发明专利，实审
6. 周翔;徐刚;肖江剑;陈红樑;曾晶;崔玥. 一种安防监控下的睡觉行为识别方法、系统与介质. 202310248079.9. 发明专利，实审
7. 徐刚；赵明；肖江剑；许根；王菊. 一种2D图像采集设备及轴承三维缺陷检测装置. 202120841937.7. 实用新型，已授权
8. 李现;陈帅印;王敏杰;徐刚; 肖江剑.一种基于超像素和卷积神经网络的图像超分辨方法. 发明专利,已授权
9. 周珣; 许根; 徐刚;肖江剑.一种360度全景摄像机. 201220509322.5.实用新型，已授权
10. 周珣; 许根; 徐刚; 肖江剑.一种360度全景摄像机. 201220694408.X.实用新型，已授权
11. 徐刚;许根;肖江剑.面阵相机. 202130220703.6. 外观专利，已授权
12. 徐刚;赵有港;肖江剑. 倾斜摄影相机. 202130278716.9.外观专利，已授权
13. 葛建飞；金肖枫；肖江剑；卜宁波；许根；徐刚；金天星；吕立. 多镜头组合影像和激光雷达点云的自动配准方法及其系统. 202310217423.8.发明专利.实审
14. 杨景翔；许根；黄业鹏；吕立；王菊；徐刚；肖江剑. 基于深度学习的监所行为规范检测装置及方法. PCT/CN2021/107746.PCT专利，实审

奖励荣誉:

1. 2025年度宁波市青年科技创新领军人才，2025年
2. 宁波市科学技术进步奖二等奖，2024年
3. 浙江省农业机械科学技术奖二等奖，2024年
4. 宁波市科学技术进步奖二等奖，2023年
5. 宁波市领军拔尖人才培养工程第三层次，2022年
6. 浙江省农业农村厅技术进步二等奖，2022年
7. 宁波市科学技术进步奖二等奖，2022年
8. 浙江省农业机械科学技术奖一等奖，2021年
9. 宁波市科学技术进步奖三等奖，2021年
10. 第三届中国研究生机器人创新设计大赛优秀指导老师，2021年

人才培养与招生：

• 培养理念：既引导学生探索学术前沿、发表高水平论文，也锤炼学生解决真实工程问题、完成技术原型开发能力。
• 招生信息：

1. 招生专业：计算机科学与技术、机械自动化、电子信息等相关专业。
2. 招生类型：每年招收硕士研究生2-3名，欢迎优秀博士后加盟。
3. 期望学生：诚邀对计算机视觉、人工智能、机器人抱有浓厚热情，具备扎实的数学、编程基础，拥有主动学习能力和强烈责任心的同学加入，我们将为每位成员提供清晰的科研路径、充足的计算资源和广阔的成长平台。

联系方式

邮箱：xugang@nimte.ac.cn
电话：15058851001
办公室：科南M839