本方向共有研究人员24名，其中江苏省”333工程”、“六大人才高峰”、“青蓝工程”等省级高层次人才5人次，江苏大学青年学术骨干2人。针对人工智能、多媒体计算等前沿技术问题，面向智能装备与公共安全应用领域，开展基础理论和应用技术研究，主要围绕大规模音视频内容理解分析、图像语义建模与分析、视觉语音情感分析、场景建模与深度图像处理等方面的理论与方法进行研究。在视频概念检测、自然环境下视觉语音内容分析、三维建模等方法上已形成特色。

近年来，承担国家自然科学重点、面上、青年基金13项，省部级项目10多项。主持研究成果获江苏省科技进步三等奖3项、机械工业联合会科学技术二等奖、三等奖2项。在IEEE/ACM Trans.、CVPR、 AAAI、ICCV、ACM MM等国内外权威杂志和会议上发表论文100余篇。获授权发明专利30余项。

近五年主要承担的国家级项目：

1） 联合基金项目/重点支持项目/NSFC-通用技术基础研究联合基金，“复杂环境下语音数据的说话人识别及关键词关联检索”，291万，2019.01-2022.12

2） 国家自然学科学基金（面上项目），“面向复杂环境的视觉语音群体情感感知与推理” ，68万，2022.01-2025.12

3） 国家自然学科学基金（面上项目），“面向城市视觉感知分析的可解释深度神经网络研究”，66万，2020.01-2023.12

4） 国家自然学科学基金（面上项目），“基于语义概念深度挖掘的视频复杂事件检测方法研究（61672268）”, 75万，2017.01-2020.12

5） 国家自然学科学基金（面上项目），“面向大规模视觉语音信号的复杂情感发现与分析方法研究（61672267）”, 74万，2017.01-2020.12

6） 国家自然学科学基金（面上项目），“基于稀疏表示和超图的视频事件语义分析方法研究（61170126）”, 55万，2012.01-2015.12

7） 国家自然学科学基金（面上项目），“面向移动视频点播的内容分析技术研究（61572240）”, 76万，2016.01-2019.12

8） 国家自然学科学基金（青年项目），“面向领域自适应语义分割的对比式表征学习研究”，30万，2023.01-2025.12

9） 国家自然学科学基金（青年项目），“基于语义知识迁移的弱监督多输出学习研究”，28万，2021.01-2023.12

10） 国家自然学科学基金（青年项目），“面向复杂事件分析的脑机模式协作循环神经网络研究（61806086）”, 28万，2019.01-2021.12

11） 国家自然学科学基金（青年项目），“面向大规模人脸标注的弱监督多视角谱聚类研究（61906077）”, 30万，2020.01-2022.12

12） 国家自然学科学基金（青年项目），“基于全局局部联合感知和渐进分组量化技术的多描述编码研究（61601202）”, 24.9万，2017.01-2019.12

13） 国家自然学科学基金（青年项目），“基于数据驱动和语义建模的多摄像机拓扑推演与行人再识别研究（61602215）”, 25万，2017.01-2019.12