研究方向
图像视频内容分析与理解,多模态情感计算、人脸活体检侧、智能3D打印、社会媒体计算
个人简介
教授,博士生导师,北京工业大学信息科学技术学院智能媒体计算研究所所长。1991年、1994年、2003年分别于北京工业大学获得工学学士、工学硕士、工学博士学位。1994年至今在北京工业大学工作,2005年9月-12月英国伯明翰大学访问学者,2009年10月-2010年5月美国纽约州立大学布法罗分校访问学者。近年来承担科技部重点专项课题、国家自然科学基金、北京市科技计划项目等20余项,在IEEETAFFC、IEEE TCSVT、PR等发表论文100余篇,获授权发明专利40余项,获PRCV2021 最佳论文提名奖,ICCV2021 HTCVW 最佳论文。获北京市科学奖励2项,相关学会的科学技术奖励3项,入选2022年度首都最美巾帼奋斗者,2020年中国电子学会优秀科技工作者称号。中国图象图形学学会(CSIG)理事,中国计算机学会(CCF)杰出会员,CCF计算机视觉专委会常务委员兼副秘书长,CSIG视觉大数据专委会常务委员。《信号处理》、《中国科技论文信息卷》、《中国图象图形学报》编委,参与组织PRCV2019、NCIG2020、ChinaMM2020、PRCV2021、PRCV2022、ChinaMM2023等。
教育简历
1986.9-1991.7 北京工业大学 无线电技术专业 本科生
1991.7-1994.4 北京工业大学 金属材料热处理专业 硕士生
1999.9-2003.7 北京工业大学 模式识别与智能系统专业 博士生
工作履历
1994.4-1996.4 北京工业大学 无线电技术系 助教
1996.4-2001.7 北京工业大学无线电技术系/电子信息与控制工程学院 讲师
2001.7-2008.12 北京工业大学电子信息与控制工程学院 副教授
2005.9-2005.12 英国伯明翰大学 访问学者
2008.12至今 北京工业大学电子信息与控制工程学院/信息学部/信息科学技术学院 教授
2009.10-2010.12 美国纽约州立大学布法罗分校 访问学者
2012.1-2016.8 北京工业大学电子信息与控制工程学院副院长
2016.10-2017.10 北京工业大学研究生院副院长
学术兼职
1. 2021.06-至今 北京图象图形学学会 常务理事兼副秘书长
2. 2021.01-至今 中国计算机学会计算机视觉专委会 常务委员兼副秘书长
3. 2021.11-至今 中国图象图形学学会视觉大数据专委会 常务委员
4. 2020.12-至今 中国图象图形学学会 理事
5. 2020.12-至今 中国图象图形学报 编委
6. 2021.01-至今 信号处理 编委
7. 2015.06-至今 中国科技论文 信息科学(卷) 编委
8. 2017.08 – 2018.12 中国工程院“中国3D打印材料及应用发展战略研究”咨询项目设备组 成员
课程教学
本科生教学:新生研讨课、数字图像处理(双语)等
研究生教学:数字图像处理(硕)、图像处理技术新进展(硕博)
科研项目
1.科技部国家重点研发计划项目课题: 自适应闭环恒流技术及室内实验研究,课题负责人,2016.7-2020.12
2.国家自然科学基金重点项目:知识驱动的复杂场景多模态语义理解理论与方法. (合作单位负责人),2023.1-2027.12
3.国家自然科学基金面上项目:融合运动模式和群体交互特征的体育视频语义事件识别(项目负责人),2019.1-2023.12
4.北京市自然科学基金-北京市教委联合资助重点项目:大尺寸面曝光快速成型关键技术和系统(项目负责人),2020.1-2023.12
5.北京市自然科学基金-北京市教委联合资助重点项目:基于多模态数据的广义分层二部图推荐算法(项目负责人),2016.1-2018.12
6.北京市自然科学基金京津冀基础研究项目:融合智能信息处理的大尺度面曝光3D打印关键技术研究(项目负责人),2017.7-2019.7
荣誉和获奖
1.多光源可调节的面曝光 3D 打印关键技术及应用,北京市科学技术奖技术发明奖(排名第一),2022
2.面向3D打印的多光源自主融合和模型适配控制方法,中国图象图形学学会技术发明奖(排名第一),2020
3.举重运动员技术快速诊断系统的研究与建立,中国体育科学学会科学技术奖(排名第二),2014
4.电子信息工程拔尖创新应用型人才培养体系的构建与实践,北京市高等教育教学成果奖(排名第五),2013
5.基于鲁棒多目标实时定位识别技术的斯诺克比赛支持系统(又称中国鹰眼),中国电子学会电子信息科学技术奖(排名第一),2011
6.新时期北京市流动人口管理,北京市科学技术进步奖(排名第四),1999
7.首都最美巾帼奋斗者,2022。
9.北京市中青年骨干教师,2006
10. ICCV 2021 HTCVW最佳论文奖(排名第三,通信作者)
11.Attribute-level interest matching network for personalized recommendation, PRCV2021最佳论文提名奖(排名第四),2021。
12.北京工业大学优秀硕士学位论文指导教师(2022、2020等)。
代表性研究成果
1.智能3D打印。将智能信息处理技术与3D打印技术深度融合,解决3D打印中的挑战性难题。针对DLP面曝光3D打印面临的“打不大”、“打不好”的挑战,提出了多源拼接的大尺寸打印、光照均匀的高质量打印、模型适配的高质量打印等创新方法,在成型精度与已有产品相当的情况下,成型平面尺寸提升30%。相关成果发表学术论文20余篇,获授权发明专利10余项,得到领域资深专家的正面评价,获北京市技术发明二等奖、中国图象图形学学会技术发明二等奖。院士任组长的项目鉴定专家组认为:项目整体成果达到国内先进水平,光照均匀化高质量打印方法达到国际领先水平。相关成果服务于中科院化学所、北京十维科技有限公司等,取得经济效益1850万,助力我国3D打印材料研发和航空发动机零部件制造。提出了强度保持的多方向混色FDM3D打印技术。创新性地提出一种基于全局迭代优化的模型分割算法,以无碰撞、少支撑和少分割块数为目标,将模型分割和打印顺序规划问题描述为对有序分割序列的优化调整问题,实现满足无碰撞约束条件下且支撑尽可能少的模型分割及打印路径规划。浙江大学谭建荣院士在论文中肯定了我们算法可以使用最少支撑结构打印模型,CAD领域国际知名专家Wenfeng Lu教授对我们提出的通过最优求解进行模型分割的思想给予正面评价。
2.融合运动模式和关系推理的群体行为识别。提出运动模式和关系推理相结合的研究思路。将群体和全局运动模式、全局和局部运动模式相结合用于群体行为识别,平均识别精度达到国际先进水平。探索通过不同尺度的关系推理,提升群体识别性能。相关成果在PR、ACM MM、IEEE TCSVT等国内外高水平期刊及会议上发表论文20余篇,其中解耦全局和局部运动的思想得到新加坡南洋理工大学、韩国成均馆大学研究者的肯定。研发的“智能冰壶瞄准偏差预测及运动轨迹自动显示系统”助力国家轮椅冰壶对获得2022北京冬残奥运动会金牌,研发的举重杠铃轨迹自动跟踪系统服务于国家队举重运动员训练,相关成果获中国体育科学学会科学技术奖二等奖,视频多目标自动定位方法服务于Snooker顶级赛事电视转播,获中国电子学会电子信息技术奖三等奖。
3.基于人脸的安全身份认证。面向安全在线身份认证,提出了基于人脸的模糊金库方法和基于人脸特征的秘钥生成密码系统。前者利用密钥和转换后的模板实现模糊金库编码,然后用数字签名对模糊金库进行加密。后者利用128位二进制向量对人脸特征进行编码组成密钥,并用Reed-Solomon算法生成错误校正码。针对基于统一真假判别特征方法没有充分利用假体攻击的问题,创新性地提出从各种假体攻击中学习区分活体人脸固有线索的研究思路。这种学习模式受假体类内差异的影响较小,特征表达更准确。相关成果在IJCB等国际期刊及会议发表学术论文20余篇,获ICCV HTCVW最佳论文奖,被印度、乌克兰等国家的学者引用。
4.图像情感分类.
围绕基于情感相似度的图像推荐,开展图像情感分析和社交媒体推荐研究。考虑到不同图像区域对情感分析的贡献不同,将全局和局部有机结合提升了情感分析性能;针对情感类别概念抽象、情感标签标注困难等挑战,提出一种基于语言监督范式的图像情感分类方法,利用图像文本语义对齐预训练模型CLIP,融合情感概念和实体信息,提供了一个简单但有效的方法SimEmotion,在多个广泛使用的数据集上的实验结果大幅超越了先前的最优方法。相关工作在情感计算领域顶级期刊IEEE TAFFC等发表论文10余篇,得到多位IEEE Fellow的正面评价。
5.社会媒体计算
为探索用户和物品的同构多阶邻域信息,挖掘其中隐含的协同信号,缓解个性化推荐中的交互稀疏问题。提出基于孪生同构图的动态匹配推荐模型SGDM,建立双通道的同构孪生网络,挖掘多阶同构邻域信息进行嵌入学习。同时引入了动态嵌入传播层,为候选用户-物品动态建立嵌入表达,实现动态匹配推荐。相关工作在PR等期刊发表论文20余篇,获PRCV2021 最佳论文提名奖,受到新加坡国立大学何向南、香港科技大学Chi-wing Wong等领域专家关注。
代表性论文论著
[1]. Deng Sinuo, Wu Lifang, Shi Ge#. Simple but Powerful, a Language-Supervised Method for Image Emotion Classification. IEEE Transactions on Affective Computing, 2022.DOI: 10.1109/TAFFC.2022.3225049 (JCR Q1)
[2]. Lifang Wu, Xianglong Lang, Ye Xiang, Cangwen Chen, Zu Li and Zhuming Wang, Active Spatial Positions Based Hierarchical Relation Inference for Group Activity Recognition. IEEE Transactions on Circuits and Systems for Video Technology. 2023, vol. 33, no. 6, pp. 2839-2851. (JCR Q1)
[3]. Wu Lifang, Yang Zhou, Jian Meng#, Shen Jialie, Yang Yuchen, Lang Xianglong. Global motion estimation with iterative optimization-based independent univariate model for action recognition, Pattern Recognition, vol.116, pp. 107925, 2021. (JCR Q1)
[4]. Wu Lifang, Liu Zechao, Guan Yupeng, et al. Visual presentation for monitoring layer-wise curing quality in DLP 3D printing. Rapid Prototype Journal, vol. 27, no. 10, pp. 1776-1790, 2021. (JCR Q2)
[5]. Yuchen Yang, Ye Xiang, Shuaicheng Liu, Lifang Wu#, Boxuan Zhao, and Bing Zeng. GLM-Net: Global and Local Motion Estimation via Task-Oriented Encoder-Decoder Structure. ACM International Conference on Multimedia. pp.4211-4219, 2021. (CCF A类会议)
[6]. Jian Meng, Guo Jingjing, Zhang Chenlin, Jia Ting, Wu Lifang. Yang Xun, Huo Lina. Semantic manifold modularization-based ranking for image recommendation, Pattern Recognition, vol.120, pp. 108100, 2021. (JCR Q1)
[7]. Lifang Wu,Zhou Yang,Jiaoyu He,Meng Jian#,Yaowen Xu,Dezhong Xu and Chang Wen Chen , Ontology based global and collective motion patterns for event classification in basketball videos, IEEE Transactions on Circuits and Systems for Video Technology, vol.30, no.7, pp. 2178- 2190, 2020. (JCR Q1)
[8]. Zhuming Wang, Yaowen Xu, Lifang Wu#, Hu Han, Yukun Ma and Guozhang Ma. Multi-Perspective Features Learning for Face Anti-Spoofing[C]. 2021 IEEE/CVF International Conference on Human Centered Computer Vision Workshops, 2021: 4099-4105 (Best Paper)