刘袁缘，女，智能系副系主任，博士，副教授，博士生导师，“地大学者”青年拔尖人才，新加坡南洋理工大学访问学者（文勇刚院士团队），香港中文大学（深圳）机器人与人工智能研究院 客座副研究员。主要研究方向为机器学习与模式识别、计算机视觉，及其在情感计算、多模态交互、智慧交通等领域的应用。现为中国图象图形学会（CSIG）情感计算与理解专委会委员；CCF YOCSEF 武汉AC；CCF会员；IEEE会员。主持国家自然学基金青年项目、面上项目、武汉科技基础前沿项目、国防预研项目等科研项目10余项；以第1作者或通信作者在计算机视觉与多媒体领域顶级期刊和会议如 IJCV、TMM、 CVPR、ACM MM、PR、 TKDE、TGRS、TVCG、TOMM、CIKM、EMNLP等发表SCI论文40余篇；获得授权发明专利8项；软件著作权3目，出版学术专著和教材5本，一本入选中国优秀博士后文库；多次指导学生参加中国机器人大赛，获得全国一等奖、二等奖10余次。目前担任TKDE、TMM、IJCV、PR、CVPR、ECCV、ACM MM、AAAI、IJCAI、《计算机学报》等国际期刊和国际会议审稿人。

我的团队研究主页：https://cvlab-liuyuanyuan.github.io/

Research Area

My research interests fall into the areas of computer vision, deep learning, image and video understanding, etc. More specifically, I am interested in the following topics:

• Emotion  Computing including facial expression recognition, human-centric emotion analysis, emotion captioning, multimodal emotion recognition

• Image/Video understanding including scene segmentation, cross-domain object detection, and temporal action localization

• Deep Learning Methods and Applications including open-set learning, zero-shot/few-shot learning, and domain adaptation etc.

Teaching

· Deep Learning (Undergraduate course)

· Machine Learning (Undergraduate course)

· Machine Learning and Data Mining (Mastercourse)

Research Project 

•  跨模态智能情感计算关键技术研究，湖北省自然科学基金面上项目，2023.01~2025.12，在研，主持

•  可编程带内测量软件与集中控制器软件模块开发KZ21Z60117，GF开发-中国舰船研究设计中心，2022.01~2022.12，在研，主持

•  非约束条件下视频情感检测与识别方法研究62076227，国家自然科学基金面上项目 2021.01~2024.12，在研，主持

•  基于小样本学习的典型军事目标智能快速识别技术,  装备预研航天科工联合基金项目 2019.10~2020.11,    在研，主持
  

•  基于视频的智能情感计算关键技术与应用,  武汉市科技局基础前沿项目 2020.09~2022.12,  在研，主持

• 多噪声下基于深度增强随机森林的自发表情识别研究 61602429，国家自然科学基金青年项目 2017.01~2019.1220，结题，主持

•  面向多姿态和遮挡条件下的自发表情识别研究 2016M592406，中国博士后面上基金项目  2016.01~2017.12 ，结题，主持

•  红外视频中的人体行为识别、跟踪和预测研究 CUG160840，中央高校基本科研业务费专项资金 2016.01~2017.12 ， 结题，主持

• 严重事故放射性后果分析理论模型研究2018116353， 横向企业委托项目2018.01-2019.09，在研，主持

• 三角形网格上基于水平集方法的测地曲率流研究 61702467，国家自然科学基金青年项目 2018.01~2020.12      在研， 参与

• 多粒度时空对象复杂分析工作流可视化定制工具研发 2016YFB0502304，国家重点研发计划    2016.07~202106   在研， 参与

• 城市群经济区建设管理空间信息模型与应用集成标准规范研究2018361016，国家重点研发计划    2017.07~202106   在研， 参与

Publications

·  Yuanyuan Liu, Yuxuan Huang, Shuyang Liu, Yibin Zhan, Zijing Chen, Zhe Chen:
Open-Set Video-based Facial Expression Recognition with Human Expression-sensitive Prompting. ACM Multimedia 2024: 5722-5731 (CCF A)

·  Yuanyuan Liu,  Haoyu Zhang, Yibin Zhan, Zhijing Chen, Guanghao Ying, Lin Wei, Zhe Chen. Noise-Resistant Multimodal Transformer for Emotion Recognition. IJCV. 2024. (CCF A)

·  Yu Wang, Yuanyuan Liu*, Shunping Zhou, Chang Tang, Zhe Chen. Emotion-oriented Cross-modal Prompting and Alignment for Human-centric Emotional Video Captioning. IEEE TMM. 2024. (CCF B)

·  Leyuan Liu, Yuhan Li, Yunqi Gao, Changxin Gao, Yuanyuan Liu, Jingying Chen. VS: Reconstructing Clothed 3D Human from Single Image via Vertex Shift. CVPR. 2024. (CCF A)

·  Guanghao Yin, Yuanyuan Liu*, Tengfei Liu, Haoyu Zhang, Fang Fang, Chang Tang, Liangxiao Jiang."Token-disentangling Mutual Transformer for multimodal emotion recognition Engineering." Applications of Artificial Intelligence Volume 133, Part D, July 2024, Page 108348. (CCF C)

·  Fayong Zhang, Kejun Liu, Yuanyuan Liu*, Chaofan Wang, Wujie Zhou, Hongyan Zhang, Lizhe Wang. "Multi-target Domain Adaptation Building Instance Extraction of Remote Sensing Imagery with Domain-common Approximation learning." IEEE Trans. Geosci. Remote. Sens. 62: 1-16 (2024) (CCF B)

·  刘袁缘, 王超凡, 王文斌, 张浩宇, 罗忠文. 面向多种天气场景下目标检测的多域动态平均教师模型. 计算机辅助设计与图形学学报. 2024.01 (CCF A)

·  Haoyu Zhang, Yu Wang, Guanghao Yin, Kejun Liu, Yuanyuan Liu, Tianshu Yu: Learning Language-guided Adaptive Hyper-modality Representation for Multimodal Sentiment Analysis. EMNLP 2023: 756-767 （CCF B）

·  Yuanyuan Liu, Wenbin Wang, Chuanxu Feng, Haoyu Zhang, Zhe Chen*, Yibin Zhan. " Expression Snippet Transformer for Robust Video-based Facial Expression Recognition" Pattern recognition. 138: 109368 (2023). （CCF B，T1）

·  Yuanyuan Liu, Wenbin Wang, Yibin Zhan, Zhe Chen, Shaozhe Feng, Kejun Liu. “Pose-distentangled contrastive learning for self-supervised facial representation". In Proceedings of IEEE  CVPR, 2023.（CCF A 国际会议）

· Yuanyuan Liu, Jiyao Peng, Jiabei Zeng, Shiguang Shan, “Joint Spatial and Scale Attention Network for Multi-view Facial Expression Recognition”, Pattern recognition, 139: 109496 (2023).（CCF B，T1）

·  Yuanyuan Liu, Ning Zhou, Fayong Zhang, Wenbin Wang*, Yu Wang, Kejun Liu, Zhiyang Liu. "APSL: Action-positive Separation Learning for Unsupervised Temporal Action Localization." Information Sciences. 630: 206-221 (2023) （CCF B，T1）

·   Shunping, Zhou, Yuting Feng, Shengwen Li, Daoyuan Zheng, Fang Fang, Yuanyuan Liu, Bo Wan: DSM-Assisted Unsupervised Domain Adaptive Network for Semantic Segmentation of Remote Sensing Imagery. IEEE Trans. Geosci. Remote. Sens. 61: 1-16 (2023) (CCF B, T1)

·  Yuanyuan Liu, Wei Dai, Chuanxu Feng, Wenbin Wang, Guanghao Yin, Jiabei Zeng, and Shiguang Shan. 2022. MAFW: A Large-scale Multi-modal, Compound Affective Database for Dynamic Facial Expression Recognition in the Wild. In Proceedings of the 30th ACM International Conference on Multimedia (ACM MM ’22), October 10–14, 2022, Lisboa, Portugal. ACM, New York, NY, USA, 9 （CCF A 国际会议, ORAL汇报）

·  Wanjie Tao, Zhang-Hua Fu, Liangyue Li, Zulong Chen, Hong Wen, Yuanyuan Liu, Qijie Shen, Peilin Chen: A Dual Channel Intent Evolution Network for Predicting Period-Aware Travel Intentions at Fliggy. CIKM 2022: 3524-3533. (CCF B 国际会议)

· Wang Yu, Shunping Zhou, Yuanyuan Liu* et al. "ConGNN: Context-consistent cross-graph neural network for group emotion recognition in the wild." Information Sciences.  610: 707-724 (2022)（CCF B，T1）

·  彭济耀，刘子杨，冯传旭, 方芳, 罗忠文, 刘袁缘*, 覃杰."面向交通标志检测的尺度感知双向特征金字塔." 计算机辅助设计与图形学学报. (2022). （CCF A类中文期刊）

· Fang Fang, Daoyuan Zheng, Shengwen Li, Yuanyuan Liu, Linyun Zeng, Jiahui Zhang, Bo Wan: Improved Pseudomasks Generation for Weakly Supervised Building Extraction From High-Resolution Remote Sensing Imagery. IEEE J. Sel. Top. Appl. Earth Obs. Remote. Sens. 15: 1629-1642 (2022).

· Yuanyuan Liu, Chuanxu Feng, et al. Clip-aware Expressive Feature Learning for video-based facial expression recognitional Expression Recognition. Information Sciences. 598: 182-195 (2022). （CCF B，T1）

· Yuanyuan Liu, Wei Dai, Fang Fang, Yongquan Chen, Rui Huang, et al. "Dynamic multi-channel metric network for joint pose-aware and identity-invariant facial expression recognition." Information Sciences 578.(2021). （CCF B，T1）

· Yuanyuan Liu, Jiyao Peng, Jing-Hao Xue, Yongquan Chen, Zhang-Hua Fu, “TSingNet: Scale-aware and Context-rich Feature Learning for Traffic Sign Detection and Recognition in the Wild”, Neurocomputing, 2021, 447(4). （CCF C，T2）

· Fang Fang, Wu Kaishun, Liu Yuanyuan*, Li S, Wan B, Chen Y, Zheng D. A Coarse-to-Fine Contour Optimization Network for Extracting Building Instances from High-Resolution Remote Sensing Imagery. Remote Sensing. 2021; 13(19):3814. （T2）

· Yuanyuan Liu, Wenbin Wang, Fang Fang, Lin Zhou, Chenxing Sun, Ying Zheng, and Zhanlong Chen. "CscGAN: Conditional Scale-Consistent Generation Network for Multi-Level Remote Sensing Image to Map Translation" Remote Sensing 13, 2021, no. 10: 1936. （T2）

· Yuanyuan Liu, Ziyang Liu, Fang Fang, ZHanghua Fu, Zhanlong Chen, “Hierarchical Domain-Consistent Network for Cross-Domain Object Detection”, IEEE International Conference on Image Processing(ICIP),2021（CCF C）

· Fang Fang, Yu Yafang, Li Shengwen, Liu Yuanyuan et al. Synthesizing location semantics from street view images to improve urban land-use classification[J]. International Journal of Geographical Information Science, 2021, 35(9): 1802-1825. （T2）

· Yuanyuan Liu, Dingyuan Chen, Ailong Ma, Yanfei Zhong, Fang Fang, Kai Xu “A Multi-Scale U-Shaped CNN Building Instance Extraction Framework With Edge Constraint for High Spatial Resolution Remote Sensing Imagery”, IEEE Transaction on Geosciences and Remote Sensing (TGRS), 2020, 10.1109/TGRS.2020.3022410. （CCF B，T2）

· Yuanyuan Liu, Xiaohui Yuan, Xi Gong, Zhong Xie, Fang Fang, Zhongwen Luo,  “Conditional convolution neural network enhanced random forest for facial expression recognition”, Pattern Recognition, Volume 84, 2018, Pages 251-261,  （CCF B，T2）

· Yuanyuan Liu, Xinmei Li, Mulan Zhang, Fang Fang, Zhizhong Zeng. “Visual Focus of Attention and Spontaneous Smile Recognition based on Continuous Head Pose Estimation by Cascaded Multi-task Learning”, International Journal of Pattern Recognition and Artificial Intelligence, 2018.（CCF C，T4）

·  张发勇，李杏梅，刘袁缘*."基于多视角深度网络增强森林的表情识别" 计算机辅助设计与图形学学报. (2018). （CCF A类中文期刊）

·  Yuanyuan. Liu, Jiabei. Zeng, Shiguang. Shan, Zuo. Zheng, “Multi-Channel Pose-Aware Convolution Neural Networks for Multi-View Facial Expression Recognition”, proceeding of 13th IEEE International Conference on Automatic Face & Gesture Recognition (FG), 2018: 458-464. （CCF C）

· Yuanyuan Liu, Zhong Xie, Xiaohui Yuan, Jingying Chen, Wu Song. “Multi-level Structured Hybrid Forest for Joint Head Detection and Pose Estimation”. Neurocomputing, 266(11), 206-215 2017. （CCF C，T2）

· Yuanyuan Liu, Jingying Chen, Zhiming Su, et al., “Robust head pose estimation using Dirichlet-tree distribution enhanced random forests”, Neurocomputing, 2016, 173: 42-53. （CCF C，T2）

· Yuanyuan Liu, Jingying Chen, Mulan Zhang, Chuan Rao. “Student Engagement Study based on Multi-cue detection and recognition in an Intelligent Learning Environment”, Multimedia tools and applications, 2018, 1-27. （CCF C，T3）

· Xi Gong, Zhong Xie, Yuanyuan Liu*, Zhuo ZHENG. “Deep Salient Feature based Transfer Convolutional Neural Network for Scene Classification of Remote Sensing Imagery”, Remote Sensing 2018, 10(3), 410; （T2）

· Zhuo Zheng, Fang Fang, Yuanyuan Liu*, Gong Xi, Guo Mingqiang, Luo Zhongwen. “Joint Multi-scale Convolution Neural Network for Scene Classification of High Resolution Remote Sensing Imagery”. Acta Geodaetica et Cartographica Sinica, 2018, 47(5): 620-630. (in Chinese)  

· Yuanyuan Liu, Zhong Xie, Shunping Zhou, Zheng Liu, Weiming Wang, Xiuping Liu, Wei Rao. “Conditional Iteration Updated Random Forests for Unconstrained Facial Feature Location”, Journal of computer aided design and graphics, Vol.29, No.10, 1881-1890 , 2017. (in Chinese)

· Yuanyuan Liu, Zhong Xie, Xi Gong, Fang Fang. “Deep Transfer Feature Based Convolutional Neural Forests for Head Pose Estimation”, Pacific-Rim Symposium on Image and Video Technology (PRSIVT), Springer, Cham, 2017: 5-16. 

· Huiming Lv, Fang Fang, Yishi Zhao, Yuanyuan Liu, Zhongwen Luo“A Performance Evaluation Model for Taxi Cruising Path Recommendation System”，Pacific-Asia Conference on Knowledge Discovery and Data Mining (PACKDD) , 2017, 156-167. （CCF C）

· Yuanyuan Liu, Jingying Chen, Cunjie Shan, Zhiming Su, Pei Cai. “A Hierarchical Regression Approach for Unconstrained Face Analysis”. International Journal of Pattern Recognition and Artificial Intelligence, 2015, Vol. 29, No. 8. （CCF C，T4）

· Yuanyuan Liu, Chen Jingying, Yu Kan, et al. “Head pose estimation based on tree-structure cascaded random forests in unconstrained environment”, Journal of Electron and Information Technology, 2015, 37(3): 543-551. (in Chinese)

· Kan Yu, Yuanyuan Liu, Jiaqi Bao, et al. “Design of angle-tuned wedge narrowband thin film filter”, Optics & Laser Technology, 2014, 56(1):71–75.

· Kan Yu, Yuanyuan Liu, J Yin, et al. “A novel angle-tuned thin film filter with low angle sensitivity”, Optics & Laser Technology, 2015, 68:141–145.

· Jingying Chen, Nan Luo, Yuanyuan Liu, Leyuan Liu, Kun Zhang, Joanna Kolodziej, “A hybrid intelligence-aided approach to affect-sensitive e-learning”, Computing, Springer, 2014. 

· Yuanyuan Liu, Jingying Chen, Cunjie Shan. “Dirichlet-tree Distribution Enhanced Random Forests for facial feature detection”, IEEE International Conference on Image Processing (ICIP), 2014: 234-238.  （CCF C）

· Yuanyuan Liu, Leyuan Liu, Jingying Chen, et al. “Multi-person Visual Focus of Attention from Head Pose on a Natural Classroom”, International Conference on Pattern Recognition Applications and Methods (ICPRAM), 2016: 205-213.（CCF C）

· Yuanyuan Liu, Jingying Chen, Leyuan Liu, Yujiao Gong, Nan Luo. “Dirichlet-tree Distribution Enhanced Random Forests for Head Pose Estimation”, International Conference on Pattern Recognition Applications and Methods (ICPRAM), 2014: 87-95. （最佳学生论文提名）

Book publication

· 刘袁缘（独著）. 《复杂环境非约束图像人脸分析和场景识别》, 科学出版社,  2018. 入选中国博士后优秀文库，每年30部入选

· 刘袁缘（第一主编），李圣文，方芳等 《机器学习应用实战》, 科学出版社, 2022. 

· 刘袁缘（第一主编），周顺平等 《自然环境下头部姿态估计方法的研究与应用》, 中国地质大学出版社, 2022. 

· 刘郑，郭明强，刘袁缘 (第三主编) 《三维动态几何系统的设计、实现和教育应用研究》, 中国地质大学出版社, 2018. 

· 方芳，张剑波、李圣文、刘袁缘（第四主编）. 《数据结构与算法习题汇编》,中国地质大学出版社, 2022. 

Patents

• 2019, 一种人脸自发表情的识别方法及系统，2018-8-18至2037-3-15, 中国，2017101535252.

• 2018, 一种非约束环境中的人脸特征点定位方法及系统，2018-7-13至2036-9-21, 中国，2016 108465608.

• 2018,  一种面向小数据集的高分辨率遥感影像场景分类的方法，2018-5-18至2037-5-10, 中国，2017103254056. 

• 2019,  一种基于移动端的多视角人脸表情识别方法，2019-4-30, 中国，CN 109409222B. 

• 2020,  一融合多任务和多尺度卷积神经网络的人脸分析方法及系统，2020-11-05, 中国，CN109508654B. 

• 2022，基于U形CNN模型实现遥感图像的建筑实例掩模提取方法，2022-08-15，中国，ZL 201910211849.1

• 2022，一种面向复杂场景的域适应交通目标检测与识别方法，2022-06-24，中国，ZL 202011144693.3

Talent development 

• 2024年，指导研究生/本科生袁雨晨/王雨辰等获得中国机器人大赛3D目标识别国家一等奖；3D测量国奖二等奖

• 2023年，指导本科生崔嘉琪等获得中国机器人大赛3D测量国奖二等奖；3D目标识别国家三等奖；

• 2023年，指导研究生王文斌获得校优秀硕士论文

• 2023年，指导研究生王文斌获得校优秀硕士论文

• 2022年，指导本科生朱佳睿等获得中国机器人大赛3D目标测量，国家一等奖

• 2022年，指导本科生刘腾飞等获得中国机器人大赛3D目标识别，国家二等奖

• 2021年，指导研究生殷广豪获得研究生科报会二等奖等

• 2022年，指导本科生徐佳宜等获得校优秀学士论文

• 2022年，指导本科生彦博闻等获得校优秀学士论文

• 2022年，指导研究生刘子杨获得校优秀毕业生

• 2022年，指导研究生冯传旭获得校优秀硕士论文

• 2021年，指导研究生王文斌获得研究生科报会一等奖等

• 2021年，指导研究生彭济耀获得校优秀硕士论文

• 2021年，指导赵耀武等获得中国机器人大赛3D目标测量，国家一等奖

• 2021年，指导赵耀武等获得中国机器人大赛3D目标识别，国家二等奖

• 2020年，指导王超凡等获得中国机器人大赛3D目标测量，国家二等奖

• 2020年，指导张浩宇等获得中国机器人大赛3D目标识别，国家二等奖

• 2019年，指导毛昱昕等获得国家级大学生创新创业训练计划项目（精品项目），“基于GAN特征生成的零样本复杂场景识别与理解”，经费2万

• 2019年，指导研究生彭济耀获得学院研究生科报会三等奖

• 2019年，指导研究生代葳获得中国地质大学实验室指导基金

• 2019年，指导章财庆等国家级大学生创新创业训练计划项目, “复杂街景图像中基于深度度量网络的few-shot交通标志检测”，经费0.3万

• 2018年4月，周壮、汪浩 ，“2018中国工程机器人大赛暨国际公开赛”机器人移动项目双轮竞速赛（研究生组）、全国优胜奖

• 2018年4月，包晗、李世群、赵玮豪，“2018中国工程机器人大赛暨国际公开赛”机器人移动项目双轮竞速赛（本科生组）、全国二等奖

• 2018年4月，白思开、陈鼎新、潘鸿泽“2018中国工程机器人大赛暨国际公开赛”仿人竞速项目障碍赛（本科生组）、全国优胜奖

• 2018年8月，赵廷豪、耿振坤、余仲阳、盖涛，“MapGIS二次开发大赛（高级开发组）”、全国一等奖

• 2018年6月, 陈鼎元, 产学研《多任务深度学习下的遥感图像理解》二等奖

• 2018年6月, 王勋广, 产学研《基于深度学习的多视角表情识别》三等奖