人机交互技术，多模态大模型与AI智能体，多模态融合可视分析，视频智能处理

草图用户界面，多通道融合交互技术，可视媒体计算

人机信任与接管，智能座舱自然人机交互技术

围绕自然用户界面的基础理论、关键技术及其在典型领域的应用展开研究，在笔和草图交互、多模态大模型与AI智能体、多模态融合可视分析、人机信任与协同、认知计算、可视媒体智能处理方法等方面进行了深入探索并取得了一些突破性成果。

主持和作为课题骨干参与国家级、省部级课题30余项, 在IEEE TVCG 、IEEE TMM、IEEE  TIP、IEEE TAC、CVPR、ECCV、ICCV、AAAI、IJCAI、IEEE VIS等国际著名期刊和会议上发表论文60余篇,申请国家发明专利20余项。入选2012年中国科学院软件研究所杰出青年人才计划项目支持。相关成果获得2019“牛顿奖”中国奖（Newton Prize 2019,牛顿奖是世界范围的重要奖项之一，旨在通过英国科学与创新伙伴关系帮助解决全球发展挑战，颁发给推动经济发展和社会福利的最佳研究或创新）；获2015北京市科学技术一等奖。相关成果实现落地应用，获2024年度华为公司级优秀合作项目奖（全球遴选，前TOP1.8）；获2016中国科学院朱李月华优秀教师奖。获2021、2024、2026年中国科学院软件研究所优秀导师荣誉称号,指导学生获得北京市优秀毕业生、中科院院长奖。

   

083500-软件工程
081203-计算机应用技术

2000-07--2003-07 中国科学院软件研究所 博士
1997-07--2000-07 山东大学计算机科学与技术系 硕士
1993-07--1997-07 山东大学计算机科学与技术系 学士

2013-12--今 中国科学院软件研究所 研究员
2015-10--2015-11 Northwestern University,USA  Visiting scholar
2008-10--2013-12 中国科学院软件研究所 副研究员
2004-12--2006-02 美国国家科学院Naval Postgraduate School Research Associate
2003-07--2008-10 中国科学院软件研究所 助理研究员

人机交互
科学前沿进展名家系列讲座IV-279
草图用户界面

   

Haoxiang Hu; Yaokun Li; Zeyuan Huang; Cangjun Gao; Qiang He; Qingkun Li; Xiaoming Deng; Cuixia Ma*; Yu-Kun Lai; Yong-Jin Liu; Hongan Wang. Diagram2Structure: Unlocking LLMs' Diagram Comprehension through DiagramDiff, an Offline Diagram Structuring Framework. Proceedings of the IEEE/CVF Conference on Computer Vision and Pattern Recognition (CVPR), 2026. June 3-7，2026，Denver，Colorado，USA

Ran Zuo; Haoxiang Hu; Chenxi Pei; Yanxuan Liu; Wenwen Qiang; Fang Liu; Xiaoming Deng; Cuixia Ma*; Yong-Jin Liu. SketchRevive: Fine-Grained Pixel-to-Vector Sketch Completion with Diffusion-Prior-Guided Multimodal LLMs. Proceedings of the IEEE/CVF Conference on Computer Vision and Pattern Recognition (CVPR), 2026. June 3-7，2026，Denver，Colorado，USA

Zeyuan Huang, Cangjun Gao, Yaxian Shan, Haoxiang Hu, Qingkun Li, Xiaoming Deng, Cuixia Ma, Yu-Kun Lai, Yong-Jin Liu, Feng Tian, Guozhong Dai, and Hongan Wang. SketchGPT: A Sketch-based Multimodal Interface for Application-Agnostic LLM Interaction. Proceedings of the 38th Annual ACM Symposium on User Interface Software and Technology (UIST' 2025), BUSAN，KOREA，SEP.28^th-OCT. 1^st ,2025

Yonghao Zhang, Qiang He, Yanguang Wan, Yinda Zhang, Xiaoming Deng, Cuixia Ma,  Hongan Wang. DiffGrasp: Whole-Body Grasping Synthesis Guided by Object Motion Using a Diffusion Model. Association for the Advancement of Artificial Intelligence, AAAI 2025

 Zeyuan Huang, Cangjun Gao, Haiyan Wang, Xiaoming Deng, Yu-Kun Lai, Cuixia Ma, Sheng-feng Qin, Yong-Jin Liu, and Hongan Wang.SpeciFingers: Finger Identification and Error Correction on Capacitive Touchscreens. Proc. ACM Interact. Mob. Wearable Ubiquitous Technol. 8, 1, Article 8 (March 2024).

Haoxiang Hu, Cangjun Gao, Yaokun Li, Xiaoming Deng, Yu-Kun Lai, Cuixia Ma, Yong-Jin Liu, Hongan Wang. SpaceGTN: A Time-Agnostic Graph Transformer Network for Handwritten Diagram Recognition and Segmentation. Association for the Advancement of Artificial Intelligence, AAAI 2024

Zeyuan Huang, Qiang He, Kevin Maher,Xiaoming Deng, Yu-Kun Lai,Cuixia Ma, QIN Shengfeng, Yong-Jin Liu, Hongan Wang . SpeechMirror: A Multimodal Visual Analytics System for Personalized Reflection of Online Public Speaking Effectiveness . 2023 IEEEVIS , Melbourne, Australia, 22-27 October

Ran Zuo，Xiaoming Deng，Keqi Chen，Zhengming Zhang，Yukun Lai，Fang Liu，Cuixia Ma，Hao Wang，Yongjin Liu，Hongan Wang . Fine-Grained Video Retrieval with Scene Sketches . IEEE Transactions on Image Processing[J] , 2023 , 32 : 3136-3149

Fang Liu, Xiaoming Deng, Changqing Zou, Yu-Kun Lai, Keqi Chen, Ran Zuo, Cuixia Ma, Yong-Jin Liu, Hongan Wang. SceneSketcher-v2: Fine-Grained Scene-Level Sketch-Based Image Retrieval using Adaptive GCNs. IEEE Transactions on Image Processing, Digital Object Identifier: 10.1109/TIP.2022.3175403.

Kevin Maher, Zeyuan Huang, Jiancheng Song, Xiaoming Deng, Yu-Kun Lai, Cuixia Ma, Hao Wang, Yong-Jin Liu, Hongan Wang. E-ffective: A Visual Analytic System for Exploring the Emotion and Effectiveness of Inspirational Speeches. IEEE Transactions on Visualization and Computer Graphics. 28(1): 508-517 (2021).

Cuixia Ma, Jiancheng Song, Qian Zhu, Kevin Maher, Zeyuan Huang, Hongan Wang. EmotionMap: Visual Analysis of Video Emotional Content on a Map. Journal of Computer Science and Technology(JCST), 2020, 35: 576-591.

Xiaobing Du, Cuixia Ma, Guanhua Zhang, Jinyao Li, Yu-Kun Lai, Guozhen Zhao, Xiaoming Deng, Yong-Jin Liu and Hongan Wang. An Efficient LSTM Network for Emotion Recognition from Multichannel EEG Signals, IEEE Transactions on Affective Computing, 2020.

Fang Liu, Changqing Zou, Xiaoming Deng, Ran Zuo, Yu-Kun Lai, Cuixia Ma, Yong-Jin Liu, Hongan Wang. SceneSketcher: Fine-Grained Image Retrieval with Scene Sketches. European Conference on Computer Vision (ECCV), pp. 718-734. Springer, Cham, 2020.

Fang Liu, Xiaoming Deng,Yukun Lai, Yongjin Liu, Cuixia Ma, Hongan Wang.SketchGAN: Joint Sketch Completion and Recognition with Generative Adversarial Network. CVPR 2019, 2019/6/16-2019/6/20,Long Beach, California, USA

Cuixia Ma, Yongjin Liu, Guozhen Zhao, Hongan Wang. Visualizing and Analyzing Video Content with Interactive Scalable Maps. IEEE Transactions on Multimedia, 2016, 18(11):1-13.

Yong-Jin Liu, Cuixia Ma* , Guozhen Zhao, Xiaolan Fu, Hongan Wang, Guozhong Dai, Lexing Xie (2016) An Interactive SpiralTape Video Summarization. IEEE Transactions on Multimedia, 2016, 18(7):1-14.

Cuixia Ma，Yang Guo，Hongan Wang. VideoMap：An Interactive and Scalable Visualization for Exploring Video Content. the 4th international conference on Computational Visual Media (CVM 2016)，Apr 6 to Apr 8, 2016,  Cardiff University, UK.

Yongjin Liu，Cuixia Ma，Qiufang Fu，Xiaolan Fu，Shengfeng Qin，Lexing Xie，A Sketch-based Approach for Interactive Organization of Video Clips，ACM Transactions on Multimedia Computing, Communications and Applications.，2014，11（1 ）

Cuixia Ma，Yongjin Liu，Hongan Wang，Dongxing Teng，Guozhong Dai，Sketch-Based Annotation and  Visualization in Video Authoring，IEEE Transactions on  Multimedia，2012，14（4）：1153-1165

Cuixia Ma，Yongjin Liu，Haiyan Yang，Dongxing Teng，Hongan Wang，Guozhong Dai，KnitSketch: A Sketch Pad for Conceptual Design of 2D Garment Patterns，IEEE Transactions on Automation Science and Engineering，2011，8（2）：431-437  

1、科技部科技基础资源调查专项，2026/1- 2029/12，子任务负责人

2、重庆市技术创新与应用发展专项重大项目，2023/12/10- 2026/12/09，9000万，负责人

3、中国载人航天工程项目，2024/12/- 2027/10，负责人

4、国家自然科学基金面上项目，2023/01-2026/12、负责人

5、国家自然科学基金面上项目，2019/01-2022/12、负责人

6、牛顿基金，Newton Prize Project，2020/08-2021/12，负责人

7、BRITISH COUNCIL， International cooperation projects，2023/01/01-2025/03/31，中方负责人

8、北京市自然科学基金重点项目，2023/01-2025/12，课题负责人

9、北京市自然科学基金面上项目，2021/01-2023/12，负责人

10、国家重大研发计划项目-“科技冬奥“重点专项-课题,  2021-08 - 2022-12，主要参加人

11、国家自然科学基金面上项目，2012/01-2015/12，负责人 

12、国家自然科学基金青年基金项目，2008/01-2010/12，负责人。

13、国家自然科学基金重点支持项目，2015/01-2018/12，主要参加人。

14、中国科学院软件研究所杰出青年人才计划项目，2012/01-2015/12，负责人 

15、教育部留学回国人员科研启动基金，2008/09-2009/12，负责人