电子邮件: xsh@ict.ac.cn
通信地址: 北京市海淀区中关村科学院南路6号中科院计算技术研究所
邮政编码: 100190
研究兴趣
主要在计算机应用方向从事人体运动建模仿真基础交叉研究,涉及计算机图形学、虚拟现实、人工智能。具体研究兴趣包括基于深度学习的运动捕获与运动行为理解、基于生成式模型的运动合成与运动控制、基于数字孪生的虚拟人建模,以及这些技术在增强现实、人形机器人等领域的应用。
个人履历
-
2015–现在,中国科学院大学,岗位教授;
2011–现在,中国科学院计算技术研究所,研究员;
2009–现在,中国科学院计算技术研究所,博士生导师;
2007–2008,Carnegie Mellon University,计算机学院机器人研究所,访问学者;
2004–2010,中国科学院计算技术研究所,副研究员;
2002–2003,中国科学院计算技术研究所,助理研究员;
1999–2002,中国科学院大学,软件与理论,工学博士;
1996-1999,中国科学院大学,应用数学,理学硕士;
1992-1996,四川师范大学,数学,理学学士。
科研项目
-
13. 国家重点研发工业软件重点专项“AR/MR 环境下的跟踪定位与编辑生成”;
12. 国家重点研发现代服务业重点专项“数字人智能生成及驱动关键共性算法”;
11. 国家重点研发课题“穿戴式冰雪运动装备运动风险和效能评价关键技术平台研究”;
10. 北京市自然科学基金-海淀原始创新联合基金重点研究专题项目“基于单目RGB-D图像视频的运动人体实时动态一体化三维重建”;
9. 中科院计算所-华为联合实验室项目“数字人的人脸动画技术合作项目”;
8. 国家自然科学基金课题“基于单目RGB/RGBD相机的身体运动和面部运动同步捕获方法研究”;
7. 国家科技支撑计划课题“国家应急演练仿真服务平台及应用示范”;
6. 三星公司项目“视频驱动的真实感Avatar表情克隆”;
5. 国家863课题“3D内容视觉获取技术及设备”;
4. 酒泉卫星发射中心课题“基于虚拟现实技术的航天测试发射仿真训练软件”;
3. 国家自然科学基金课题“风格化人体运动合成新方法研究”;
2. 国家自然科学基金课题“体现性格特征的语音驱动人脸动画合成新方法”;
1. 国家863课题“虚拟环境中基于物理特性的虚拟角色运动行为建模”等。
科研成果
研究奖励
9. 中国科学院计算技术研究所易方达金融科技奖教金(2022);
8. 中国科学院计算技术研究所曙光奖教金(2020);
7. 中国计算机学会科学技术奖技术发明一等奖(2018)“三维人体运动建模关键技术及应用”(排第一);
6. 教育部科学技术奖技术发明二等奖(2018)“人体运动捕获数据处理及重用技术”(排第二);
5. 中国仿真学会科学技术奖科技进步一等奖(2017)“数据驱动的人体运动建模仿真技术”(排第一);
4. 中国科学院计算技术研究所曙光奖教金(2017);
3. 军队科技进步二等奖(2012)“虚拟人技术及其在载人航天中的应用”(排第四);
2. 中国科学院计算技术研究所所长奖教金(2009);
1. 北京市科学技术奖一等奖(2006)“面向体育训练的三维人体运动模拟与视频分析系统”(排第四)。
代表论文
35. Lei Hu, Zihao Zhang, Chongyang Zhong, Boyuan Jiang, Shihong Xia. Pose-aware Attention Networkfor Flexible Motion Retargeting by Body Part. IEEE TVCG 30(8): 4792-4808 (2024).
34. Boyuan Jiang, Lei Hu, Shihong Xia. Probabilistic Triangulation for Uncalibrated Multi-View 3D Human Pose Estimation. ICCV 2023: 14804-148143.
33. Chongyang Zhong, Lei Hu, Zihao Zhang, Shihong Xia. AttT2M: Text-Driven Human Motion Generation with Multi-Perspective Attention Mechanism. ICCV 2023: 509-5194.
32. Zhenfeng Fan, Zhiheng Zhang, Shuang Yang, Chongyang Zhong, Min Cao, Shihong Xia. Unpaired Multi-domain Attribute Translation of 3D Facial Shapes with a Square and Symmetric Geometric Map. ICCV 2023: 20771-20781.
31. Zhenfeng Fan, Silong Peng, Shihong Xia. Towards Fine-grained Optimal 3D Face Dense Registration: an Iterative Dividing and Diffusing Method. IJCV 131(9): 2356-2376 (2023).
30. Yuhui Wen, Lin Gao, Hongbo Fu, FangLue Zhang, Shihong Xia, YongJin Liu. Motif-GCNs with Local and Non-Local Temporal Blocks for Skeleton-Based Action Recognition. IEEE TPAMI 45(2): 2009-2023 (2023).
29. Yongjing Ye, Libin Liu, Lei Hu, Shihong Xia. Neural3Points: Learning to Generate Physically Realistic Full-body Motion for Virtual Reality Users. CGF 41(8): 183-194 (SCA 2022).
28. Jie Yang, Lin Gao, Qingyang Tan, Yihua Huang, Shihong Xia, Yu-Kun Lai. Multiscale Mesh Deformation Component Analysis with Attention-Based Autoencoders. IEEE TVCG 29(2): 1301-1317 (2023).
27. Chongyang Zhong, Lei Hu, Zihao Zhang, Shihong Xia. Learning Uncoupled-Modulation CVAE for 3D Action-Conditioned Human Motion Synthesis. ECCV (21) 2022: 716-732.
26. Chongyang Zhong, Lei Hu, Zihao Zhang, Yongjing Ye, Shihong Xia. Spatio-Temporal Gating-Adjacency GCN for Human Motion Prediction. CVPR 2022: 6447-6456.
25. Shuyu Chen, Jia-Qi Zhang, Lin Gao, Yue He, Shihong Xia, Min Shi, Fanglue Zhang. Active Colorization for Cartoon Line Drawings. IEEE TVCG 28(2): 1198-1208 (2022)
24. Zihao Zhang, Lei Hu, Xiaoming Deng, Shihong Xia. Sequential 3D Human Pose Estimation Using Adaptive Point Cloud Sampling Strategy. IJCAI 2021: 1330-1337.
23. 胡磊, 张子豪, 夏时洪. 融合神经网络与数值计算的人体逆向运动学求解. 中国科学: 数学, 2021, 51(1): 137-152
22. Zhiyong Wang, Jinxiang Chai, Shihong Xia. Combining Recurrent Neural Networks and Adversarial Training for Human Motion Synthesis and Control. IEEE TVCG 27(1): 14-28 (2021)
21. Zhiyong Wang, Jinxiang Chai, Shihong Xia. Realtime and Accurate 3D Eye Gaze Capture with DCNN-Based Iris and Pupil Segmentation. IEEE TVCG 27(1): 190-203 (2021)
20. Lin Gao, Yu-Kun Lai, Jie Yang, Ling-Xiao Zhang, Shihong Xia, Leif Kobbelt. Sparse Data Driven Mesh Deformation. IEEE TVCG 27(3): 2085-2100 (2021)
19. Shu-Yu Chen, Wanchao Su, Lin Gao, Shihong Xia, Hongbo Fu. DeepFaceDrawing: Deep Generation of Face Images from Sketches. ACM TOG / SIGGRAPH, 2020,39 (4), 72: 1-72: 16
18. Zihao Zhang, Lei Hu, Xiaoming Deng, Shihong Xia. Weakly Supervised Adversarial Learning for 3D Human Pose Estimation from Point Clouds. IEEE TVCG/VR 26 (5), 1851-1859, 2020.
17. [美] 史蒂夫·J.戈特勒(Steven J.Gortler)著; 夏时洪, 高林译. 3D计算机图形学基础. 清华大学出版社. ISBN: 978-7-302-56105-7. 2020.
16. Mingze Yuan, Lin Gao, Hongbo Fu, Shihong Xia. Temporal Upsampling of Depth Maps Using a Hybrid Camera. IEEE TVCG 25(3): 1591-1602 (2019)
15. Yuhui Wen, Lin Gao, Hongbo Fu, Fang-Lue Zhang, Shihong Xia. Graph CNNs with Motif and Variable Temporal Block for Skeleton-based Action Recognition. AAAI 2019: 8989-8996.
14. Yuhui Wen, Hongshi Huang, Yuanyuan Yu, Si Zhang, Jie Yang, Yingfang Ao, Shihong Xia. Effect of tibia marker placement on knee joint kinematic analysis. Gait & Posture 60 (2018) 99-103.
13. Lin Gao, Jie Yang, Yiling Qiao, Yukun Lai, Paul Rosin, Weiwei Xu, Shihong Xia. Automatic unpaired shape deformation transfer. ACM TOG / SIGGRAPH Asia 2018, 37 (6), 237: 1-237: 15
12. Qingyang Tan, Lin Gao, Yu-Kun Lai, Shihong Xia. Variational Autoencoders for Deforming 3D Mesh Models. CVPR 2018: 5841-5850
11. Shuyu Chen, Lin Gao, Yu-Kun Lai, Paul L. Rosin, Shihong Xia. Real-time 3D Face Reconstruction and Gaze Tracking for Virtual Reality. IEEE VR 2018: 525-526
10. Shihong Xia, Zihao Zhang, Le Su. Cascaded 3D Full-body Pose Regression from Single Depth Image at 100 FPS. IEEE VR 2018: 431-438
9. Qingyang Tan, Lin Gao, Yu-Kun Lai, Jie Yang, Shihong Xia. Mesh-based Autoencoders for Localized Deformation Component Analysis. AAAI 2018: 2452-2459.
8. Kangkan Wang, Guofeng Zhang, Shihong Xia. Templateless Non-rigid Reconstruction and Motion Tracking with a Single RGB-D Camera. IEEE TIP 26(12): 5966-5979 (2017)
7. Shihong Xia, Lin Gao, Yu-Kun Lai, Ming-Ze Yuan, Jinxiang Chai. A Survey on Human Performance Capture and Animation. JCST 32(3): 536-554 (2017)
6. Xiaolei Lv, Jinxiang Chai, Shihong Xia. Data-driven Inverse Dynamics for Human Motion. ACM TOG / SIGGRAPH Asia 2016: 35(6), 163:1-163:12.
5. Lin Gao, Yu-Kun Lai, Dun Liang, Shu-Yu Chen, Shihong Xia. Efficient and Flexible Deformation Representation for Data-Driven Surface Modeling. ACM TOG, vol. 35(5), 158:1-17, 2016
4. Congyi Wang, Fuhao Shi, Shihong Xia, Jinxiang Chai. Realtime 3D eye gaze animation using a single RGB camera. ACM TOG / SIGGRAPH 2016: 35(4), 118:1-118:14
3. Shihong Xia, Congyi Wang, Jinxiang Chai, Jessica Hodgins. Realtime Style Transfer for Unlabeled Heterogeneous Human Motion. ACM TOG / SIGGRAPH 2015. 34(4), 119:1-119:10
2. 夏时洪, 王兆其. 虚拟人合成研究进展. 中国科学F辑, 2009, 39(5):483-498
1. 杨路, 夏时洪. 一类构造性几何不等式的机器证明. 计算机学报, 2003, 26 (07): 769-778