基本信息

夏时洪,博导,中国科学院计算技术研究所 研究员,计算机图形学与虚拟现实
电子邮件: xsh@ict.ac.cn
通信地址: 北京市海淀区中关村科学院南路6号中科院计算技术研究所
邮政编码: 100190
更多信息参见:http://humanmotion.ict.ac.cn/index.html 

研究兴趣

主要在计算机应用方向从事人体运动建模仿真基础交叉研究,涉及计算机图形学、虚拟现实、人工智能。具体研究兴趣包括基于深度学习的运动捕获与运动行为理解、基于生成式模型的运动合成与运动控制、基于数字孪生的虚拟人建模,以及这些技术在增强现实、人形机器人等领域的应用。

个人履历

   
-

2015–现在,中国科学院大学,岗位教授;

2011–现在,中国科学院计算技术研究所,研究员;

2009–现在,中国科学院计算技术研究所,博士生导师;

2007–2008,Carnegie Mellon University,计算机学院机器人研究所,访问学者;

2004–2010,中国科学院计算技术研究所,副研究员;

2002–2003,中国科学院计算技术研究所,助理研究员;

1999–2002,中国科学院大学,软件与理论,工学博士;

1996-1999,中国科学院大学,应用数学,理学硕士;

1992-1996,四川师范大学,数学,理学学士。

科研项目

   
-

14. 国家重点研发工业软件重点专项“AR/MR 环境下的跟踪定位与编辑生成”;

13. 国家重点研发现代服务业重点专项“数字人智能生成及驱动关键共性算法”;

12. 国家其他任务课题“深度伪造人脸视频持续检测关键技术”;

11. 国家重点研发课题“穿戴式冰雪运动装备运动风险和效能评价关键技术平台研究”;

10. 北京市自然科学基金-海淀原始创新联合基金重点研究专题项目“基于单目RGB-D图像视频的运动人体实时动态一体化三维重建”;

9. 中科院计算所-华为联合实验室项目“数字人的人脸动画技术合作项目”;

8. 国家自然科学基金课题“基于单目RGB/RGBD相机的身体运动和面部运动同步捕获方法研究”;

7. 国家科技支撑计划课题“国家应急演练仿真服务平台及应用示范”;

6. 三星公司项目“视频驱动的真实感Avatar表情克隆”;

5. 国家863课题“3D内容视觉获取技术及设备”;

4. 酒泉卫星发射中心课题“基于虚拟现实技术的航天测试发射仿真训练软件”;

3. 国家自然科学基金课题“风格化人体运动合成新方法研究”;

2. 国家自然科学基金课题“体现性格特征的语音驱动人脸动画合成新方法”;

1. 国家863课题“虚拟环境中基于物理特性的虚拟角色运动行为建模”等。

科研成果

   
研究奖励

9. 中国科学院计算技术研究所易方达金融科技奖教金(2022)

8. 中国科学院计算技术研究所曙光奖教金(2020)

7. 中国计算机学会科学技术奖技术发明一等奖(2018)“三维人体运动建模关键技术及应用”(排第一)

6. 教育部科学技术奖技术发明二等奖(2018)“人体运动捕获数据处理及重用技术”(排第二)

5. 中国仿真学会科学技术奖科技进步一等奖(2017)“数据驱动的人体运动建模仿真技术”(排第一);

4. 中国科学院计算技术研究所曙光奖教金(2017);

3. 军队科技进步二等奖(2012)“虚拟人技术及其在载人航天中的应用”(排第四)

2. 中国科学院计算技术研究所所长奖教金(2009)

1. 北京市科学技术奖一等奖(2006)“面向体育训练的三维人体运动模拟与视频分析系统”(排第四)

代表论文

32.  Lei Hu, Zihao Zhang, Chongyang Zhong, Boyuan Jiang, Shihong Xia. Pose-aware Attention Networkfor Flexible Motion Retargeting by Body Part. IEEE TVCG. in press.

31.  Zhenfeng Fan, Silong Peng, Shihong Xia. Towards Fine-grained Optimal 3D Face Dense Registration: an Iterative Dividing and Diffusing Method. IJCV. in press.

30.  Yongjing Ye, Libin Liu, Lei Hu, Shihong Xia. Neural3Points: Learning to Generate Physically Realistic Full-body Motion for Virtual Reality Users. CGF: 20 March 2023 https://doi.org/10.1111/cgf.14634 (Proceedings of SCA 2022).

29.  Yuhui Wen, Lin Gao, Hongbo Fu, FangLue Zhang, Shihong Xia, YongJin Liu. Motif-GCNs with Local and Non-Local Temporal Blocks for Skeleton-Based Action Recognition. IEEE TPAMI 45(2): 2009-2023 (2023).

28.  Jie Yang, Lin Gao, Qingyang Tan, Yihua Huang, Shihong Xia, Yu-Kun Lai. Multiscale Mesh Deformation Component Analysis with Attention-Based Autoencoders. IEEE TVCG 29(2): 1301-1317 (2023).

27.  Chongyang Zhong, Lei Hu, Zihao Zhang, Shihong Xia. Learning Uncoupled-Modulation CVAE for 3D Action-Conditioned Human Motion Synthesis. ECCV (21) 2022: 716-732.

26.  Chongyang Zhong, Lei Hu, Zihao Zhang, Yongjing Ye, Shihong Xia. Spatio-Temporal Gating-Adjacency GCN for Human Motion Prediction. CVPR 2022: 6447-6456.

25.  Shuyu Chen, Jia-Qi Zhang, Lin Gao, Yue He, Shihong Xia, Min Shi, Fanglue Zhang. Active Colorization for Cartoon Line Drawings. IEEE TVCG 28(2): 1198-1208 (2022)

24.  Zihao Zhang, Lei Hu, Xiaoming Deng, Shihong Xia. Sequential 3D Human Pose Estimation Using Adaptive Point Cloud Sampling Strategy. IJCAI 2021: 1330-1337.

23.  胡磊, 张子豪, 夏时洪. 融合神经网络与数值计算的人体逆向运动学求解. 中国科学: 数学, 2021, 51(1): 137-152

22.  Zhiyong Wang, Jinxiang Chai, Shihong Xia. Combining Recurrent Neural Networks and Adversarial Training for Human Motion Synthesis and Control. IEEE TVCG 27(1): 14-28 (2021)

21.  Zhiyong Wang, Jinxiang Chai, Shihong Xia. Realtime and Accurate 3D Eye Gaze Capture with DCNN-Based Iris and Pupil Segmentation. IEEE TVCG 27(1): 190-203 (2021)

20.  Lin Gao, Yu-Kun Lai, Jie Yang, Ling-Xiao Zhang, Shihong Xia, Leif Kobbelt. Sparse Data Driven Mesh Deformation. IEEE TVCG 27(3): 2085-2100 (2021)

19.  Shu-Yu Chen, Wanchao Su, Lin Gao, Shihong Xia, Hongbo Fu. DeepFaceDrawing: Deep Generation of Face Images from Sketches. ACM TOG / SIGGRAPH, 2020,39 (4), 72: 1-72: 16

18.  Zihao Zhang, Lei Hu, Xiaoming Deng, Shihong Xia. Weakly Supervised Adversarial Learning for 3D Human Pose Estimation from Point Clouds. IEEE TVCG/VR 26 (5), 1851-1859, 2020.

17.  [美] 史蒂夫·J.戈特勒(Steven J.Gortler)著; 夏时洪, 高林译. 3D计算机图形学基础. 清华大学出版社. ISBN: 978-7-302-56105-7. 2020.

16.  Mingze Yuan, Lin Gao, Hongbo Fu, Shihong Xia. Temporal Upsampling of Depth Maps Using a Hybrid Camera. IEEE TVCG 25(3): 1591-1602 (2019)

15. Yuhui Wen, Lin Gao, Hongbo Fu, Fang-Lue Zhang, Shihong Xia. Graph CNNs with Motif and Variable Temporal Block for Skeleton-based Action Recognition. AAAI 2019: 8989-8996.

14. Yuhui Wen, Hongshi Huang, Yuanyuan Yu, Si Zhang, Jie Yang, Yingfang Ao, Shihong Xia. Effect of tibia marker placement on knee joint kinematic analysis. Gait & Posture 60 (2018) 99-103.

13. Lin Gao, Jie Yang, Yiling Qiao, Yukun Lai, Paul Rosin, Weiwei Xu, Shihong Xia. Automatic unpaired shape deformation transfer. ACM TOG / SIGGRAPH Asia 2018, 37 (6), 237: 1-237: 15

12. Qingyang Tan, Lin Gao, Yu-Kun Lai, Shihong Xia. Variational Autoencoders for Deforming 3D Mesh Models. CVPR 2018: 5841-5850

11. Shuyu Chen, Lin Gao, Yu-Kun Lai, Paul L. Rosin, Shihong Xia. Real-time 3D Face Reconstruction and Gaze Tracking for Virtual Reality. IEEE VR 2018: 525-526

10. Shihong Xia, Zihao Zhang, Le Su. Cascaded 3D Full-body Pose Regression from Single Depth Image at 100 FPS. IEEE VR 2018: 431-438

9. Qingyang Tan, Lin Gao, Yu-Kun Lai, Jie Yang, Shihong Xia. Mesh-based Autoencoders for Localized Deformation Component Analysis. AAAI 2018: 2452-2459. 

8. Kangkan Wang, Guofeng Zhang, Shihong Xia. Templateless Non-rigid Reconstruction and Motion Tracking with a Single RGB-D Camera. IEEE TIP 26(12): 5966-5979 (2017)

7. Shihong Xia, Lin Gao, Yu-Kun Lai, Ming-Ze Yuan, Jinxiang Chai. A Survey on Human Performance Capture and Animation. JCST 32(3): 536-554 (2017)

6. Xiaolei Lv, Jinxiang Chai, Shihong Xia. Data-driven Inverse Dynamics for Human Motion. ACM TOG / SIGGRAPH Asia 2016: 35(6), 163:1-163:12.

5. Lin Gao, Yu-Kun Lai, Dun Liang, Shu-Yu Chen, Shihong Xia. Efficient and Flexible Deformation Representation for Data-Driven Surface Modeling. ACM TOG, vol. 35(5), 158:1-17, 2016

4. Congyi Wang, Fuhao Shi, Shihong Xia, Jinxiang Chai. Realtime 3D eye gaze animation using a single RGB camera. ACM TOG / SIGGRAPH 2016: 35(4), 118:1-118:14

3. Shihong Xia, Congyi Wang, Jinxiang Chai, Jessica Hodgins. Realtime Style Transfer for Unlabeled Heterogeneous Human Motion. ACM TOG / SIGGRAPH 2015. 34(4), 119:1-119:10

2. 夏时洪, 王兆其. 虚拟人合成研究进展. 中国科学F辑, 2009, 39(5):483-498

1. 杨路, 夏时洪. 一类构造性几何不等式的机器证明. 计算机学报, 2003, 26 (07): 769-778