三维计算机视觉理论与应用，包括大规模场景三维重建、智能机器人三维环境感知、场景三维语义建模等。

我们长期以来从事三维计算机视觉理论和应用的研究，尤其专注于基于图像的大规模场景三维感知研究。我们的研究属于应用基础研究，着力解决实际应用中存在的核心科学问题，目前我们已在计算机视觉、摄影测量、机器人等领域国际期刊和国际会议，如International Journal of Computer Vision、IEEE Trans. on Image Processing、ISPRS Journal of Photogrammetry and Remote Sensing、CVPR、ECCV、ICRA、IROS等发表论文60余篇。我们的图像三维建模和视觉定位系统曾获2018年中国图象图形学会科学技术二等奖、CVPR2019大时间跨度视觉定位竞赛冠军、CVPR2021三维矢量化BIM建模竞赛冠军等。

我们的研究工作获得了国家自然科学基金重点、国家自然科学基金面上、中科院人才专项、中科院国际合作等多个项目的资助，在三维视觉理论方法方面开展系统性探索；同时我们也得到国内主要AI企业的长期资助，在倾斜摄影城市三维建模、大规模室内场景重建与视觉定位、无人车高精地图构建等方面开展技术落地。

欢迎优秀的学生以各种方式（推免、考研、实习等）加入我们，详细信息可参见：招生说明

081104-模式识别与智能系统
081203-计算机应用技术

三维计算机视觉理论与应用，包括大规模场景三维重建、智能机器人三维环境感知、场景三维语义建模等。

2006-09--2010-04   上海交通大学   博士
2003-09--2006-03   西南交通大学   硕士
1999-09--2003-06   西南交通大学   学士

   

2019-10~现在, 中国科学院自动化研究所, 模式识别国家重点实验室, 研究员
2015-10~现在, 中国科学院大学, 人工智能学院, 岗位教授
2013-10~2019-10,中国科学院自动化研究所, 模式识别国家重点实验室, 副研究员
2010-05~2013-10,中国科学院自动化研究所, 模式识别国家重点实验室, 助理研究员

2021-01-01-今,中国图象图形学会三维视觉专委会, 常务委员
2021-01-01-今,中国电影美术学会虚拟空间专委会, 委员
2017-01-01-今,中国图象图形学学会机器视觉专委会, 委员
2016-01-01-今,中国计算机学会计算机视觉专委会, 委员

计算机视觉
计算机视觉 II

   

（1） Recalling Direct 2D-3D Matches for Large-Scale Visual Localization, IROS, 2021, 通讯作者
（2） Semantically Guided Multi-View Stereo for Dense 3D Road Mapping, ICRA, 2021, 通讯作者
（3） Complete and Accurate Indoor Scene Capturing and Reconstruction Using a Drone and a Robot, IEEE Sensors Journal, 2021, 通讯作者
（4） Incremental Rotation Averaging, International Journal of Computer Vision, 2021, 通讯作者
（5） Vectorized Indoor Surface Reconstruction from 3D Point Cloud with Multistep 2D Optimization, ISPRS Journal of Photogrammetry and Remote Sensing, 2021, 通讯作者
（6） Active Learning Based 3D Semantic Labeling From Images and Videos, IEEE Transactions on Circuits and Systems for Video Technology, 2021, 通讯作者
（7） View-graph Construction Framework for Robust and Efficient Structure-from-Motion, Pattern Recognition, 2020, 第 6 作者
（8） Graph-Based Parallel Large Scale Structure from Motion, Pattern Recognition, 2020, 通讯作者
（9） Urban Scene Vectorized Modeling Based on Contour Deformation, ISPRS International Journal of Geo-Information, 2020, 通讯作者
（10） 3D Semantic Labeling of Photogrammetry Meshes Based on Active Learning, ICPR, 2020, 第 2 作者
（11） Depth-map Completion for Large Indoor Scene Reconstruction, Pattern Recognition, 2020, 通讯作者
（12） Complete Scene Reconstruction by Merging Images and Laser Scans, IEEE Transactions on Circuits and Systems for Video Technology, 2020, 通讯作者
（13） Geographic, Geometrical and Semantic Reconstruction of Urban Scene from High Resolution Oblique Aerial Images, IEEE/CAA Journal of Automatica Sinica, 2019, 通讯作者
（14） Detail Preserved Surface Reconstruction from Point Cloud, Sensors, 2019, 通讯作者
（15） Active Semantic Labeling of Street View Point Clouds, International Conference on Multimedia and Expo, ICME 2019, 2019, 第 2 作者
（16） Efficient and Robust Large-Scale Structure-from-Motion via Track Selection and Camera Prioritization, ISPRS Journal of Photogrammetry and Remote Sensing, 2019, 第 2 作者
（17） Scalable Point Cloud Meshing for Image Based Large Scale 3D Modeling, Visual Computing for Industry, Biomedicine, and Art, 2019, 通讯作者
（18） Multi-source Data Based 3D Digital Preservation of Large-scale Ancient Chinese Architecture: A Case Report, Virtual Reality & Intelligent Hardware, 2019, 通讯作者
（19） Visual Localization Using Sparse Semantic 3D Map, ICIP, 2019, 第 2 作者
（20） Distributed Surface Reconstruction from Point Cloud for City-Scale Scenes, International Conference on 3D Vision, 2019, 第 2 作者
（21） Ground and aerial meta-data integration for localization and reconstruction: A review, Pattern Recognition Letters, 2019, 通讯作者
（22） Accurate and Efficient Ground-to-Aerial Model Alignment, Pattern Recognition, 2018, 通讯作者
（23） Ancient Chinese Architecture 3D Preservation by Merging Ground and Aerial Point Clouds, ISPRS Journal of Photogrammetry and Remote Sensing, 2018, 通讯作者
（24） Fine-Level Semantic Labeling of Large-Scale 3D Model by Active Learning, International Conference on 3D Vision, 2018, 第 2 作者
（25） Progressive Large-Scale Structure-from-Motion with Orthogonal MSTs, International Conference on 3D Vision, 2018, 第 2 作者
（26） Large Scale Urban Scene Modeling from MVS Meshes, European Conference on Computer Vision, 2018, 第 2 作者
（27） HSfM: Hybrid Structure-from-Motion, CVPR, 2017, 第 3 作者
（28） Accurate Mesh-based Alignment for Ground and Aerial Multi-view Stereo Models, ICIP, 2017, 第 2 作者
（29） CSfM: Community-based Structure from Motion, ICIP, 2017, 第 2 作者
（30） Tracks Selection for Robust, Efficient and Scalable Large-Scale Structure from Motion, Pattern Recognition, 2017, 第 2 作者
（31） High-Resolution Remote Sensing Data Classification over Urban Areas Using Random Forest Ensemble and Fully Connected Conditional Random Field, ISPRS International Journal of Geo-Information, 2017, 通讯作者
（32） Semantic labeling of High Resolution Aerial Images Using an Ensemble of Fully Convolutional Networks, Journal of Applied Remote Sensing, 2017, 通讯作者
（33） Variational Building Modeling from Urban MVS Meshes, International Conference on 3D Vision, 2017, 第 2 作者
（34） Batched Incremental Structure-from-Motion, International Conference on 3D Vision, 2017, 第 2 作者
（35） A New Visibility Model for Surface Reconstruction, CCCV, 2017, 第 2 作者
（36） Dynamic Graph Cuts in Parallel, IEEE Transactions on Image Processing, 2017, 第 2 作者
（37） Dynamic Parallel and Distributed Graph Cuts, IEEE Transactions on Image Processing, 2016, 第 2 作者
（38） Global Fusion of Generalized Camera Model for Efficient Large-Scale Structure from Motion, Science China: Information Sciences, 2016, 第 2 作者
（39） Automatic Building Extraction from Oblique Aerial Images, ICPR, 2016, 第 2 作者
（40） Robust Global Translation Averaging with Feature Tracks, ICPR, 2016, 第 2 作者
（41） Efficient Large-Scale Structure from Motion by Fusing Auxiliary Imaging Information, IEEE Transactions on Image Processing, 2015, 第 2 作者
（42） How to Select Good Neighboring Images in Depth-Map Merging Based 3D Modeling, IEEE Transactions on Image Processing, 2014, 第 1 作者
（43） Line Matching Across Views Based on Multiple View Stereo, Acta Automatica Sinica, 2014, 第 2 作者
（44） Fusion of Auxiliary Imaging Information for Robust, Scalable and Fast 3D Reconstruction, ACCV, 2014, 第 2 作者
（45） Accurate Multiple View 3D Reconstruction Using Patch Based Stereo for Large-Scale Scenes, IEEE Transactions on Image Processing, 2013, 第 1 作者
（46） A Screw Axis Identification Method for Serial Robot Calibration Based on the POE Model, Industrial Robot: An International Journal, 2012, 第 2 作者
（47） Depth-Map Merging for Multi-View Stereo with High Resolution Images, ICPR, 2012, 第 1 作者
（48） A Fast Approach to Deformable Surface 3D Tracking, Pattern Recognition, 2011, 第 2 作者
（49） Monocular 3D Tracking of Inextensible Deformable Surfaces under L2-Norm, IEEE Transactions on Image Processing, 2010, 第 1 作者
（50） Convex Optimization for Non-Rigid Stereo Reconstruction, IEEE Transactions on Image Processing, 2010, 第 1 作者
（51） Monocular 3D Tracking of Deformable Surfaces Using Sequential Second Order Cone Programming, Pattern Recognition, 2010, 第 1 作者
（52） An Optimization Based Framework for Human Pose Estimation, IEEE Signal Processing Letters, 2010, 第 2 作者
（53） Monocular Template-based Tracking of Inextensible Deformable Surfaces under L2-Norm, ACCV, 2009, 第 1 作者
（54） Efficient Multiple Faces Tracking Based on Relevance Vector Machine and Boosting Learning, Journal of Visual Communication and Image Representation, 2008, 第 1 作者
（55） Model Based Human Motion Tracking Using Probability Evolutionary Algorithm, Pattern Recognition Letters, 2008, 第 1 作者
（56） Deformable Surface Stereo Tracking-by-Detection Using Second Order Cone Programming, ICPR, 2008, 第 1 作者

   

（ 1 ） 基于深度图融合的大场景多视图立体重建研究, 主持, 国家级, 2015-01--2018-12
（ 2 ） 基于单目图像的变形体三维重建, 主持, 国家级, 2012-01--2014-12
（ 3 ） 中科院青促会, 主持, 部委级, 2015-01--2018-12
（ 4 ） 基于n阶引力场分类的构造方法, 参与, 国家级, 2013-01--2016-12
（ 5 ） 城市场景稠密三维重建, 主持, 院级, 2014-01--2015-12
（ 6 ） 多源图像数据配准与融合, 参与, 国家级, 2013-01--2015-12
（ 7 ） 三维场景中的高阶能量优化理论, 参与, 国家级, 2014-01--2018-12
（ 8 ） 场景三维信息获取与理解, 参与, 部委级, 2012-01--2016-12
（ 9 ） 手机图像桌面场景三维重建, 主持, 院级, 2017-01--2017-12
（ 10 ） 基于语义分析的大规模场景视觉重建关键技术研究, 参与, 国家级, 2017-01--2021-12
（ 11 ） 中国古建三维数字化保护中的天地图像融合问题研究, 主持, 国家级, 2019-01--2022-12
（ 12 ） 基于视觉的大规模室内场景重建与定位, 主持, 院级, 2019-01--2019-12
（ 13 ） 数字场景重建定制开发包模块授权使用协议, 主持, 院级, 2018-09--2019-06
（ 14 ） 基于手机图像采集的室内视觉定位技术, 主持, 院级, 2019-06--2021-06
（ 15 ） 室内外大规模场景三维语义矢量重建技术研发, 主持, 院级, 2019-01--2023-12
（ 16 ） 城市场景高精三维感知与高效语义理解, 主持, 部委级, 2021-01--2022-12
（ 17 ） 面向地理信息和定位导航的三维视觉系统与装备, 主持, 部委级, 2021-06--2023-06

已指导学生

时天欣  硕士研究生  081104-模式识别与智能系统  

王宝宇  硕士研究生  085211-计算机技术  

和颖  硕士研究生  085211-计算机技术  

吕明哲  硕士研究生  085208-电子与通信工程  

现指导学生

韩佳丽  硕士研究生  081104-模式识别与智能系统  

宋卓  硕士研究生  085211-计算机技术  

屠殿韬  硕士研究生  081104-模式识别与智能系统  

刘昱州  硕士研究生  081104-模式识别与智能系统  

张子钰  硕士研究生  081104-模式识别与智能系统