网络多媒体内容理解与安全：伪造图像识别、特定视频内容识别、合成图像/视频识别、模型加速与蒸馏等

图像与视频内容理解：智能成像（ISP）、跨模态内容理解与检索、图像视频文字描述等

科研思路：针对实际工程应用中的技术难题凝练科学问题进行研究，研究成果进行论文发表的同时，能够进一步指导实际工程应用。这样的论文才言之有物，才具有生命力。

招收致力于在视频内容理解、网络多媒体内容安全领域理论研究和关键技术突破的研究生。希望你有扎实的数学和编程基础、踏实肯干的精神和乐观积极的心态。

081203-计算机应用技术
081104-模式识别与智能系统

网络多媒体内容理解与安全
图像视频内容理解

   

2018-11~现在, 中国科学院自动化研究所, 研究员
2013-11~2018-10,中国科学院自动化研究所, 副研究员
2011-07~2013-10,中国科学院自动化研究所, 助理研究员
2009-07~2011-06,中国科学院自动化研究所, 博士后（导师：胡卫明研究员）

2019-08-30-今,人民网技术委员会, 委员
2015-12-31-2018-12-31,国际SCI期刊Neurocomputing的Associate Editor,
2015-11-17-2020-11-17,中国人工智能学会智能服务专委会委员,

   

（1） Anisotropic Convolution for Image Classification, IEEE TIP, 2020, 通讯作者
（2） Web Objectionable Video Recognition Based on Deep Multi-Instance Learning with Representative Prototypes Selection, IEEE TCSVT, 2020, 通讯作者
（3） Object Relational Graph with Teacher-Recommended Learning for Video Captioning, CVPR, 2020, 第 4 作者
（4） Graph convolutional network with structure pooling and joint-wise channel attention for action recognition, Pattern Recognition, 2020, 通讯作者
（5） Anomaly Detection Using Local Kernel Density Estimation and Context-Based Regression, IEEE TKDE, 2019, 第 3 作者
（6） Multimodal Semantic Attention Network for Video Captioning, ICME, 2019, 通讯作者
（7） Knowledge Distillation via Instance Relationship Graph, CVPR, 2019, 通讯作者
（8） Asymmetric 3D Convolutional Neural Networks for Action Recognition, Pattern Recognition, 2019, 第 3 作者
（9） Hierarchical Nonlinear Orthogonal Adaptive-Subspace Self-Organizing Map based Feature Extraction for Human Action Recognition, AAAI, 2018, 第 3 作者
（10） Spatio-Temporal Self-Organizing Map Deep Network for Dynamic Object Detection From Videos, CVPR, 2017, 第 3 作者
（11） Multi-View Multi-Instance Learning Based on Joint Sparse Representation and Multi-View Dictionary Learning, IEEE Trans. on Pattern Analysis and Machine Intelligence, 2017, 第 1 作者
（12） Salient Object Detection via Structured Matrix Decomposition, IEEE Trans. on Pattern Analysis and Machine Intelligence (IEEE TPAMI), 2017, 第 2 作者
（13） Multi-Cue Illumination Estimation via Tree-Structured Group Joint Sparse Representation, International Journal of Computer Vision (IJCV), 2016, 第 1 作者
（14） Multi-Instance Multi-label Learning Combining Hierarchical Context and Its Application to Image Annotation, IEEE Trans. On Multimedia (IEEE TMM), 2016, 通讯作者
（15） Horror Image Recognition Based on Context-Aware Multi-Instance Learning, IEEE Trans. on Image Processing (IEEE TIP), 2015, 第 1 作者
（16） Evaluating Combinational Illumination Estimation Methods on Real-World Images, IEEE Trans. On Image Processing (IEEE TIP), 2014, 第 1 作者
（17） RGBD Salient Object Detection: A Benchmark and Algorithms, European Conference on Computer Vision (ECCV), 2014, 通讯作者
（18） Illumination Estimation based on Bilayer Sparse Coding, IEEE Conf. on Computer Vision and Pattern Recognition (CVPR), 2013, 第 1 作者
（19） Salient Object Detection via Low-Rank and Structured Sparse Matrix Decomposition, AAAI Conference on Artificial Intelligence (AAAI), 2013, 通讯作者
（20） Visual Saliency Map from Tensor Analysis, AAAI Conference on Artificial Intelligence (AAAI), 2012, 第 1 作者
（21） Context-aware Affective Images Classification based on Bilayer Sparse Representation, ACM International Conference on Multimedia (ACM MM), 2012, 第 1 作者
（22） Evaluating combinational color constancy methods on real-world images, IEEE Conf. on Computer Vision and Pattern Recognition (CVPR), 2011, 第 1 作者
（23） Context-Aware Multi-Instance Learning based on Hierarchical Sparse Representation, IEEE, International Conference on Data Mining (ICDM), 2011, 第 1 作者
（24） A Supervised Combination Strategy for Illumination Chromaticity Estimation, ACM Trans. On Applied Perception, 2010, 第 1 作者

（1） 图像理解:颜色认知计算, 清华大学出版社, 2013-12, 第 2 作者
（2） 计算机视觉中的颜色感知, 清华大学出版社, 2021-04, 第 2 作者

   

（ 1 ） 国家基金面上项目：面向公共安全的视频内容识别技术研究, 主持, 国家级, 2019-01--2021-12
（ 2 ） 北京市杰青项目：网络XX多媒体内容的智能解析与识别研究, 主持, 省级, 2018-11--2021-12
（ 3 ） 国家基金重点项目：基于目标行为的视频流内容安全分析与智能检索, 主持, 国家级, 2020-01--2023-12
（ 4 ） ”新一代人工智能”项目：面向视觉运动感知的神经科学启发的机器学习理论与方 法, 主持, 国家级, 2020-11--2023-10
（ 5 ） 国家优青项目：网络多媒体内容的智能理解与安全分析, 主持, 国家级, 2022-01--2024-12

长期与CNCERT、人民网、央广视讯、国家电网、中国移动、腾讯、华为、新浪等知名事业和企业单位均有深入的项目合作与技术交流。

现指导学生

姜君  硕士研究生  081203-计算机应用技术  

白炜铭  硕士研究生  081203-计算机应用技术  

胡鑫亮  硕士研究生  085211-计算机技术