社会多媒体内容分析，多媒体数据挖掘

   

081203-计算机应用技术

网络社交媒体分析
多媒体内容分析

曹娟，女，中科院计算所研究员，博士生导师。 主要从事多媒体内容分析与检索相关的研究工作，2009年开始，重点研究大规模网络视频的分析与挖掘，包括网络视频分类，检索，推荐，tag修正与推荐，视频话题发现，以及视频地理定位等研究。2008年6月中科院计算所博士毕业，2009年6月至9月赴香港城市大学Video Retrieval Group(VIREO)做学术访问，2010年11月至2011年10月赴美国哥伦比亚大学 Digital Video | Multimedia Lab(DVMM)做学术访问。目前担任国际期刊如“IEEE Transaction on Multimedia”, “Multimedia Tools and Application” 以及国内期刊如“计算机研究与发展”等审稿人。
 
迄今已在国际/国内期刊、国际会议上发表/录用学术论文40余篇，开发的视频语义检索系统在2008年国际视频检索评测（TRECVID）自动检索任务中获得第一名，交互式视频检索系统（VideoMap）在2009年交互式检索任务中获得第二名。目前主要研究大规模网络社交媒体分析，从2012年开始为新华社研发“新华百科知识库”和“互联网新闻认证系统”，并已经在新华社实际使用。 由于表现突出，2008年入选计算所“学术百星”计划， 2011年入选中科院首批“青年创新促进会”人才计划，2008年和2009年分别获得计算所“优秀论文/著作”二等奖，2009年和2013年分别被评为计算所“优秀员工”。 

详情请见个人主页：http://mcg.ict.ac.cn/people/caojuan.html

多媒体技术

   

（1） 北京市科技进步一等奖, 一等奖, 省级, 2014
（2） 中国计算机学会2012年度科学技术奖, 一等奖, 其他, 2012

（ 1 ） 网络视频话题检测的方法及其系统, 发明, 2012, 第 1 作者, 专利号: 201010221077.3
（ 2 ） 一种基于社会信息的网络视频在线地理定位系统, 发明, 2012, 第 2 作者, 专利号: 201110432327.2
（ 3 ） 一种基于微博信息源的新闻认证方法及系统, 发明, 2014, 第 1 作者, 专利号: 201410594515.9
（ 5 ） 基于微博平台的事件关键人物提取技术, 发明, 2015, 第 1 作者, 专利号: 2015
（ 7 ） 基于微博平台的新闻事件外部信息源提取技术, 发明, 2015, 第 1 作者, 专利号: 2015
（ 9 ） 基于微博平台的有价值新闻线索自动发现的方法和系统, 发明, 2015, 第 1 作者, 专利号: 2015

1. Zh-W Jin, J. Cao, H. Guo, Y-D Zhang, J.B. Luo, Multimodal Fusion with Recurrent Neural Networks forRumor Detection on Microblogs, ACM on Multimedia Conference, 2017

2. Zh-W Jin, J. Cao, Y-D Zhang，Q. Tian,  News Credibility Evaluation with Image Features, Trans. On Multimedia, 2016.
   

3. Zh-W Jin, J. Cao, Y-D Zhang， J.B. Luo, News Verification by Exploiting Conflicting Social Viewpoints in Microblogs, AAAI 2016.

4. Zhou X, Cao J, Jin Z, et al, Real-Time News Certification System on Sina Weibo, www, 2015.

5. Jin Z, Cao J, Zhang Y, et al, MCG-ICT at MediaEval 2015: Verifying Multimedia Use with a Two-Level Classification Model, Proceedings of the MediaEval 2015 Workshop.
   

6. Juan Cao, YongDong Zhang, RongRong Ji, Xin Li, On Application-Unbiased Benchmarking of Web Videos from a Socail Network Perspective, Multimedia Tools and Applications, 2014, in press.
7. Juan Cao, YongDong Zhang, RongRong Ji, Fei Xie, Yu Su, Web Video Topic Discovery and Structuralization with Social Network, Neurocomputing, 2014, in press.
8. Zhiwei Jin, Juan Cao, Yu-Gang Jiang, YongDong Zhang, News Credibility Evaluation on Microblog with a Hierarchical Propagation Model, IEEE International Conference on Data Mining, 2014, ShenZhen, China.
9. Xingyu Gao, Juan Cao, Qin He, Jintao Li, A novel method for geographical social event detection in social media, ICIMCS, Huangshan, China, 2013.
10. Xingyu Gao, Juan Cao, Zhiwei Jin, Xin Li, Jintao Li, GeSoDeck: A Geo-Social Event Detection and Tracking System, ACM Multimedia, 2013.
11. YiCheng Song, YongDong Zhang, Juan Cao, Xingyu Gao, Jintao Li, A Unified Geolocation Framework for Web Videos, ACM Transactions on Intelligent Systems and Technology(TIST), 2013.
12. Yingcheng Song, YongDong Zhang, Juan Cao, Tian Xia, Wu Liu，JinTao Li, Web Video Geolocation by Geotagged Social Resources, IEEE Transaction on Multimedia(TMM), 14(2):456-470, 2012.
13. Zhineng Chen, Chong-Wah Ngo, Juan Cao, and Wei Zhang, Community as a Connector: Associating Faces with Celebrity Names in Web Videos, ACM Multimedia(ACM MM), Nara, Japan, October 2012.
14. Juan Cao, Chong-Wah Ngo, YongDong Zhang, JinTao Li, Tracking Web Video Topics: Discovery, Visualization and Monitoring, IEEE Transactions on Circuits and Systems for Video Technology(CSVT), 2011, in press.
15. L. Pang, J. Cao, Y. D. Zhang, S. X. Lin, Leveraging Collective Wisdom for Web Video Retrieval through Heterogeneous Community Discovery , ACM MM 11, accepted , 2011.
16. Juan Cao, Chong-Wah Ngo, YongDong Zhang, Liang Ma, Trajectory-based Visualization of Web Video Topics, ACM International Conference on Multimedia (ACM MM), Florence, Italy, 2010.
17. Juan Cao, HongFang Jing, Chong-Wzah Ngo, YongDong Zhang, Distribution-based Concept Selection for Concept-based Video Retrieval, ACM International Conference on Multimedia (ACM MM), Beijing, China, Oct. 2009.
18. Juan Cao, Tian Xia, Jintao Li, YongDong Zhang, Sheng Tang, A density-based method for adaptive LDA mod el selection, Neurocomputing, 72(7-9): 1775-1781 (2009)
19. Juan Cao, YongDong Zhang, JunBo Guo, Lei Bao, JinTao Li, VideoMap: An Interactive Video Retrieval System of MCG-ICT-CAS. ACM International Conference on Image and Video Retrieval (CIVR), Santorin, 2009.
20. Juan Cao, YongDong Zhang, YiCheng Song, ZhiNeng Chen, Xu Zhang, and JinTao Li, MCG-WEBV: A Benchmark Dataset for Web Video Analysis, Technical Report, ICT-MCG-09-001, Institute of Computing Technology, May. 2009
21. Juan Cao, Jintao Li, Yongdong Zhang, The optimal condition of LDA model for video retrieval, Chinese Journal of Computers.Vol.31, no.10, pp.1780-1787,2008.
22. Juan Cao, Yongdong Zhang, Bailan Feng, Xiufeng Hua, Lei Bao, and Xu Zhang, MCG-ICT-CAS TRECVID2008 search task report, TREC Video Retrieval Evaluation Online Proceedings (TRECVID), 2008
23. Juan Cao, Jintao Li, Yongdong Zhang, Sheng Tang, LDA-Based Retrieval Framework for Semantic News Video Retrieval.IEEE International Conference on Semantic Computing (ICSC), 155-160, 2007
24. Juan Cao, Sheng Tang, Jintao Li, Yongdong Zhang, Xuefeng Pan, A Lexicon-Guided LSI Method for Semantic News Video Retrieval, PCM2007, pp. 187-195, 2007.
25. Juan Cao, Jintao Li, Yongdong Zhang, and Sheng Tang, A Novel Method for Spoken Text Feature Extraction in Semantic Video Retrieval, PCM06, pp. 270 – 278, 2006
26. Juan Cao, YongDong Zhang, YiCheng Song, ZhiNeng Chen, Xu Zhang, and JinTao Li. "MCG-WEBV: A Benchmark Dataset for Web Video Analysis", Technical Report, ICT-MCG-09-001, Institute of Computing Technology, May. 2009
27. Lei Bao, Juan Cao, YongDong Zhang, MingYu Chen, JinTao Li, Alexander Hauptmann, Explicit and Implicit Concept-based Video Retrieval with Bipartite Graph Propagation Model, ACM International Conference on Multimedia (ACM MM), 2010 (accepted).
28. Yingcheng Song, Juan Cao, ZhiNeng Chen, YongDong Zhang, JinTao Li, Tag Transformer, ACM International Conference on Multimedia (ACM MM), Florence, Italy, 2010 (accepted).
29. Zhineng Chen, Juan Cao, Yicheng Song, YongDong Zhang, JinTao Li, Web Video Categorization based on Wikipedia Categories and Content-Duplicated Open Resources, ACM International Conference on Multimedia (ACM MM), Florence, Italy, 2010 (accepted).
30. Bailan Feng, Juan Cao, Lei Bao, Yongdong Zhang, Shouxun Lin, Xiuguo Bao, Xiaochun Yun. Graph-Based Multi-Space Semantic Correlation Diffusion for Video Retrieval. The Visual Computer, International Journal of Computer Graphics (SCI, IF: 1.061), Accepted.
31. Zhineng Chen, Juan Cao, Yicheng Song, Junbo Guo, Yongdong Zhang, Jintao Li: Context-oriented web video tag recommendation. WWW 2010: 1079-1080
32. Bailan Feng，Juan Cao, Zhineng Chen, Yongdong Zhang, Shouxun Lin，Multi-Modal Query Expansion for Web Video Search the ACM SIGIR 2010, Geneva, Switzerland, 2010
33. Lin Pang, Juan Cao, Junbo Guo, Shouxun Lin, Yan Song: Bag of Spatio-temporal Synonym Sets for Human Action Recognition. MMM 2010: 422-432
34. Zhineng Chen, Juan Cao, Tian Xia, Yicheng Song, Yongdong Zhang, Jintao Li, Web Video Retagging, Multimedia Tools and Applications， accepted, 2010
35. Lin Pang, Juan Cao, Lei Bao, Yongdong Zhang and Shouxun Lin. Towards hierarchical context: unfolding visual community potential for interactive video retrieval. Multimedia tools and applications. DOI: 10.1007/s11042-010-0605-0.
36. Tian Xia, Juan Cao, YongDong Zhang, and JinTao Li. On defining affinity graph for spectral clustering through ranking on manifolds. In Neurocomputing , 72 (2009) 3203-3211.
37. Lei Bao, Juan Cao, Tian Xia, YongDong Zhang, JinTao Li, Locally Non-negative Linear Structure Learning for Interactive Image Retrieval, ACM International Conference on Multimedia (ACM MM), Beijing, China, Oct. 2009.
38. Bailan Feng, Juan Cao, Shouxun Lin, Yongdong Zhang, Kun Tao, motion region-based trajectory analysis and re-ranking for video retrieval, IEEE International Conference on Multimedia and Expo(ICME）, 2009

（1） On Application-Unbiased Benchmarking of Web Videos from a Social Network Perspective，MTA，2014，第1作者
（2） Boosted Near-Miss Under-Sampling on SVM Ensembles for Concept Detection in Large-Scale Imbalanced Datasets ，Neurocomputing，2014，第2作者
（3） An Unified Geolocation Framework for Web Video Social Network，ACM Transactions on Intelligent Systems and Technology (TIST)，2013，第3作者
（4） A novel method for geographical social event detection in social media，ICIMCS，2013，第2作者
（5） : GeSoDeck: A Geo-Social Event Detection and Tracking System，ACM Multimedia，2013，第2作者
（6） Web Video Geolocation by Geotagged Social Resources，IEEE Transaction on Multimedia，2012，第3作者
（7） Community as a Connector: Associating Faces with Celebrity Names in Web Videos，ACM Multimedia，2012，第3作者
（8） Tracking Web Video Topics: Discovery, Visualization and Monitoring，Trans. on CSVT ，2011，第1作者
（9） Web Video Geolocation by Geotagged Social Resources，Trans. on Multimedia，2011，第3作者
（10） Leveraging Collective Wisdom for Web Video Retrieval through Heterogeneous Community Discovery，ACM Multimedia，2011，第2作者
（11） Web Video Retagging，Multimedia Tools and Applications，2010，第2作者
（12） Multi-Modal Query Expansion for Web Video Search，SIGIR，2010，第2作者
（13） Tag Transfer，ACM Multimedia，2010，第2作者
（14） Explicit and Implicit Concept-based Video Retrieval with Bipartite Graph Propagation Model，ACM Multimedia，2010，第2作者
（15） Web Video Categorization based on Wikipedia Categories and Content-Duplicated Open Resources，ACM Multimedia，2010，第2作者
（16） Towards hierarchical context: unfolding visual community potential for interactive video retrieval，Multimedia Tools and Applications ，2010，第2作者
（17） Graph-Based Multi-Space Semantic Correlation Diffusion for Video Retrieval，The Visual Computer, International Journal of Computer Graphics ，2010，第2作者
（18） Trajectory-based Visualization of Web Video Topics，ACM Multimedia，2010，第1作者
（19） Context-oriented web video tag recommendation，WWW，2010，第2作者

   

（ 1 ） 大规模网络视频在线定位与地理信息挖掘技术研究, 主持, 国家级, 2012-01--2015-12
（ 2 ） 中科院青年创新促进会项目, 主持, 部委级, 2011-01--2014-12
（ 3 ） UGC新闻认证预警关键技术研究, 主持, 国家级, 2016-01--2019-12
（ 5 ） 新华社UGC新闻认证预警系统, 主持, 院级, 2015-01--2016-06
（ 6 ） 新华百科知识库系统构建, 主持, 院级, 2015-01--2016-12
（ 7 ） 网络大数据的数据与隐私保护基础理论研究, 参与, 国家级, 2016-07--2021-07
（ 8 ） XXXX, 主持, 国家级, 2014-06--2015-12
（ 9 ） 基于轨迹的网络话题检测和可视化研究, 主持, 国家级, 2010-01--2012-12
（ 10 ） 基于深度学习的互联网多媒体谣言检测理论与方法研究, 主持, 市地级, 2017-05--2019-04

现指导学生

何覃  硕士研究生  081203-计算机应用技术  

张俊强  硕士研究生  081203-计算机应用技术  

周兴  硕士研究生  081203-计算机应用技术  

张雅滋  硕士研究生  081203-计算机应用技术