基于大模型的复杂智能体研究：

希望通过大语言模型、多模态大模型去规划、执行、评估数字内容生产自动化流程

具体打造垂直领域的复杂智能体去构建知识挖掘、视频创作等角色/阶段分工多样的数字化生产流水线

2003-09--2007-09   普林斯顿大学   博士
1999-09--2003-07   北京大学   本科

   

2023-09~现在, 杭州牧语工场科技有限公司, 创始人
2017-01~2023-05,新华智云科技有限公司, CEO
2009-08~2016-12,阿里云计算有限公司, 研究员
2007-04~2009-07,纽约时报, 搜索工程师

   

（ 1 ） 一种景区智能推荐互动方法和系统, 发明专利, 2022, 第 3 作者, 专利号: CN115203526A

（ 2 ） 一种生成虚拟形象动画的方法、装置、设备及存储介质, 发明专利, 2022, 第 2 作者, 专利号: CN114529639A

（ 3 ） 知识图谱中重复实体的去重方法, 发明专利, 2022, 第 4 作者, 专利号: CN114386418A

（ 4 ） 自动生成集锦视频的方法与集锦视频自动生成系统, 发明专利, 2021, 第 5 作者, 专利号: CN112887634A

（ 5 ） 基于语义的音频驱动数字人生成方法及系统, 发明专利, 2021, 第 2 作者, 专利号: CN112562722A

（ 6 ） 基于注意力机制的事件抽取方法及系统, 发明专利, 2021, 第 3 作者, 专利号: CN112307761A

（ 7 ） 一种地震新闻信息抽取方法及其系统, 2023, 第 3 作者, 专利号: CN113033201B

（ 8 ） 一种地震新闻信息抽取方法及其系统, 发明专利, 2021, 第 3 作者, 专利号: CN113033201A

（ 9 ） 一种媒体画像生成方法和系统, 发明专利, 2021, 第 2 作者, 专利号: CN112199599A

（ 10 ） 一种地震事件知识图谱构建方法、应用方法, 发明专利, 2021, 第 3 作者, 专利号: CN112559756A

（ 11 ） 一种地震事件实体链接方法, 发明专利, 2020, 第 3 作者, 专利号: CN112101022A

（ 12 ） 基于实时抠像的全息云会议系统, 发明专利, 2020, 第 3 作者, 专利号: CN112019771A

（ 13 ） 一种采访视频集锦生成方法和系统, 发明专利, 2020, 第 2 作者, 专利号: CN111506770A

（ 14 ） 一种在线协同视频编辑方法及装置, 发明专利, 2020, 第 1 作者, 专利号: CN111277905A

（ 15 ） 一种自动跟随的音视频采集系统和方法, 发明专利, 2020, 第 1 作者, 专利号: CN111182221A

（ 16 ） 音频处理方法及装置、存储介质, 发明专利, 2020, 第 3 作者, 专利号: CN110992984A

（ 17 ） 视频处理方法及装置、存储介质, 发明专利, 2020, 第 4 作者, 专利号: CN110856039A

（ 18 ） 视频生成方法及系统、存储介质, 发明专利, 2020, 第 2 作者, 专利号: CN110856038A

（ 19 ） 一种基于人物身份的人物实体链接方法, 发明专利, 2020, 第 4 作者, 专利号: CN111104520A

（ 20 ） 一种基于深度学习的可评判文本内容与实体相关性的实体抽取方法, 发明专利, 2020, 第 4 作者, 专利号: CN111090724A

（ 21 ） 一种基于百科词条自动构建影视综知识图谱的方法, 2023, 第 4 作者, 专利号: CN111090754B

（ 22 ） 一种基于百科词条自动构建影视综知识图谱的方法, 发明专利, 2020, 第 4 作者, 专利号: CN111090754A

（ 23 ） 图片加密方法、装置、侵权确定方法和计算机存储介质, 发明专利, 2019, 第 3 作者, 专利号: CN110532740A

（ 24 ） 一种景点参观视频自动生成方法、系统、设备和存储介质, 发明专利, 2019, 第 1 作者, 专利号: CN110278399A

（ 25 ） 财经新闻的模型训练方法和生成方法、装置、设备及介质, 发明专利, 2019, 第 4 作者, 专利号: CN110377693A

（ 26 ） 一种通用实体链接装置及方法, 发明专利, 2019, 第 3 作者, 专利号: CN109165297A

（ 27 ） 语音角色分离的方法和设备, 专利授权, 2018, 第 1 作者, 专利号: CN108564952A

（ 28 ） 一种新闻推送方法及设备, 发明专利, 2018, 第 1 作者, 专利号: CN108345663A

（ 29 ） 一种影音数据的处理方法及设备, 发明专利, 2018, 第 1 作者, 专利号: CN108307229A

（ 30 ） 一种碰撞检测方法及设备, 专利授权, 2018, 第 1 作者, 专利号: CN108458691A

（ 31 ） 一种视频目标检测跟踪方法及设备, 发明专利, 2018, 第 1 作者, 专利号: CN108280843A

（ 32 ） 资讯信息生成方法及设备, 专利授权, 2018, 第 1 作者, 专利号: CN108241856A

（ 33 ） 由传感器数据生成资讯信息的方法及设备, 专利授权, 2018, 第 1 作者, 专利号: CN108241749A

（ 34 ） 一种数据可视化方法及设备, 发明专利, 2018, 第 1 作者, 专利号: CN108241861A

（ 35 ） 一种提取关键词的方法及设备, 发明专利, 2018, 第 1 作者, 专利号: CN108241613A

（ 36 ） 一种数据分析方法及设备, 发明专利, 2018, 第 1 作者, 专利号: CN108241735A

（ 37 ） 筛选视频的方法及设备, 发明专利, 2018, 第 1 作者, 专利号: CN108241729A

（ 38 ） 新闻可信度评价方法及设备, 发明专利, 2018, 第 1 作者, 专利号: CN108241727A

（ 39 ） 一种纸媒网页链接发送方法及设备, 专利授权, 2018, 第 1 作者, 专利号: CN108255901A

（ 40 ） 一种二维图像码及其识别方法和设备, 发明专利, 2018, 第 1 作者, 专利号: CN108256608A

   

（1） LightNER: A Lightweight Tuning Paradigm for Low-resource NER via Pluggable Prompting, 2022, 第 5 作者
（2） Meta-Knowledge Transfer for Inductive Knowledge Graph Embedding, 2022, 第 6 作者
（3） Low-resource extraction with knowledge-aware pairwise prototype learning, KNOWLEDGE-BASED SYSTEMS, 2022, 第 6 作者
（4） Standing on the Shoulders of Predecessors: Meta-Knowledge Transfer for Knowledge Graphs, 2021, 第 6 作者
（5） Visual and Textual Information Fusion Method for Chart Recognition, Pattern Recognition. ICPR International Workshops and Challenges: Virtual Event, 2021, 
（6） SoccerDB: A Large-Scale Database for Comprehensive Video Understanding, 2020, 第 5 作者
（7） Soccerdb: A large-scale database for comprehensive video understanding, Proceedings of the 3rd International Workshop on Multimedia Content Analysis in Sports, 2020, 
（8） Comprehensive Video Understanding: Video summarization with content-based video recommender design, Proceedings of the IEEE/CVF International Conference on Computer Vision Workshops, 2019, 
（9） Comprehensive Video Understanding: Video summarization with content-based video recommender design, 2019 IEEE/CVF INTERNATIONAL CONFERENCE ON COMPUTER VISION WORKSHOPS (ICCVW), 2019, 第 4 作者
（10） Comprehensive Video Understanding: Video summarization with content-based video recommender design, 2019, 第 4 作者
（11） 媒体大脑：媒体与人工智能的融合重生之路, 传媒, 2018, 第 1 作者
（12） “媒体大脑”提供了怎样的深度融合新模式, 新闻与写作, 2018, 第 2 作者
（13） 面对技术变革，我们还将做什么，想什么，说什么——“大数据＋人工智能”的新闻生产和分发平台——新华社“媒体大脑”的主要功能和AI时代的新闻愿景, 中国记者, 2018, 第 2 作者
（14） A Generic Tree-Like Index Framework in the Cloud, Web Information Systems Engineering–WISE 2013, 2013, 
（15） Ambidentate H-bonding by heme-bound NO: structural and spectral effects of -O versus -N H-bonding, JOURNAL OF BIOLOGICAL INORGANIC CHEMISTRY, 2008, 第 1 作者
（16） DFT Analysis of Axial and Equatorial Effects on Heme��� CO Vibrational Modes: Applications to CooA and H��� NOX Heme Sensor Proteins, Biochemistry, 2008, 第 1 作者
（17） A quantum-chemical picture of hemoglobin affinity, Proceedings of the National Academy of Sciences, 2007, 第 2 作者
（18） A quantum-chemical picture of hemoglobin affinity, PROCEEDINGS OF THE NATIONAL ACADEMY OF SCIENCES OF THE UNITED STATES OF AMERICA, 2007,