深度强化学习与自动驾驶决策控制、基于深度学习的轨迹预测、自动驾驶仿真交通场景生成

计算机专业、自动化专业、人工智能相关专业

081101-控制理论与控制工程
081104-模式识别与智能系统

深度强化学习与自动驾驶，交互推理与决策
无人系统决策规划等
自动驾驶仿真场景生成

2014-09--2017-06   中国科学院自动化研究所   博士研究生
2012-09--2014-06   东北大学   硕士研究生
2008-09--2012-06   东北电力大学   学士

   

2020-09~现在, 中国科学院自动化研究所, 硕士生导师
2019-10~现在, 中国科学院自动化研究所, 副研究员
2017-07~2019-09,中国科学院自动化研究所, 助理研究员

鹏城实验室，兼职副研究员；

中国人工智能学会智能驾驶专委会，委员；

中国计算机学会智能汽车专委会，执行委员；

中国自动化学会自适应动态规划专委会，会议；

中国生产力促进中心汽车工作委员会，副秘书长

强化学习
多智能体系统

   

（1） 第二届中国AI+创新创业大赛全国总决赛, 一等奖, 其他, 2020
（2） DAI 2020 SMARTS COMPETITION TRACK 1, 一等奖, 其他, 2020
（3） 中国人工智能学会优秀博士论文提名奖, 其他, 2019
（4） 中国科学院院长优秀奖, 一等奖, 院级, 2017

（ 1 ） 智能驾驶横向换道决策方法、系统和装置, 专利授权, 2020, 第 1 作者, 专利号: CN110304045B

（ 2 ） 面向地铁视觉图像的轨道检测方法及系统, 发明专利, 2020, 第 2 作者, 专利号: CN111611956A

（ 3 ） 智能驾驶车道保持方法及系统, 专利授权, 2020, 第 3 作者, 专利号: CN109466552B

（ 4 ） 微电网频率自适应学习控制方法, 专利授权, 2020, 第 2 作者, 专利号: CN108448594B

（ 5 ） 驾驶员跟车行为分析中的期望跟车距离计算方法, 专利授权, 2020, 第 2 作者, 专利号: CN107016193B

（ 6 ） 基于光流和卡尔曼滤波的多目标追踪方法、系统、装置, 发明专利, 2019, 第 3 作者, 专利号: CN110415277A

（ 7 ） 基于自适应动态规划的单区域电力系统频率复合控制方法, 专利授权, 2019, 第 3 作者, 专利号: CN106532691B

（ 8 ） 弹簧质量阻尼器的鲁棒跟踪控制方法, 发明专利, 2018, 第 2 作者, 专利号: CN108303876A

   

（1） Hierarchical optimal control for input-affine nonlinear systems through the formulation of Stackelberg game, INFORMATION SCIENCES, 2020, 第 3 作者
（2） Deep Reinforcement Learning-Based Automatic Exploration for Navigation in Unknown Environment, IEEE TRANSACTIONS ON NEURAL NETWORKS AND LEARNING SYSTEMS, 2020, 第 2 作者
（3） RailNet: An Information Aggregation Network for Rail Track Segmentation, 2020 INTERNATIONAL JOINT CONFERENCE ON NEURAL NETWORKS (IJCNN), 2020, 第 2 作者
（4） Comparison of Control Methods Based on Imitation Learning for Autonomous Driving, 2019 TENTH INTERNATIONAL CONFERENCE ON INTELLIGENT CONTROL AND INFORMATION PROCESSING (ICICIP), 2019, 第 3 作者
（5） Data-based reinforcement learning for nonzero-sum games with unknown drift dynamics, IEEE TRANSACTIONS ON CYBERNETICS, 2019, 第 1 作者
（6） Lane Change Decision-making through Deep Reinforcement Learning with Rule-based Constraints, 2019 INTERNATIONAL JOINT CONFERENCE ON NEURAL NETWORKS (IJCNN), 2019, 第 2 作者
（7） Model-Free Reinforcement Learning based Lateral Control for Lane Keeping, 2019 INTERNATIONAL JOINT CONFERENCE ON NEURAL NETWORKS (IJCNN), 2019, 通讯作者
（8） Overview of Image Segmentation and Its Application on Free Space Detection, PROCEEDINGS OF 2018 IEEE 7TH DATA DRIVEN CONTROL AND LEARNING SYSTEMS CONFERENCE (DDCLS), 2018, 第 2 作者
（9） Multi-task learning for dangerous object detection in autonomous driving, INFORMATION SCIENCES, 2018, 第 4 作者
（10） An Autonomous Driving Experience Platform with Learning-Based Functions, 2018 IEEE SYMPOSIUM SERIES ON COMPUTATIONAL INTELLIGENCE (IEEE SSCI), 2018, 第 3 作者
（11） Model-Free Reinforcement Learning for Fully Cooperative Multi-Agent Graphical Games, 2018 INTERNATIONAL JOINT CONFERENCE ON NEURAL NETWORKS (IJCNN), 2018, 通讯作者
（12） Policy Iteration for H infinity Optimal Control of Polynomial Nonlinear Systems via Sum of Squares Programming, IEEE TRANSACTIONS ON CYBERNETICS, 2018, 第 4 作者
（13） Event-Based Robust Control for Uncertain Nonlinear Systems Using Adaptive Dynamic Programming, IEEE TRANSACTIONS ON NEURAL NETWORKS AND LEARNING SYSTEMS, 2018, 通讯作者
（14） Visual Navigation with Actor-Critic Deep Reinforcement Learning, 2018 INTERNATIONAL JOINT CONFERENCE ON NEURAL NETWORKS (IJCNN), 2018, 第 4 作者
（15） DeepSign: Deep Learning based Traffic Sign Recognition, 2018 INTERNATIONAL JOINT CONFERENCE ON NEURAL NETWORKS (IJCNN), 2018, 第 4 作者
（16） DeepSign: Deep Learning based Traffic Sign Recognition, 2018, 第 1 作者
（17） An Autonomous Driving Experience Platform with Learning-Based Functions, 2018 IEEE SYMPOSIUM SERIES ON COMPUTATIONAL INTELLIGENCE (IEEE SSCI), 2018, 第 2 作者
（18） Value Iteration Algorithm for Optimal Consensus Control of Multi-agent Systems, International Conference on Neural Information Processing, 2018, 第 1 作者
（19） Visual navigation with Actor-Critic deep reinforcement learning, 2018, 第 2 作者
（20） Data-driven adaptive dynamic programming for continuous-time fully cooperative games with partially constrained inputs, NEUROCOMPUTING, 2017, 第 1 作者
（21） Policy Gradient Methods with Gaussian Process Modelling Acceleration, 2017 INTERNATIONAL JOINT CONFERENCE ON NEURAL NETWORKS (IJCNN), 2017, 第 3 作者
（22） Comparison of methods to efficient graph SLAM under general optimization framework, YAC 2017, 2017, 第 1 作者
（23） 面向几类微分博弈的自适应动态规划方法, 2017, 第 1 作者
（24） Model-free Optimal Control based Intelligent Cruise Control with Hardware-in-the-loop Demonstration, IEEE COMPUTATIONAL INTELLIGENCE MAGAZINE, 2017, 通讯作者
（25） Data-driven adaptive dynamic programming for two-player nonzero-sum game, 2017, 第 2 作者
（26） Event-Triggered H-infinity Control for Continuous-Time Nonlinear System via Concurrent Learning, IEEE TRANSACTIONS ON SYSTEMS MAN CYBERNETICS-SYSTEMS, 2017, 通讯作者
（27） Policy Gradient Methods with Gaussian Process Modelling Acceleration, 2017 INTERNATIONAL JOINT CONFERENCE ON NEURAL NETWORKS (IJCNN), 2017, 第 3 作者
（28） Data-Based Adaptive Critic Designs for Nonlinear Robust Optimal Control With Uncertain Dynamics, IEEE TRANSACTIONS ON SYSTEMS MAN CYBERNETICS-SYSTEMS, 2016, 第 3 作者
（29） Model-free reinforcement learning for nonlinear zero-sum games with simultaneous explorations, 2016, 第 4 作者
（30） Event-based input-constrained nonlinear H infinity state feedback with adaptive critic and neural implementation, NEUROCOMPUTING, 2016, 第 3 作者
（31） Event-based input-constrained nonlinear H∞ state feedback with adaptive critic and neural implementation, Neurocomputing, 2016, 第 3 作者
（32） Experience Replay for Optimal Control of Nonzero-Sum Game Systems With Unknown Dynamics, IEEE TRANSACTIONS ON CYBERNETICS, 2016, 通讯作者
（33） Data-Based Adaptive Critic Designs for Nonlinear Robust Optimal Control With Uncertain Dynamics, IEEE TRANSACTIONS ON SYSTEMS MAN CYBERNETICS-SYSTEMS, 2016, 第 3 作者
（34） Consensus of Heterogeneous Multi-agent Systems With Switching Topologies Using Input-output Feedback Linearization, 2015 34TH CHINESE CONTROL CONFERENCE (CCC), 2015, 通讯作者
（35） Event-triggered hinfinity control for continuous-time nonlinear system, ADVANCES IN NEURAL NETWORKS - ISNN 2015, 2015, 第 2 作者
（36） Event-triggered hinfinity control for continuous-time nonlinear system, ADVANCES IN NEURAL NETWORKS - ISNN 2015, 2015, 第 2 作者

   

（ 1 ） 基于多智能体深度自适应动态规划的优化控制方法与应用, 负责人, 国家任务, 2019-01--2021-12
（ 2 ） 基于智能计算的列车关键区段路侧感知及车辆定位理论与方法, 负责人, 地方任务, 2019-12--2022-12
（ 3 ） 限定场景交通流仿真smart agent 算法研究, 负责人, 企业委托, 2021-04--2022-02
（ 4 ） 复杂城市交互场景下的电动汽车智能决策技术研究, 负责人, 地方任务, 2019-07--2021-06
（ 5 ） 虚实融合的多机器人智能博弈决策技术与应用, 负责人, 研究所自选, 2021-01--2023-12
（ 6 ） 数据驱动的仿真交通场景生成方法研究, 负责人, 国家任务, 2022-01--2025-12

   

直接指导：

1. 方兴，电子科技大学保送，硕士研究生，2022

2. 郑宇鹏，中国科学院大学，硕士研究所，2022

2. 王君礼，四川大学考研，硕士研究生，2022

协助指导：

李丁，博士在读

刘育琦，博士在读

王俊杰，博士在读

高胤峰，博士在读