研究方向：智能化软件工程，软件测试，人机交互，大模型智能体

重点探索如何利用大语言模型、多模态模型、智能体和程序分析技术，构建能够自主理解、测试、诊断和改进软件系统的智能软件工程方法。目前主要关注以下方向：

1. 智能软件测试与GUI测试智能体：研究基于大语言模型和多模态模型的自主测试智能体，使其能够理解软件功能、规划测试任务、生成交互路径，并根据执行反馈动态调整测试策略。具体包括GUI自动探索、长程任务推理、测试记忆、历史经验复用和跨应用测试等。

2. 多模态缺陷检测与自动化调试：融合截图、界面结构、文本信息、交互轨迹和运行状态，检测视觉缺陷、非崩溃功能缺陷和交互逻辑异常，并进一步研究自动测试预言、缺陷复现、触发路径分析和故障定位。

3. 人机协同的软件测试与智能开发工具：研究人工智能如何辅助测试人员和软件用户，包括测试路径推荐、关键功能发现、测试决策解释、易用性分析，以及软件无障碍问题的自动检测与修复。

4. AI原生软件与多智能体系统可靠性：面向大模型智能体和多智能体系统，研究长期协作稳定性、失效检测与归因、智能体工作流测试，以及环境和任务变化下的系统鲁棒性。

详细信息可以关注

个人主页：https://zheliu6.github.io/

谷歌学术：https://scholar.google.com/citations?user=D27QoFMAAAAJ

   

083500-软件工程

智能化软件工程，软件测试

2018-09--2023-06   中国科学院大学   博士
2014-09--2018-06   四川大学   学士

   

2025-10~现在, 中国科学院软件研究所, 副研究员
2023-07~2025-10,中国科学院软件研究所, 特别研究助理（博士后）

   

（1） ACM ASE Distinguished Reviewer Award, 其他, 2025
（2） CCF软件工程专业委员会“优秀博士论文激励计划”, , 国家级, 2024
（3） 中国科学院优秀博士论文, , 院级, 2024
（4） ACM CHI Best Paper Honourable Mention, 其他, 2024
（5） ACM 学生研究竞赛全球总决赛 冠军, 一等奖, 国家级, 2023
（6） 中国科学院院长奖, , 院级, 2023
（7） 北京市优秀毕业生, 省级, 2023
（8） 中国科学院大学优秀毕业生, 院级, 2023
（9） ACM学生研究竞赛ICSE 20 冠军, 一等奖, 国家级, 2022
（10） 中国科学院软件研究所优秀党务工作者, 研究所（学校）, 2021
（11） ACM学生研究竞赛ASE 20 冠军, 一等奖, 国家级, 2020

（ 1 ） 基于多模态匹配模型的上下文感知的缺陷复现方法及装置, 发明专利, 2023, 第 3 作者, 专利号: CN117234891A

（ 2 ） 一种针对移动应用的界面缩放缺陷检测方法及电子装置, 发明专利, 2022, 第 3 作者, 专利号: CN115357490A

（ 3 ） 一种用户界面显示缺陷的自动定位与修复方法及装置, 发明专利, 2022, 第 1 作者, 专利号: CN115168182A

（ 4 ） 基于应用程序状态转换图的智能辅助引导测试方法及装置, 发明专利, 2021, 第 1 作者, 专利号: CN113238952A

（ 5 ） 应用程序用户界面缺陷的自动化检测与定位方法及电子装置, 发明专利, 2020, 第 1 作者, 专利号: CN111797007A

   

（1） OrchJail: Jailbreaking Tool-Calling Text-to-Image Agents by Orchestration-Guided Fuzzing, Forty-third International Conference on Machine Learning (ICML CCF-A), 2026, 第 4 作者
（2） Think Outside the Box: Automating Inter-App Functionality Testing via Memory Implanting and Reasoning, The 47th IEEE/ACM International Conference on Software Engineering (ICSE 2026, CCF-A), 2026, 第 2 作者
（3） Many Minds, One Path: LLM-Augmented Consensus Decision for Distributed Control in Multi-Agent Collaborative Stable Scenarios, The Fortieth AAAI Conference on Artificial Intelligence (AAAI 2026, CCF-A), 2026, 第 2 作者
（4） From Suspicious Signals to Crashes: Guiding Bug-driven GUI Testing via Code-inspired Tracing, The ACM International Conference on the Foundations of Software Engineering (FSE 2026, CCF-A), 2026, 第 2 作者
（5） BugHunter: An Automated Tool for Bug-Aware GUI Testing via Retrieval Augmentation, The 47th IEEE/ACM International Conference on Software Engineering (ICSE 2026, CCF-A), 2026, 第 1 作者
（6） Standing on the Shoulders of Giants: Bug-Aware Automated GUI Testing via Retrieval Augmentation, Proceedings of the ACM on Software Engineering (FSE 2025, CCF-A), 2025, 第 2 作者
（7） Seeing is Believing: Vision-driven Non-crash Functional Bug Detection for Mobile Apps, IEEE Transactions on Software Engineering (TSE, CCF-A), 2025, 第 1 作者
（8） One Sentence Can Kill the Bug: Auto-Replay Mobile App Crashes From One-Sentence Overviews, IEEE TRANSACTIONS ON SOFTWARE ENGINEERING (TSE, CCF-A), 2025, 第 3 作者
（9） Beyond Static GUI Agent: Evolving LLM-based GUI Testing via Dynamic Memory, The 40th IEEE/ACM International Conference on Automated Software Engineering (ASE 2025, CCF-A), 2025, 第 2 作者
（10） Deep API Sequence Generation via Golden Solution Samples and API Seeds, ACM Transactions on Software Engineering and Methodology (TOSEM, CCF-A), 2025, 第 6 作者
（11） A Roadmap for Software Testing in Open-Collaborative and AI-Powered Era, ACM Transactions on Software Engineering and Methodology (TOSEM, CCF-A), 2025, 第 5 作者
（12） 移动应用程序中用户界面显示缺陷检测的经验研究, Empirical Study on UI Display Issue Detection in Mobile Applications, 软件学报, 2024, 第 1 作者
（13） Unblind Text Inputs: Predicting Hint-text of Text Input in Mobile Apps via LLM, PROCEEDINGS OF THE 2024 CHI CONFERENCE ON HUMAN FACTORS IN COMPUTING SYTEMS (CHI 2024, CCF-A), 2024, 第 1 作者  通讯作者
（14） Make LLM a Testing Expert: Bringing Human-like Interaction to Mobile GUI Testing via Functionality-aware Decisions, IEEE/ACM 46th International Conference on Software Engineering (ICSE 2024, CCF-A), 2024, 第 1 作者
（15） Software Testing With Large Language Models: Survey, Landscape, and Vision, IEEE Transactions on Software Engineering (TSE, CCF-A), 2024, 第 4 作者
（16） Testing the Limits: Unusual Text Inputs Generation for Mobile App Crash Detection with Large Language Model, IEEE/ACM 46th International Conference on Software Engineering (ICSE 2024, CCF-A), 2024, 第 1 作者
（17） CrashTranslator: Automatically Reproducing Mobile Application Crashes Directly from Stack Trace, IEEE/ACM 46th International Conference on Software Engineering (ICSE 2024, CCF-A), 2024, 第 3 作者
（18） Nighthawk: Fully Automated Localizing UI Display Issues via Visual Understanding, IEEE TRANSACTIONS ON SOFTWARE ENGINEERING (TSE, CCF-A), 2023, 第 1 作者
（19） Fill in the Blank: Context-aware Automated Text Input Generation for Mobile GUI Testing, 2023 IEEE/ACM 45TH INTERNATIONAL CONFERENCE ON SOFTWARE ENGINEERING (ICSE 2023, CCF-A), 2023, 第 1 作者
（20） Ex pede Herculem: Augmenting Activity Transition Graph for Apps via Graph Convolution Network, 2023 IEEE/ACM 45TH INTERNATIONAL CONFERENCE ON SOFTWARE ENGINEERING (ICSE 2023, CCF-A), 2023, 第 1 作者
（21） The Metamorphosis: Automatic Detection of Scaling Issues for Mobile Apps, PROCEEDINGS OF THE 37TH IEEE/ACM INTERNATIONAL CONFERENCE ON AUTOMATED SOFTWARE ENGINEERING (ASE 2022, CCF-A), 2022, 第 4 作者
（22） Guided Bug Crush: Assist Manual GUI Testing of Android Apps via Hint Moves, PROCEEDINGS OF THE 2022 CHI CONFERENCE ON HUMAN FACTORS IN COMPUTING SYSTEMS (CHI 2022, CCF-A), 2022, 第 1 作者
（23） NaviDroid: A Tool for Guiding Manual Android Testing via Hint Moves, 2022 ACM/IEEE 44TH INTERNATIONAL CONFERENCE ON SOFTWARE ENGINEERING (ICSE 2022, CCF-A), 2022, 第 1 作者
（24） Characterizing and Predicting Good First Issues, International Symposium on Empirical Software Engineering and Measurement, 2021, 第 4 作者
（25） OwlEyes-Online: A Fully Automated Platform for Detecting and Localizing UI Display Issues, Proceedings of the 29th ACM joint meeting on european software engineering conference and symposium on the foundations of software engineering (FSE 2021, CCF-A), 2021, 第 2 作者
（26） Owl Eyes: Spotting UI Display Issues via Visual Understanding, 35TH IEEE/ACM INTERNATIONAL CONFERENCE ON AUTOMATED SOFTWARE ENGINEERING (ASE 2020, CCF-A), 2020, 第 1 作者

   

（ 1 ） 国家自然科学基金（青年基金）— 基于多模态大模型的软件非崩溃功能性缺陷自动化检测技术研究, 负责人, 国家任务, 2025-01--2027-12
（ 2 ） 国家重点研发计划 — 高风险领域生成式人工智能系统内容安全检测技术与标准研究 , 参与, 国家任务, 2024-12--2027-12
（ 3 ） 中国科学院先导B计划 — 新能源自主构建电压频率的最优结构与稳定控制, 参与, 中国科学院计划, 2024-01--2029-01
（ 4 ） 中国科学院特别研究助理资助计划 — 开放环境下融合群体智能的软件测试自动化技术, 负责人, 研究所自主部署, 2023-12--2025-12
（ 5 ） 中国科学院软件研究所中长期发展规划 — 泛在软件系统的智能化开发、测试与运维方法, 参与, 研究所自主部署, 2023-12--2025-12
（ 6 ） CCF胡杨林基金 — 基于大模型的系统集成测试生成和优化技术, 参与, 其他, 2023-01--2024-01
（ 7 ） 国家自然科学基金（面上基金）— 软件众包测试智能服务技术研究, 参与, 国家任务, 2021-01--2024-01
（ 8 ） 国家重点研发计划 — 信息产品及科技服务集成化众测服务平台研发与应用, 参与, 国家任务, 2019-12--2022-12

（1）优秀博士生激励计划论坛 — 基于大模型的软件自动化测试技术   2025 CCF 中国软件大会   2025-12-02
（2）智能化软件开发、测试和维护论坛 — 基于大模型的移动应用自动化测试技术   2024 CCF 中国软件大会   2024-11-15
（3）大模型与软件测试论坛 — 基于大模型的移动应用自动化测试路径生成   2023 CCF 中国软件大会   2023-11-27
（4）基于大模型的移动应用程序智能化测试技术   2023 南京大学特色化示范性软件学院建设青年学者论坛
   2023-10-20
（5）顶会顶刊论坛 — Fill in the Blank: Context-aware Automated Text Input Generation for Mobile GUI Testing 
   2023 数字服务大会论坛   2023-09-17
（6）优秀博士生论坛   2022 CCF 中国软件大会   2022-11-27

   

在读学生

博士研究生（硕博连读/直博）

- 于卓浩 博士研究生（直博） 2023.9 入学

- 陈孟卓 博士研究生（硕博连读） 2023.9 入学

- 王晨雪 博士研究生（直博） 2024.9 入学

硕士研究生

- 王欧槿 硕士研究生 2026.9 入学

已毕业学生

博士研究生（硕博连读/直博）

- 黄芋超 博士研究生（硕博连读） 2019.9 入学，2025.6 毕业

first job：海外博后 德国慕尼黑工业大学

读博期间成果：3 篇一作 CCF A，ICPC (CCF B) 杰出论文奖，2 篇一作 CCF B

硕士研究生

- 苏宇辉 硕士研究生 2020.9 入学，2023.6 毕业

first job：字节跳动 质量保障部门

- 车行 硕士研究生 2022.9 入学，2025.6 毕业

first job：字节跳动 广告

- 李澄 硕士研究生 2022.9 入学，2025.6 毕业

first job：美国华盛顿大学读博