移动端测试的范式转变:从脚本到视觉Agent落地实践
内容简介:
移动端测试长期面临「脚本维护成本高、多端适配复杂、AI能力难以落地」的三角困境。本议题将分享如何通过视觉大模型 + 拓扑图谱 + Agent决策的技术路径,实现从「预设脚本」到「AI感知理解、自主决策」的范式转变,构建可沉淀、可复用的移动端智能测试能力。
演讲提纲:
1. 背景与挑战:业务流程视角下的移动端 AI 测试困境
1.1 传统UI测试现状:脚本分散、平台割裂(iOS/Android/鸿蒙各写一套)、业务变动带来大面积脚本维护。
1.2 痛点归纳:
1.3 目标画像:从“脚本驱动、多端割裂”走向“业务流程驱动、多端自动适配”。
2. 核心架构:业务流程管理 + AIAgent 与 Skills 协同体系
2.1 整体架构图
2.2 业务流程管理能力
2.3 AIAgent + Skills 协同机制
2.4 业务流程管理中对业务知识和图谱辅助智能执行步骤管理
2.5 AI Agent执行流程:观察模式驱动设备执行
2.6 执行流程中Skills能力控制设备操作的流程
2.7 任务执行中如何自愈及视觉断言
3. 实践落地:业务视角下的单流程驱动多平台执行
3.1 一套业务流程的建模
3.2 多平台适配机制
3.3 业务流程如何通过需求文档、视频及人工构建并生成
3.4 并行执行与统一结果展示
3.5 通过业务链路完成对自然语言的理解并执行的效果
3.6 业务团队的使用效果
3.7 从需求调用整个过程完成AI测试的场景演示
4. 总结与展望
听众收益:
1. 理解范式转变逻辑:看清视觉 AI 如何重构传统 UI 测试的技术链路
2. 掌握核心架构设计:了解「视觉感知 → 图谱决策 → 技能执行」的多层协作体系
3. 获得工程落地思路:借鉴业务流程建模与 Skills 沉淀的实践方案,提升多端测试效率
4. 使用效果:云测的思路建设AI端测试的过程
负责 58 本地生活方向测试工具体系规划与架构设计,拥有三十多项测试工具发明专利。深耕客户端与服务端自动化测试多年,擅长业务质量体系规划及技术赋能落地,丰富的测试平台建设与效能提升经验。专注领域:质量体系建设、AI 测试体系建设。