MobileForge:无标注自优化GUI Agent数据飞轮
针对手机GUI Agent在真实App中适配成本高、依赖人工标注的问题,MobileForge提出一个无标注、自探索、自反馈、自优化的闭环系统。它通过MobileGym自动探索目标App、生成可执行任务,并利用HiFPO的分层反馈引导策略优化,无需人工编写任务或奖励信号。实验表明,仅用自动生成数据即可将Qwen3-VL-8B在AndroidWorld上的Pass@3提升至67.2%,接近闭源数据训练的专用模型。全链路开源,适合研究者和开发者快速搭建GUI Agent适配流水线。
MobileForge:无标注自优化GUI Agent数据飞轮
针对手机GUI Agent在真实App中适配成本高、依赖人工标注的问题,MobileForge提出一个无标注、自探索、自反馈、自优化的闭环系统。它通过MobileGym自动探索目标App、生成可执行任务,并利用HiFPO的分层反馈引导策略优化,无需人工编写任务或奖励信号。实验表明,仅用自动生成数据即可将Qwen3-VL-8B在AndroidWorld上的Pass@3提升至67.2%,接近闭源数据训练的专用模型。全链路开源,适合研究者和开发者快速搭建GUI Agent适配流水线。
实现步骤
- 1
克隆MobileForge仓库并安装依赖,参考GitHub上的安装指南。
- 2
配置目标App的APK文件或模拟器环境,启动MobileGym进行自动探索。
- 3
运行MobileGym-Curriculum,基于探索轨迹自动生成可执行任务课程。
- 4
使用HiFPO进行多轮rollout,收集Agent执行轨迹并获取分层评估反馈。
- 5
利用hint-contextualized GRPO更新策略模型,重复迭代优化。
- 6
在AndroidWorld或MobileWorld上评测模型性能,对比基线结果。
推荐工具栈
相关场景
给 Deep Research 或 Genspark 输入一个研究主题,30分钟内自动搜索数十个来源、提炼关键数据、生成带完整引用的专业调研报告。
批量下载和分析竞争对手的专利文献,AI 提取技术方案要点、保护范围和申请趋势,帮助研发团队快速了解技术格局并规避专利风险。
将多篇 PDF 论文上传后,让 AI Agent 自动提取摘要、研究方法、主要发现,并生成对比分析表格,帮助研究人员快速掌握领域进展。
让 Agent 系统性地分析竞争对手的产品特性、定价策略、用户评价和市场定位,生成全面的竞品分析报告,支撑产品决策。
输入目标公司名称,AI Agent 自动搜索公司背景、融资历史、创始团队、竞争格局和行业地位,30分钟生成专业投资尽调报告,替代初级分析师 2-3 天的工作量。
本文基于清华Rethinking OPD论文、各模型技术报告及LiteScale框架实践,系统讲解On-Policy Distillation的核心条件、底层机制与工程实现。你将学会如何判断老师模型是否适合蒸馏、如何避免训崩,并掌握一套可运行的异步OPD训练框架搭建方法,提升小模型在推理任务上的效果。