产品

PhoneBuddy
无人问津待猹分
@腾讯
支持手机操作 Agent 的智能助手

PhoneBuddy
待猹分 @腾讯
支持手机操作 Agent 的智能助手
PhoneBuddy 是发布的手机操作 Agent 训练与评测项目,主要面向 AI 研究人员和移动端 Agent 开发者。它关注如何训练 AI 理解手机界面并执行操作,同时解决真实 App 训练反馈贴近实际、但难以大规模重复,以及模拟环境容易脱离真实使用的问题。
项目结合真实 App 执行反馈与可重置、带自动验证的模拟应用环境,并提供不同训练方案的模型检查点和评测结果。它更适合作为开发团队集成、测试手机操作 Agent 的模型与研究方案,而不是普通用户安装后即可使用的手机助手。
核心功能
真实应用训练:让 Agent 在真实手机和 App 中执行任务,接触实际的应用状态、操作逻辑、权限流程和时间变化。
模拟应用训练:借助 PhoneWorld 的可重置模拟应用和自动验证机制,批量生成可重复运行的手机操作任务。
多种模型检查点:提供 PhoneBuddy-4B、PhoneBuddy-4B-RealApp 和 PhoneBuddy-0.8B 等不同训练方案的模型入口,便于开发者进行实验和比较。
手机任务评测:覆盖单应用、跨应用、微信小程序和 AndroidWorld 等任务场景,用于观察模型在不同手机操作任务中的表现。
适合谁
研究手机操作 Agent、GUI Agent 或多模态模型的研究人员。
希望将 AI 接入 Android 操作流程的开发者。
需要构建手机应用模拟环境、验证 Agent 操作能力的团队。
使用方式
根据实验需求选择相应的模型检查点。
按模型说明配置推理环境,并准备 Android 设备或模拟环境。
在真实应用或 PhoneWorld 模拟应用中运行手机操作任务。
使用任务验证和评测结果比较不同训练方案。


