Qoder 上新 Mobile Use,开始验证移动端应用

简介: Computer Use 已经可以操作电脑,Browser Use 可以进入正在使用的浏览器。Qoder 推出 Mobile Use 插件(Beta),在安卓、鸿蒙与 iOS 上将代码修改接入真机或模拟器,完成运行、交互与结果确认。

2.35_1 900_383-4.jpg


Computer Use 已经可以操作电脑,Browser Use 可以进入你正在使用的浏览器。移动端还没有对等的能力。


今天的 Coding Agent 已经可以修改安卓、鸿蒙与 iOS 代码,但往往止步于提交之前。移动端 app 是否成功构建,修改后的页面如何呈现,用户所指的是哪一个控件,点击之后是否进入正确页面,这些问题还需要解决。


因此,我们推出 Mobile Use 插件(Beta)。安卓、鸿蒙与 iOS 均可将代码修改接入应用运行,在设备上完成交互,并确认修改是否生效。


image (19).png


01.png


Mobile Use 面向正在开发中的手机应用


常见的 Mobile Agent 多用于“操作手机”,比如打开应用、填写表单、走完一段操作流程。Qoder 新上线的 Mobile Use 插件面向另一类场景:应用本身仍在开发与修改之中。


Agent 既要执行点击,也需要理解当前工程、构建目标、运行设备与界面状态。完成代码修改后,它重新运行应用,定位受影响的页面,执行必要交互,并以截图、日志、断言或测试结果证明本次修改有效。


点击与输入只是其中一步。需要完成的,是从代码变更到结果确认。


image (20).png


02.png


一次完整验证:从代码修改到结果确认


以一次界面修改为例。无论是布局、文案、点击反馈还是页面跳转,以往都需要自行完成构建、安装、在设备上操作,再对照代码。证据在设备上,代码在 IDE 中,中间依赖开发者在两端传递信息。若 Agent 只能依据文字描述和数秒前的截图,便容易改错位置。


现在可以将这项工作交给同一条会话中的 Agent。在 Canvas 上圈选出问题的区域,并在对话中发送:


我刚修改了界面上圈出来的这一处。请构建并运行应用,按圈选位置执行操作,截图确认结果是否符合预期。若不符,请对照代码修改,完成后再验证一次。


圈选给出的是具体控件和当前画面,Agent 可以同时使用截图、可访问性结构、控件文本和界面状态,而无须仅凭「这里不对」进行推断。它在同一台设备上执行操作、截取画面并对照结果:验证通过则返回结论;未通过则回到代码修改,并再次验证。


image (21).png


若结果不符合预期,可以在 Canvas 中直接看到它操作了哪一处、界面变成了什么样。下一轮仍使用同一台设备、同一条会话,无须重新描述现场。


image (22).png


03.png


三端接入方式不同,验证过程保持一致

安卓、鸿蒙与 iOS 的工程结构、构建工具、模拟器、测试框架和设备接口本就不同。Mobile Use 不会以一套最低能力将三端强行对齐。现有开发环境可以继续使用,不必另行准备仅供 Agent 使用的测试设备。


image (23).png


安卓仍然通过 Emulator、ADB 与 Instrumentation 工作。鸿蒙可以连接 DevEco Previewer、HDC 与 ArkXTest。iOS 则使用 Xcode Simulator、Accessibility 与 XCTest。平台差异由各自的适配器处理。


上层通过统一的 Skill 与 CLI,将这些能力提供给 Agent。需要对齐的是更上一层的开发过程:观察、操作与验证。

若某一平台或运行环境不具备某项能力,Mobile Use 会明确说明,而不会以一条不等价的命令冒充成功。


ADB、HDC 与 simctl 仍然是三条不同的命令。Agent 在三端进入的,是同一套观察、操作与验证流程。


image (24).png


04.png


开发者使用 Canvas,Agent 使用 CLI,共用同一台设备

开发者通过 Canvas 查看应用运行状态,在界面上观察、标注并检查结果。Agent 通过确定性的 CLI 查询设备、观察界面、执行操作并运行验证。


image (25).png


两侧接入 Host 管理的同一条设备会话。 Host 负责设备生命周期:当前连接、运行状态、权限范围,以及证据的归属。


因此,Agent 不会在后台另行启动一台模拟器,也不会因注册大量 MCP 工具(即为 Agent 注册工具接口)而形成一套与开发者割裂的设备环境。 CLI 只是智能体进入现有能力的入口。设备本身、权限、状态与证据,仍由统一运行时管理。


随后执行的操作作用于同一条设备会话。截图、日志、录像与断言结果也关联到该会话。「这里有问题」可以连同圈选与当前画面,成为 Agent 继续定位、修改与验证的任务入口。


立即体验

Mobile Use 插件已在 Qoder 桌面端与 Qoder IDE 中上新。


  1. 打开左下角的拓展或插件市场,搜索 Mobile Use,安装后重启。


  1. 在对应工程中双击以打开 Canvas:安卓双击 AndroidManifest.xml,iOS 双击 Package.swift,鸿蒙双击 build-profile.json5。


  1. 先连接模拟器或真机,将上文提示词发送给 Agent,并在 Canvas 上圈选需要验证的区域。


image (26).png

目录
相关文章
|
17天前
|
人工智能 运维 IDE
个人开发者AI编码利器,Qoder CN免费社区版详解,额度省钱技巧与典型落地场景
AI赋能研发已经成为软件开发领域的主流趋势,AI编码助手可以极大降低重复编码工作量,提升学习与开发效率。但市面上大量高质量AI编程工具普遍采用订阅付费模式,对于编程学生、业余爱好者、初级开发者来说,长期订阅会带来不小的经济负担,抬高了AI编程的入门门槛。为了普惠广大基层开发群体,降低AI编程落地门槛,原通义灵码完成品牌迭代升级,正式更名为Qoder CN,并且推出永久可用的免费社区版本。该版本配套独立Credits额度体系,普通用户不需要付费订阅,就可以使用专业级AI编码智能体能力,覆盖代码学习、脚本编写、小型项目开发、代码调试等轻量化开发场景。
283 0
|
15天前
|
IDE 开发工具
额度再翻倍!每天 2000 Credits!
Qoder宣布9月17-19日每日额度升至2000 Credits!付费用户每天12:00可通过IDE/桌面端/CLI领取,专用于Sonus模型。额度当日有效、不累计、过期作废。
400 4
|
22天前
|
IDE 开发工具
Qoder 上线 Sonus 模型,Computer Use 能力全面增强
Qoder国际版上线全新内置大模型Sonus(/ˈsoʊnəs/),全球领先,专精超长任务执行与电脑操作(Computer Use)。配合Qoder桌面端0.2.3版本,可自主完成编程、金融建模、科研及表格制作等复杂工作。现全面支持Qoder全系产品,效率提升3.2倍。
2040 9
Qoder 上线 Sonus 模型,Computer Use 能力全面增强
|
16天前
|
IDE 开发工具
额度翻倍!还有四天
Qoder推出Sonus模型专属福利:9月16-19日,付费用户每日12:00可领1000 Credits,用于全球顶级Sonus模型——支持编程、长程任务、专业软件操作及公式表格处理。登录Qoder各端活动入口即可领取。
328 0
|
22天前
|
人工智能 运维 IDE
阿里云Qoder系列子产品:Qoder CN、QoderWork CN、Qoder CN CLI、QoderWake CN对比与选择参考
Qoder CN、QoderWork CN、Qoder CN CLI、QoderWake CN 均属于 Qoder CN 系列产品,是同一产品家族下面向不同使用场景的子产品,个人版订阅一份即可在全系列产品间通用,Credits 跨产品共享。四者在核心场景、产品形态、交互方式和典型能力上存在明确分工:Qoder CN(IDE)面向软件开发全流程,QoderWork CN 面向日常办公与知识处理,Qoder CN CLI 面向终端原生开发与运维,QoderWake CN 面向岗位级数字员工的 7×24 自主运转。
|
21天前
|
存储 人工智能 JSON
知识库实战篇二:多轮攻防与真实流量实测
本期实战解析多轮对话核心机制:会话历史由调用方构造,平台零存储、零校验;实测第三轮权限不松动,但隐蔽假历史污染七成带跑;40问真实流量揭示75%售前挡率短板;成本分析显示91%花费在客户不可见的思考与检索过程。安全与成本优化聚焦会话历史治理。
知识库实战篇二:多轮攻防与真实流量实测
|
24天前
|
安全 UED iOS开发
全新 Qoder 桌面端,现已支持移动端控制
Qoder移动端全新升级:支持手机语音发起任务,本地文件直连编码;实时跟进多线程任务,锁屏处理授权;图文/PDF/HTML/Markdown等产物手机直览;企业级安全管控,保障代码不外泄。效率与安全兼得。
207 0
|
18天前
|
人工智能 云栖大会
来云栖大会聊个问题:怎么把 AI Coding 铺给一整个组织
云栖大会论坛邀请函: Qoder 助力 AI Native 超级组织; 9月22日下午杭州国际博览中心1期 301
170 0
|
24天前
|
人工智能 安全 IDE
Qoder CN v1.4.1完整实战指南:Agent式AI编程全流程拆解,从本地部署到企业级落地实操教程
Qoder CN v1.4.1最大的价值,是把AI编码从“代码片段生成”升级为完整Agent式工程任务执行。借助Quest任务引擎、RepoWiki记忆知识库、MCP工具扩展、Hooks安全机制,开发者只需要描述业务需求,智能体自主完成需求拆解、多文件修改、命令执行、测试验证完整链路。同时兼容CLI、IDE、插件多种形态,深度对接百炼平台各类订阅方案,既可以满足个人开发者提升开发效率,也具备完整权限管控、安全拦截、团队知识库能力,支撑企业规模化落地AI研发。
256 1
|
24天前
|
人工智能 安全 开发者
组织级 Harness 的建设路径:从 Better Harness 的实践启程
Better Harness 是面向 AI 编程代理(Agent)的观测与治理框架,聚焦“单点做成→团队复制→规模运营”三阶段演进。它串联跨 Agent、项目与设备的任务证据链,将执行数据转化为可验证、可复用、可治理的交付能力,助力个人提效、团队沉淀实践、组织规模化交付。
176 0

热门文章

最新文章