小瓶RPA屏幕元素定位选择方法总结

在线体验各类最新模型,更有模型 免费Token 额度领取!
立即体验
简介: 小瓶RPA屏幕元素定位方法总结:离线4种(浏览器选择器🔍、图像识别🖼️、快捷键切换⌨️、OCR文字定位📝),高效稳定;在线1种(多模态AI大模型🤖,需Token)。按优先级排序,总有一款适配你的自动化场景!

小瓶RPA屏幕元素定位选择方法总结版本,优先级排序:

多重选择方法按照优先顺序,总有一个适合你 ✅


📴 离线4种:(不需要网络+高速)

①浏览器元素选择器定位 🔍(需要安装浏览器插件)

pbottle.browserCMD_click()

详细参考:

https://rpa.pbottle.com/docs/API%E6%B5%8F%E8%A7%88%E5%99%A8%E5%A2%9E%E5%BC%BA.html#%E5%85%83%E7%B4%A0%E9%80%89%E6%8B%A9%E5%99%A8

demo示例:WEB增强-账号密码登录演示.js


②屏幕图像选择定位 🖼️

pbottleRPA.waitImage()

返回目标坐标位置,可点击操作

demo示例:微信朋友圈自动点赞.js


③快捷键元素焦点切换定位 ⌨️

  • 多次按下 tab 键:pbottleRPA.keyTap('tab')

可确认输入等操作


④OCR文字定位 📝(需要开启OCR本地模型)

pbottleRPA.findText()

返回目标坐标位置,可点击操作

demo示例:文字提取查找OCR演示.js



🌐 在线1种(消耗token,额外大模型费用)

①多模态AI大模型 🤖

屏幕截图后:

pbottleRPA.cloud_GPTV("请返回图像中微信图标的位置", screenshot)

返回目标坐标位置,可点击操作

目录
相关文章
|
8月前
|
机器学习/深度学习 人工智能 并行计算
Transformer的核心:自注意力机制
自注意力机制是Transformer的核心,让序列中每个元素直接关联所有其他元素,实现全局信息交互。相比RNN的顺序处理和CNN的局部感知,它能并行计算、捕捉长距离依赖,并提供可解释的权重分布,彻底改变了序列建模方式,成为大模型崛起的关键基石。(239字)
|
3月前
|
人工智能 JSON 供应链
畅用7个月无影 JVS Claw |手把手教你把JVS改造成「科研与产业地理情报可视化大师」
LucianaiB分享零成本畅用JVS Claw教程(学生认证享7个月使用权),并开源GeoMind项目——将JVS改造为科研与产业地理情报可视化AI助手,支持飞书文档解析、地理编码与腾讯地图可视化,助力产业关系图谱构建。
23908 15
畅用7个月无影 JVS Claw |手把手教你把JVS改造成「科研与产业地理情报可视化大师」
|
5月前
|
存储 人工智能 Linux
2026年阿里云部署OpenClaw(Clawdbot)数据持久化存储保姆级教程
2026年,OpenClaw(前身为Clawdbot)作为轻量化AI自动化代理工具,在阿里云生态中得到广泛应用,其运行过程中产生的记忆数据、结果数据和运行日志是实现AI助手“永不遗忘”和功能可追溯的核心。随着使用时长增加,这类数据规模持续增长,本地存储不仅面临磁盘容量瓶颈,还存在数据丢失的风险。依托阿里云对象存储OSS(Object Storage Service)的弹性、低成本、高可靠特性,可实现OpenClaw全类型数据的持久化存储,让AI助手的运行数据得到安全留存与灵活管理。本文结合阿里云最新产品特性与OpenClaw v2026.2版本的适配要求,从数据存储需求分析、阿里云OSS挂载配
1139 1
|
1月前
|
存储 运维 Java
AgentScope Builder 快速体验:用 Harness 框架快速构建企业自进化智能体
AgentScope Java 发布 Claw 个人助手和 Builder 企业平台组件,基于 Harness 框架实现工作区驱动的自我进化,支持从单机到分布式多租户的无缝切换。
|
3月前
|
机器学习/深度学习 自然语言处理 搜索推荐
大模型应用:从粗排到大模型生成:交叉熵、余弦重排序的全流程实践.97
本文系统阐述检索排序“粗排→算法精排(交叉熵/余弦重排序)→大模型生成”三级架构,强调80%检索质量由排序算法决定:粗排快速召回,精排精准打分,重排序提升多样性,大模型仅负责最终润色与个性化生成,实现高效协同。
289 0
|
7月前
|
开发框架 人工智能 运维
AgentScope Java 首播来啦
12 月 11 日晚 19:30,阿里云云原生团队将做客 DataWhale「动手学 Java Agentic 应用开发」主题直播间,为大家实时带来 AgentScope Java v1.0 的深度解读,无论你是刚接触智能体的新手,还是正在探索企业级 AI 应用,这场直播都值得加入!
489 63
|
4月前
|
人工智能 Linux API
一行命令打造多龙虾Agent军团!阿里云/本地部署OpenClaw+多Agent+百炼api配置实战指南
2026年,AI代理框架OpenClaw凭借ACP协议与多Agent架构彻底颠覆AI协作模式,从早期单兵作战的草莽工具,进化为支持多智能体隔离、通道独立绑定、专业分工协同的正规军平台。中文社区亲切称其为**龙虾**,如今通过一行`openclaw agents add`命令,即可快速创建专属AI助手军团,实现写作、开发、作图、选题等任务的专业化分工,彻底告别上下文混乱、记忆污染、权限交叉等痛点。本文从多Agent核心逻辑讲起,提供完整命令、可直接复制的配置文件,同时覆盖2026年阿里云云端部署、MacOS/Linux/Windows11本地部署,以及阿里云百炼Coding Plan免费API配
1161 1
|
消息中间件 Prometheus 监控
基于 RocketMQ Prometheus Exporter 打造定制化 DevOps 平台
本文将对 RocketMQ-Exporter 的设计实现做一个简单的介绍,读者可通过本文了解到 RocketMQ-Exporter 的实现过程,以及通过 RocketMQ-Exporter 来搭建自己的 RocketMQ 监控系统。RocketMQ 在线可交互教程现已登录知行动手实验室,PC 端登录 start.aliyun.com 即可直达。
基于 RocketMQ Prometheus Exporter 打造定制化 DevOps 平台
|
存储 弹性计算 负载均衡
阿里云服务器地域、实例、带宽与操作系统等配置选择指南参考
在数字化时代,无论是个人博客、企业官网、APP后端支持,还是小程序运行或者其他项目,云服务器都扮演着至关重要的角色,考虑产品质量、服务和价格等因素,大家现在都喜欢选择阿里云服务器。然而,对于初次接触云服务的新手来说,可能并不是很清楚应该如何选阿里云服务器的地域、实例、带宽与操作系统等配置。本文将从地域选择、实例规格、操作系统、云盘配置、购买时长以及带宽选择等六个方面,为新手用户提供详细的选购指南,以供参考。
阿里云服务器地域、实例、带宽与操作系统等配置选择指南参考
|
机器学习/深度学习 监控 计算机视觉
测试 opencv-python 中的 mat 和 Umat 处理图像的差异(GPU加速)
测试 opencv-python 中的 mat 和 Umat 处理图像的差异(GPU加速)
1753 0

热门文章

最新文章