AI运动识别插件-APP版新版特性速览

简介: 云智AI运动识别插件APP版1.0.6发布:新增相机直接拍照、帧图保存至临时文件功能,优化关键点追踪与跳绳算法,并推出Windows姿态调试工具,支持真机帧回放与关键点分析,提升开发调试效率。

云智AI运动识别插件APP版最近发布了1.0.6版,今天带您快速了解一下新版本发布的新特性,以便在后续开发场景中使用。

一、相机拍照操控能力

在本能力发布之前,如果需要调用相机拍照获取相机预览图像,只能抽帧状态下通过saveFrameToAlbumconvertFrameToBase64接口保存到相册或转换成Base64进行操作,这都需要在抽帧状态下才能调用,不方便控制拍照时机、也对比较消耗设备资源。本次在相机上下文中新增了直接拍照接口takePhoto,可以在直接在yz-ai-camera组件预览状态上拍照。

cameraContext?.takePhoto({
   
    width: 640,
    height: 480,
    mirror: false,
    success(res) {
   
        console.log('take-photo', res);
    },
    fail(err) {
   
        console.error('take-photo', err);
    }
});

二、帧图像保存至临时文件能力

在原来已有的将帧图像保存至相册和转换成Base64的基础上,再新增将帧图像保存至临时文件接口saveFrameToTemp,方便将帧图析解析后进行人脸识别、后台留存等场景操作。

cameraContext?.saveFrameToTemp({
   
    frame: frame,
    success(res) {
   
        console.log('save temp', res);
    },
    fail(err) {
   
        console.error('save album', err);
    }
});

三、新的关键点追踪器和跳绳运动算法

本次发布对关键点追踪器PointTracker跳绳运动检测算法进行了全面优化,可以更好的抑制关键点噪声检出峰谷跳变。

四、姿态调试辅助工具

由于插件在人体和运动检测时,绝大部分应用场景是通过设备相机实时抽帧进行识别的,而受限于开发工具模拟器能力、图像缩放和抽帧特性等因素,导致开发者在调试人体、运动检测及适配姿态运动检测时,无法直观的查看帧图像及人体检测结构。
基于以上原因,我们为插件调用开发者提供了一个“运动构建调试工具”,工具为 Windows 桌面应用,可直接运行于开发机器接收真机调试的人体和帧结果;开发者可通过工具进行帧回放调试、关键点提取等,后续我们将推出更丰富的辅助功能。

工具同时支持接收APP小程序版本插件的帧图像回传。

image.png

更多特性可以参考插件文档中的版本历史。

相关文章
|
2月前
|
小程序 Java 关系型数据库
基于微信小程序的自习室座位预约系统
本文探讨了基于微信小程序的自习室预约管理系统的设计与实现。针对传统管理模式效率低、资源浪费等问题,系统采用Java语言、SSM框架、MySQL数据库和B/S结构,结合微信小程序的便捷性,实现座位在线预约、实时更新与智能管理,提升资源利用率与用户体验,推动智慧校园建设。
|
2月前
|
存储 传感器 人工智能
AI 十大论文精讲(八):知识蒸馏如何让大模型 “瘦身不减能”
本篇解读DistilBERT,一篇解决大模型落地难题的里程碑论文。面对BERT等大模型参数多、耗能高、部署难的问题,DistilBERT提出预训练阶段知识蒸馏,结合三重损失与轻量化设计,在保留97%性能的同时,模型缩小40%,推理提速60%,推动NLP迈向高效、绿色、边缘化应用。
523 8
|
2月前
|
人工智能 开发框架 小程序
“体重管理年”AI运动应用开发解决方案推荐
为响应国家“体重管理年”号召,单位可借助AI运动识别技术,通过小程序或APP开展职工健身管理。支持日常锻炼记录、线上打卡、竞赛比拼等场景,实现运动自动计数、数据可视化与榜单激励。利用“AI运动识别插件”,可快速开发定制系统;也可选用成熟SaaS平台,低成本高效落地,助力全民健康行动。
|
10月前
|
人工智能 JSON 小程序
【一步步开发AI运动APP】七、自定义姿态动作识别检测——之规则配置检测
本文介绍了如何通过【一步步开发AI运动APP】系列博文,利用自定义姿态识别检测技术开发高性能的AI运动应用。核心内容包括:1) 自定义姿态识别检测,满足人像入镜、动作开始/停止等需求;2) Pose-Calc引擎详解,支持角度匹配、逻辑运算等多种人体分析规则;3) 姿态检测规则编写与执行方法;4) 完整示例展示左右手平举姿态检测。通过这些技术,开发者可轻松实现定制化运动分析功能。
|
人工智能 小程序 搜索推荐
成功案例分享|使用AI运动识别插件+微搭,快速搭建AI美体运动小程序
今天给大家分享一个最近使用我们的“AI运动识别小程序插件”+“微搭”搭建小程序的经典案例。
成功案例分享|使用AI运动识别插件+微搭,快速搭建AI美体运动小程序
|
机器学习/深度学习 人工智能 小程序
【一步步开发AI运动小程序】三、运动识别处理流程
随着人工智能技术的发展,阿里体育等公司推出的“乐动力”、“天天跳绳”等AI运动APP备受关注。本文将引导您从零开始开发一个AI运动小程序,使用“云智AI运动识别小程序插件”。文章介绍了视频帧、帧率FPS、抽帧和人体识别等基本概念,并详细说明了处理流程,包括抽帧、人体识别检测、骨骼图绘制和运动分析等步骤。下篇将介绍如何在小程序中实现抽帧。
|
人工智能 小程序
【一步步开发AI运动小程序】二、引入插件
随着人工智能技术的发展,阿里体育等公司推出的“乐动力”、“天天跳绳”等AI运动APP广受欢迎。本文将引导您从零开始开发一个AI运动小程序,使用“云智AI运动识别小程序插件”。内容包括新建uni-app项目、配置插件、部署模型、安装依赖包、全局初始化和调用插件对象。
|
10月前
|
人工智能 小程序 API
【一步步开发AI运动APP】四、使用相机组件抽帧
本文介绍了如何使用`ai-camera`组件开发AI运动APP,助力开发者深耕AI运动领域。`ai-camera`是专为AI运动场景设计的相机组件,支持多平台,提供更强的抽帧处理能力和API。文章详细讲解了获取相机上下文、执行抽帧操作以及将帧保存到相册的功能实现,并附有代码示例。无论是AI运动APP还是其他场景,该组件都能满足预览、拍照、抽帧等需求。下篇将聚焦人体识别检测,敬请期待!
|
10月前
|
人工智能 小程序 开发者
【一步步开发AI运动APP】六、运动计时计数能调用
本文章介绍了如何通过【一步步开发AI运动APP】系列博文,利用uniAPP插件开发高性能的AI运动应用。文中详细说明了创建运动分析器、进行运动分析、监听计数变化以及停止/重置分析等功能实现步骤。插件内置多种常见运动(如跳绳、俯卧撑等),支持自定义扩展,满足健身、体测等场景需求。示例代码展示了人体检测、运动计时计数及UI更新的完整流程,帮助开发者快速上手并深耕AI运动领域。
|
10月前
|
人工智能 小程序 API
【一步步开发AI运动APP】五、人体检测能力调用
本文介绍如何开发性能更强、体验更优的AI运动APP,涵盖人体检测、实例创建、检测识别、骨骼图绘制及完整代码实现。通过API `createHumanDetector`,可灵活配置高性能、高精度或多人检测模式,省去模型部署麻烦。检测结果可通过`yz-pose-grapher`组件高效渲染骨骼图。最后提醒使用完毕需调用`destroy()`释放资源,下篇将聚焦运动检测分析,敬请期待!

热门文章

最新文章