【趣味应用】“老板来了!!”

简介: 用IoT Studio + ESP-EYE 搭建趣味人脸识别Demo,本文转载自阿里巴巴内部技术论坛,作者是阿里云智能IoT事业部UED小二,花名貔阁,在愚人节当天上传的物联网趣味应用分享。

底层互联网民工的苦衷

作为互联网设计民工,我们向往“快乐工作,认真生活”。无奈整天对着电脑,眼睛干涩,唇干舌燥。偶尔站起来活动活动,或者在表情分享群收集灵(biao)感(qing)的时候,被后面悄然靠近的老板拍拍肩膀,那感觉,简直是惊悚片现场,直接当前头发-10%!
image.png

“老板来了”解决方案!

在头发掉了40.951%之后,痛定思痛,秉着“今天最好的表现是明天最低的要求”的价值观,作为IoT设计民工,我们要改变这个情况!使用物联网的手段,做一个“老板来了”的“后视镜”提示!

我们要使用一个简单的摄像头识别老板,如果识别到老板,就往钉钉(八卦)群里紧急推送这个消息,这样就可以减少上班时的惊悚程度与掉发。

就差一个程序员?

然而,我们都是设计民工,不会写算法,更不懂服务器啊!就差(不止)一个程序员了?!

这时候,我们物联网事业部的低代码开发平台IoT Studio就派上用场了!我们决定使用基于Arduino环境的ESP-EYE摄像头WIFI模块 + IoT Studio搭建一个视频监控+告警的应用。

ESP-EYE识别“老板”

ESP-EYE是一款专注于图像识别与语音处理的开发板,板载ESP32芯片,集成200万像素摄像头、数字麦克风,拥有8 MByte PSRAM和4 MByte flash的丰富存储,支持Wi-Fi图像传输与Micro USB调试与供电,可广泛应用于智能物联网领域的应用开发。
image.png
image.png

200大洋的电路板实验

ESP-EYE兼容Arduino IDE,官方Github有直接提供示例程序。需要先安装开发板。这里略过Arduino IDE本身的安装。
在preferences里面加上这两行:
image.png

https://raw.githubusercontent.com/espressif/arduino-esp32/gh-pages/package_esp32_index.json

image.png
image.png
然后从官方下载源码,使用“CameraWebServer”进行改造。
image.png
CameraWebServer这个代码里,需要修改开发板类型定义的注释,如图
image.png
此外需要修改WIFI的信息。这里我修改为自己手机的热点。
image.png
选择对应的开发板进行Demo程序的烧录。
image.png
烧录成功之后,打开串口监视器,可以看到连上WIFI的ESP-EYE有反应了。
image.png
使用同一个热点(作者是手机热点所以直接手机浏览器打开即可)打开其上报的IP地址,可以看到推的流以及一些设置项,点击下方“start stream”开始推流。注意,这里的推流是基于局域网的,如果想用电脑看,电脑也要连到同一个热点才能用这个IP进行浏览。
image.png
image.png
看到了帅气但掉发的作者。
image.png
这样完成了ESP-EYE的初步调试。然后打开推流设置里的“Face Detection”和“Face Recogntion”选项,等待识别即可。下一步就是要将这个数据上报到阿里云了。

摄像头连接阿里云

在阿里云物联网平台,我们在设备接入中创建一个产品,命名为“ESP-EYE”。产品相当于一种“类”的定义,定义同样的功能,最后实例化为设备身份。

物联网平台这个产品有一定的免费额度,跑这个应用够用了

image.png
在这个产品里,我们定义一个FACE_ID的“属性”,用来表示目前识别到第几个人脸,目前第0个人脸就是老板。同时定义一个IP,方便接入不同的局域网(热点)时不需要重新输入IP地址完成推流展示。
image.png
然后创建一个设备,设备DeviceName命名为esp_eye_001,获得DeviceName和DeviceSecret,加上之前产品的ProductKey,构成一个完整的“三元组”完成设备身份上云的认证。
image.png
接下来我们在之前的Arduino测试代码上增加部分MQTT接入的代码。这里有一个取巧的地方,ESP-EYE与阿里云官方的DFRobot套装都是基于ESP32的,因此这部分固件可以通过重复使用DFRobot的代码完成构建。
image.png

image.png
加上上报topic和人脸识别/IP地址的属性配位符之后(见示例代码压缩包),烧录程序到ESP-EYE里。打开热点,看看数据有没有上报上来。
1585734428143-76b48aad-56d4-4314-9232-16f35a725620.gif
物联网平台人脸变化跟设备的subject编号对上了,KO!

IoT Studio告警应用

一个H5实时监控应用

数据上来了,当然要使用!我们使用IoT Studio做一个H5应用,能看到摄像头的实时状况,并且每当老板靠近的时候页面颜色变红!
在物联网平台IoT Studio页面,创建一个项目,叫“老板来了!”
image.png
将刚才的产品和设备导入到项目里。
image.png
并新建一个Web应用。
image.png
需要首先把Web应用的分辨率调整成手机使用的375*667。
image.png
首先加入一个iframe组件。用于接收ESP-EYE的推流。

1585738571754-62180acb-974e-4d45-8167-f03684b1ab09.gif
注意由于推流的IP地址是基于局域网的,实际使用的时候需要把电脑也连到同一个热点上。同时由于安全政策,IoT Studio使用基于http协议的iframe需要应用绑定已备案域名才能使用。
一个指示灯组件。用于更明显的提醒是否有目标人物靠近。
1585738603140-a906e0bd-c209-4306-b14b-4470a304c699.gif
最后改成这样,在开发态看不到效果。
image.png
发布之后绑定自己的域名。打开手机热点,将电脑和ESP-EYE都连上看看效果。
image.png

image.png
KO!

一个钉钉群告警

钉钉群里怎么能没有告警?每当检测到老板的时候,自动往钉钉群推送一个警告!
首先新建一个业务服务。
image.png
我们规定根据ESP-EYE上报的值是否为老板的faceID进行告警.
image.png
image.png
image.png
image.png
然后部署,用ESP-EYE试一试。
image.png
KO!

实践是检验真理的唯一标准

image.png
讲了那么多,把demo部署到现场试试看!

1585740607729-55b3c77a-6d73-49ea-9fc1-9f7dceac7224.gif

老板の反♂击♂

1585741139737-dc44d430-6954-42e2-a294-fbe61efac160.gif
听说阿里云IoT非洲分部缺设计师,你这么有才华,不如。。。

欢迎使用IoT Studio!

物联网开发服务(IoT Studio,原Link Develop),是阿里云针对物联网场景提供的生产力工具,可覆盖各个物联网行业核心应用场景,帮助您高效经济地完成设备、服务及应用开发。物联网开发服务提供了移动可视化开发、Web可视化开发、服务开发与设备开发等一系列便捷的物联网开发工具,解决物联网开发领域开发链路长、技术栈复杂、协同成本高、方案移植困难的问题,重新定义物联网应用开发。

以下为IoT Studio的案例,欢迎阅读:

IoT SaaS加速器——助力阿尔茨海默病人护理

https://yq.aliyun.com/articles/706042

IoT Studio + LoRa打造“又猛又持久”的智能厕所

https://yq.aliyun.com/articles/689174

如何用Link Develop开发一个智能厕所

https://yq.aliyun.com/articles/645793

相关实践学习
钉钉群中如何接收IoT温控器数据告警通知
本实验主要介绍如何将温控器设备以MQTT协议接入IoT物联网平台,通过云产品流转到函数计算FC,调用钉钉群机器人API,实时推送温湿度消息到钉钉群。
阿里云AIoT物联网开发实战
本课程将由物联网专家带你熟悉阿里云AIoT物联网领域全套云产品,7天轻松搭建基于Arduino的端到端物联网场景应用。 开始学习前,请先开通下方两个云产品,让学习更流畅: IoT物联网平台:https://iot.console.aliyun.com/ LinkWAN物联网络管理平台:https://linkwan.console.aliyun.com/service-open
相关文章
|
中间件
【加班但也开心的一天】
上班间隙和下班后以及周末开始学习百小僧前辈的Furion,也记不得什么时候开始,总算是看着文档把代码敲了一遍,代码写作风格、各种基础知识理论、优秀的中间件、第三方开源项目引荐,这一遍可能时间有点长,但收获良多。 ![请在此添加图片描述](https://developer-private-1258344699.cos.ap-guangzhou.myqcloud.com/column/article/5877188/20231031-0e03647a.png?x-cos-security-token=kcWkaWALSQ5t0gKzZRkVwYOOBJMLQ8Ra1130b97001e71ec5
38 0
【加班但也开心的一天】
|
SQL
职场晋升 | 和老板搞好关系这件事情很重要吗
在职场中,你是否有机会去做一些真正有成长的事,你的专业性是否能够得到足够的认可,你是否有机会去晋升,直接主管的态度往往有直接影响,因此,和老板建立健康良性的关系十分重要,搞好关系是做好事情、获得认可非常重要的辅助,但搞好关系不等于溜须拍马。用亲身经历6任老板的经验,结合思维模型,和大家分享“对上沟通”的话题。
66359 13
职场晋升 | 和老板搞好关系这件事情很重要吗
|
算法 小程序 数据挖掘
我985毕业生,凭什么和你专科生在一起上班?
我985毕业生,凭什么和你专科生在一起上班?
我985毕业生,凭什么和你专科生在一起上班?
|
缓存 NoSQL 程序员
老板真爱画大饼!
做好了给你画个饼!
老板真爱画大饼!
|
Linux 程序员 Shell
老板对我说,你要是能找出公司里摸鱼的人,我就给你涨薪!于是我写了两个脚本……
老板对我说,你要是能找出公司里摸鱼的人,我就给你涨薪!于是我写了两个脚本……
166 0
老板对我说,你要是能找出公司里摸鱼的人,我就给你涨薪!于是我写了两个脚本……
|
机器学习/深度学习 人工智能 程序员
上班要怎么摸鱼才不会被老板发现?
上班要怎么摸鱼才不会被老板发现?
414 0
上班要怎么摸鱼才不会被老板发现?
|
存储 算法 前端开发
老板,来瓶辣椒酱
最近网剧《隐秘的角落》非常的火爆,结局反转让人难以预料,但前两天发生了一场堪比史诗级大片的纠纷,纠纷的结局反转让人大跌眼镜,估计是神编剧都写不出来那样的剧本...而引发这场纠纷最核心的原因竟然是合同印章的真实性。
|
程序员
程序员月薪12k被老板逼走,换到国企月薪20k,还5点下班!
211,985学校本科毕业5年,UI,上一家创业公司12k,每天被老板嫌弃做得不好,加班不够多。   换了一家国企,工作轻松,5点多下班,月薪有20k。什么阿里腾讯我都不想去了   只能说太爽了,感谢前老板逼我走。
1936 0

相关实验场景

更多
下一篇
无影云桌面