电力电子技术
登录
直播中
王桂兰
7年用户
1192经验值
私信
关注
[问答]
如何用无源传感器PIR搭建属于自己的手势识别模块?
开启该帖子的消息推送
无源传感器
PIR
手势识别
主流的手势识别方法及其原理是什么?
各种手势识别方法的优缺点是什么?
都是手势识别有什么区别吗?如何用无源传感器PIR搭建属于自己的手势识别模块?
回帖
(1)
李斌
2021-7-5 09:28:29
有小伙伴可能会困惑,都是手势识别有什么区别吗?
先来看一下本期项目的演示效果:
简单普及一下目前市面上主流的手势识别方法及其原理:第一大类最常用的肯定是摄像头检测,其识别流程一般分为手势图像抓取、手势分割、手势特征提取,手势检测四大部分,其识别的灵敏度和准确度由摄像头和处理算法决定。另外一大类是利用传感器来检测手势变化,常见的有APDS-9960模块。模块实际上是环境光传感器,通过芯片上的红外发光二极管发射红外光后再利用光电二极管检测四个方向反射过来的红外能量,即检测挡光的状态,所以能检测手左右以及上下移动。但是缺点也十分明显,因为发射的红外线受室外光强影响较大,所以模块的识别距离只有20厘米左右。
APDS-9960实现的手势控制鼠标与利用光反射原理的模块不同,本次要分享的项目是利用热源位置检测实现的。PIR传感器是无源的,即PIR设备不会为了检测而产生或辐射能量,是完全通过检测物体发射或反射的红外线(热辐射)来工作的。那什么是热辐射呢?一切温度高于绝对零度的物体均会以辐射形式散发热能,但是通常这种辐射对于人眼是不可见的,因为它以红外波的形式向外辐射即热辐射,但是我们可以设计检测红外辐射的电子设备。(PS:疫情期间的额温计,以及车站里的热成像仪就是利用此原理)
热成像测温
讲完以上,跟大家总结一下各种手势识别方法的优缺点
接下来跟大家分享今天的手势识别项目:
本次分享的项目要使用的芯片TPA81,也是防盗报警器中常用的热释电传感器(检测到人体后打开外部照明灯以及拉响警报)。当前很多PIR传感器都配有外壳和透镜来获得更宽的检测视野(约100°)。同样的TPA81内置透镜,能够同时检测相邻的8个点的温度,最远可以检测到两米范围内的蜡烛火焰而不受环境光的干扰。
TPA81热释电传感器PIR传感器相当于一个只能看到物体温度的摄像机,那么TPA81就是一款具有8像素分辨率的热像仪,我们可以按照对摄像头手势识别的图像处理算法来对PIR传感器使用。硬件上的搭建十分简单,TPA81支持IIC协议并且与Arduino兼容,只需要按照下图连接即可。
小伙伴们可以用TPA64来取代有点过时的TPA81,嫌传感器贵(TPA81约一百元)的可以用8个甚至多个单像素点的PIR传感器来代替它形成传感器阵列,如下图所示:
准备好以上,就开始进入到这个项目的重点也是难点,软件算法部分。在连接Arduino并下载好TPA81库后运行下段代码:
代码很简单,运行后我们便可以在串口监视器中看到如下结果:
这是8阵列传感器TPA81检测到的温度结果,每行的第一个数是总温度。因为要做手势识别,所以我们将手放在传感器面前得到手部温度是29°并将此设为标准值。随后通过下段代码将检测到的大于29°的数值用“#”打印,小于的用“。”来表示,变可以得到如下数据图,即手势运动的粗略图像:
现在我们已经得到手势运动的粗略轨迹了,接下来便是运用图像处理的算法来检测手势。本项目采用了一种简单的识别方法,即判断8像素阵列中温度大于29°的像素点的个数和位置的变化。在音量增加和减少两种手势中,传感器得到的数值变化趋势大致如下图所示:
然后通过将左四列和右四列的 * 个数分布加和比较,即可判断是音量增加还是减少哪种手势。然后再将指令传递给OLED屏幕即可实现。
本文只是一篇抛砖引玉的文章,算法看起来并不复杂,你可以按照这个思路构建传感器阵列,并打造属于自己的手势。这样的私人订制款手势识别模块可识别的手势多且范围远,且可自由定义!
有小伙伴可能会困惑,都是手势识别有什么区别吗?
先来看一下本期项目的演示效果:
简单普及一下目前市面上主流的手势识别方法及其原理:第一大类最常用的肯定是摄像头检测,其识别流程一般分为手势图像抓取、手势分割、手势特征提取,手势检测四大部分,其识别的灵敏度和准确度由摄像头和处理算法决定。另外一大类是利用传感器来检测手势变化,常见的有APDS-9960模块。模块实际上是环境光传感器,通过芯片上的红外发光二极管发射红外光后再利用光电二极管检测四个方向反射过来的红外能量,即检测挡光的状态,所以能检测手左右以及上下移动。但是缺点也十分明显,因为发射的红外线受室外光强影响较大,所以模块的识别距离只有20厘米左右。
APDS-9960实现的手势控制鼠标与利用光反射原理的模块不同,本次要分享的项目是利用热源位置检测实现的。PIR传感器是无源的,即PIR设备不会为了检测而产生或辐射能量,是完全通过检测物体发射或反射的红外线(热辐射)来工作的。那什么是热辐射呢?一切温度高于绝对零度的物体均会以辐射形式散发热能,但是通常这种辐射对于人眼是不可见的,因为它以红外波的形式向外辐射即热辐射,但是我们可以设计检测红外辐射的电子设备。(PS:疫情期间的额温计,以及车站里的热成像仪就是利用此原理)
热成像测温
讲完以上,跟大家总结一下各种手势识别方法的优缺点
接下来跟大家分享今天的手势识别项目:
本次分享的项目要使用的芯片TPA81,也是防盗报警器中常用的热释电传感器(检测到人体后打开外部照明灯以及拉响警报)。当前很多PIR传感器都配有外壳和透镜来获得更宽的检测视野(约100°)。同样的TPA81内置透镜,能够同时检测相邻的8个点的温度,最远可以检测到两米范围内的蜡烛火焰而不受环境光的干扰。
TPA81热释电传感器PIR传感器相当于一个只能看到物体温度的摄像机,那么TPA81就是一款具有8像素分辨率的热像仪,我们可以按照对摄像头手势识别的图像处理算法来对PIR传感器使用。硬件上的搭建十分简单,TPA81支持IIC协议并且与Arduino兼容,只需要按照下图连接即可。
小伙伴们可以用TPA64来取代有点过时的TPA81,嫌传感器贵(TPA81约一百元)的可以用8个甚至多个单像素点的PIR传感器来代替它形成传感器阵列,如下图所示:
准备好以上,就开始进入到这个项目的重点也是难点,软件算法部分。在连接Arduino并下载好TPA81库后运行下段代码:
代码很简单,运行后我们便可以在串口监视器中看到如下结果:
这是8阵列传感器TPA81检测到的温度结果,每行的第一个数是总温度。因为要做手势识别,所以我们将手放在传感器面前得到手部温度是29°并将此设为标准值。随后通过下段代码将检测到的大于29°的数值用“#”打印,小于的用“。”来表示,变可以得到如下数据图,即手势运动的粗略图像:
现在我们已经得到手势运动的粗略轨迹了,接下来便是运用图像处理的算法来检测手势。本项目采用了一种简单的识别方法,即判断8像素阵列中温度大于29°的像素点的个数和位置的变化。在音量增加和减少两种手势中,传感器得到的数值变化趋势大致如下图所示:
然后通过将左四列和右四列的 * 个数分布加和比较,即可判断是音量增加还是减少哪种手势。然后再将指令传递给OLED屏幕即可实现。
本文只是一篇抛砖引玉的文章,算法看起来并不复杂,你可以按照这个思路构建传感器阵列,并打造属于自己的手势。这样的私人订制款手势识别模块可识别的手势多且范围远,且可自由定义!
举报
更多回帖
rotate(-90deg);
回复
相关问答
无源传感器
PIR
手势识别
如何实现基于MEMS加速度
传感器
的
手势
识别
系统的设计?
2021-12-20
2709
STM32驱动PAJ7620
手势
识别传感器
知识点分享,绝对实用
2021-12-17
3281
一般的
手势
传感器
有哪些型号?
2023-10-30
220
使用ADUX1020实现
手势
识别
基础
2020-08-19
2883
接近
手势
操作检测在汽车人机界面领域应用
2020-05-04
1790
Labview课程设计,需要做
手势
控制
器
,求大神帮忙!
2014-11-17
3151
SAW
传感器
在
无
源
标识
器
中有哪些应用?
2021-05-19
1569
如何设计一个
手势
识别
装置?
2021-11-12
1140
智能
无
源
无线
传感器
一站式方案解决物联网感测设计挑战,不看肯定后悔
2021-05-18
2595
使用SensorTile
识别
手势
2018-09-10
2767
发帖
登录/注册
20万+
工程师都在用,
免费
PCB检查工具
无需安装、支持浏览器和手机在线查看、实时共享
查看
点击登录
登录更多精彩功能!
首页
论坛版块
小组
免费开发板试用
ebook
直播
搜索
登录
×
20
完善资料,
赚取积分