基于PAJ7620和STM32手势识别应用案例

发布时间:2024-03-22  

1.简介

 手势识别是计算机科学和语言技术中的一个主题,目的是通过数学算法来识别人类手势。 手势可以源自任何身体运动或状态,但通常源自面部或手。 本领域中的当前焦点包括来自面部和手势识别的情感识别。 用户可以使用简单的手势来控制或与设备交互,而无需接触他们。姿势,步态和人类行为的识别也是手势识别技术的主题。手势识别可以被视为计算机理解人体语言的方式,从而在机器和人之间搭建比原始文本用户界面或甚至GUI(图形用户界面)更丰富的桥梁。


手势识别使人们能够与机器进行通信,并且无需任何机械设备即可自然交互。 使用手势识别的概念,可以将手指指向计算机屏幕,使得光标将相应地移动。 这可能使常规输入设备(如鼠标,键盘甚至触摸屏)变得冗余。越来越多的电子设备都在使用手势识别功能。顾名思义,手势识别旨在识别人类的物理运动或“手势”。例如,在设备前面以特定模式挥动您的手可能会告诉它启动特定的应用程序,诸如此类的手势识别经常出现在智能手机和平板电脑中。


手势识别被分类为一种非接触式用户界面(TUI)。与触摸屏设备不同,TUI设备无需触摸即可控制。像Google Home和Amazon Alexa这样的语音控制智能扬声器是TUI的主要例子。

手势识别也打开了通向输入可能性的全新世界的大门。用户可以尝试其他基于手势的输入形式,而不是仅限于传统的输入形式。有些设备甚至允许用户设置自己的手势。

除智能手机和平板电脑外,手机识别还可用于汽车信息娱乐中心、视频游戏控制台、人机界面等。最重要的是,手势识别技术正变得越来越流行,并且没有任何迹象表明它会很快放慢速度。

2.PAJ7620介绍

PAJ-7620U2是由原相科技公司开发的一款手势识别芯片, 内集成了光学数组式传感器单元,可以快速准确的对输入信号进行感应和输出处理。内置光源和环境光抑制滤波器,能在黑暗或低光环境下工作。它支持上、下、左、右、前、后、顺时针旋转、逆时针旋转和挥动的手势动作识别,以及支持物体接近检测等功能。可大致检测物体体积大小和亮度。使用IIC通信接口可达400KHz通信速率。

⚫可直接识别 9 种基本手势,支持手势中断输出

⚫ 内置红外 LED 和光学镜头,能在低光和黑暗环境下工作

⚫ 支持 I2C 接口通信,仅需两根信号脚即可控制

⚫ 板载电平转换电路,可兼容 3.3V/5V 的逻辑电平

poYBAGKsPrKATaDzAAK_vikK3Ro138.png#pic_center

2.1 通讯方式

  PAJ7620使用IIC通信接口可达400KHz通信速率。
  功能模块框图如下所示:

在这里插入图片描述

其中, I2C_SCL 和 I2C_SDA 是连接 MCU 的 IIC 接口, MCU 通过这个 IIC 接口来控制PAJ7620,在上述框图可以看到,该芯片内部自带 LED 驱动器,传感器感应阵列、目标信息提取阵列和手势识别阵列。 芯片工作时通过内部 LED 驱动器,驱动红外 LED向外发射红外线信号,当传感器阵列在有效的距离中探测到物体时,目标信息提取阵列会对探测目标进行特征原始数据的获取,获取的数据会存在寄存器中,同时手势识别阵列会对原始数据进行识别处理,最后将手势结果存到寄存器中,用户可根据 I2C 接口对原始数据和手势识别的结果进行读取。

2.3 硬件驱动

  1.打开STM32CubeMX软件,配置手势识别引脚PB6(IIC_SCL)、PB7(IIC_SDA)。

在这里插入图片描述

2.设置引脚模式为推挽输出模式,初始化电平为高电平。

在这里插入图片描述

3.软件实现

  1.通过手势实现时间切换、日期切换等;
  2.利用手势实现LED控制、蜂鸣器控制;
  3.实时时间校准,可通过串口校时;


3.1 串口校时

  通过自定义串口协议,通过串口调试助手获取PC端时间,完成RTC时间校准;发送数据格式为:*20220617121220。

  以 *作为起始标志,4字节年+2字节月+2字节日+2字节时+2字节分+2字节秒,字符串方式接收数据处理。


  if(usart1_flag)

  {

    printf("%srn",usart1_buff_rx);

    if(usart1_buff_rx[0]== '*')

    {

      DateToUpdate.Year=(usart1_buff_rx[3]-'0')*10+(usart1_buff_rx[4]-'0')*1;//年

      DateToUpdate.Month=(usart1_buff_rx[5]-'0')*10+(usart1_buff_rx[6]-'0')*1;//月

      DateToUpdate.Date=(usart1_buff_rx[7]-'0')*10+(usart1_buff_rx[8]-'0')*1;//日


      sTime.Hours=(usart1_buff_rx[9]-'0')*10+(usart1_buff_rx[10]-'0')*1;

      sTime.Minutes=(usart1_buff_rx[11]-'0')*10+(usart1_buff_rx[12]-'0')*1;

      sTime.Seconds=(usart1_buff_rx[13]-'0')*10+(usart1_buff_rx[14]-'0')*1;

      printf("time:%d/%d/%d -- %d:%d:%drn",DateToUpdate.Year,DateToUpdate.Month,DateToUpdate.Date,sTime.Hours,sTime.Minutes,sTime.Seconds);

      HAL_RTC_SetDate(&hrtc, &DateToUpdate,RTC_FORMAT_BIN);

      HAL_RTC_SetTime(&hrtc,&sTime,RTC_FORMAT_BIN);       

    }

    usart1_flag=0;

    usart1_count=0;

  }   

3.2 LED呼吸灯

  呼吸灯通过定时器PWM模式实现;设置定时器分频系数为72,周期时间为300us;


  TIM_ClockConfigTypeDef sClockSourceConfig = {0};

  TIM_MasterConfigTypeDef sMasterConfig = {0};

  TIM_OC_InitTypeDef sConfigOC = {0};


  /* USER CODE BEGIN TIM4_Init 1 */


  /* USER CODE END TIM4_Init 1 */

  htim4.Instance = TIM4;

  htim4.Init.Prescaler = 72;

  htim4.Init.CounterMode = TIM_COUNTERMODE_UP;

  htim4.Init.Period = 300;

  htim4.Init.ClockDivision = TIM_CLOCKDIVISION_DIV1;

  htim4.Init.AutoReloadPreload = TIM_AUTORELOAD_PRELOAD_ENABLE;

通过改变PWM波占空比来实现呼吸灯效果;


  if(flag==0)j++;

  else j--;

  if(j>=300)flag=1;

  if(j==0)flag=0;

  Delay_Ms(2);

  htim4.Instance->CCR3=j;//调节占空比

  htim4.Instance->CCR4=j;

3.3 手势识别检测

  PAJ7620支持上、下、左、右、前、后、顺时针旋转、逆时针旋转和挥动的手势动作识别。用户可根据 I2C 接口对原始数据和手势识别的结果进行读取。


复制

paj7620u2_selectBank(BANK0);//切换BANK0寄存器区域

status = GS_Read_nByte(PAJ_GET_INT_FLAG1,2,&data[0]);//读取手势状态

if(!status)

{

gesture_data =(u16)data[1]<<8 | data[0];

if(gesture_data) 

{

switch(gesture_data)

{

case GES_UP:  //向上 

printf("向上 Uprn"); 

          HAL_GPIO_WritePin(BEEP_GPIO_Port,BEEP_Pin, GPIO_PIN_RESET);//关闭蜂鸣器        

ledflash=1;     

break; 

case GES_DOWM:  //向下

          HAL_GPIO_WritePin(BEEP_GPIO_Port,BEEP_Pin, GPIO_PIN_SET);//开启蜂鸣器

printf("向下 Dowmrn");          

ledflash=1;      

break; 

case GES_LEFT: //向左

          if(rtc_stat==0)

            {

              rtc_stat=3;

            }

            else rtc_stat--;

            printf("rtc_stat=%dn",rtc_stat);

printf("向左 Leftrn");          

ledflash=1;      

break; 

case GES_RIGHT:  //向右

            if(rtc_stat==4)

            {

              rtc_stat=0;

            }

            else rtc_stat++;       

printf("向右 Rightrn");      

ledflash=1;      

break; 

case GES_FORWARD:  //向前      

printf("向前 Forwardrn");       

ledflash=1;     

break; 

case GES_BACKWARD: //向后        

printf("向后 Backwardrn");     

ledflash=1;     

break; 

case GES_CLOCKWISE:   //顺时针

printf("顺时针 Clockwisern");     

ledflash=1;     

break;

case GES_COUNT_CLOCKWISE:  //逆时针

printf("逆时针 AntiClockwisern"); 

ledflash=1;      

break; 

case GES_WAVE:

printf("挥动 Wavern");          

ledflash=1;     

break; //挥动

default:  ledflash=0; break;

}

}

}


pYYBAGKsPrSAOQ1-AA1qU3j0f1o432.png#pic_center

文章来源于:电子工程世界    原文链接
本站所有转载文章系出于传递更多信息之目的,且明确注明来源,不希望被转载的媒体或个人可与我们联系,我们将立即进行删除处理。

相关文章

    -2023年中国汽车手势交互发展研究报告》 三、手势识别六种技术路线 从技术路线来看,手势识别技术主要包括基于3D摄像头的结构光、ToF、双目成像,基于雷达的毫米波、超声波,以及基于生物电的肌电技术......
    路线 从技术路线来看,手势识别技术主要包括基于3D摄像头的结构光、ToF、双目成像,基于雷达的毫米波、超声波,以及基于生物电的肌电技术。   手势识别技术路线 来源:佐思汽研《2022-2023年中国汽车手势......
    鸟创新(TCL RayNeo)宣布建立战略合作伙伴关系,三方将联手开发低功耗的手势识别技术,共同推动AR体验迈向全新高度。此次合作将结合Prophesee领先的事件视觉传感技术、Ultraleap在手势识别技术......
    建立战略合作伙伴关系,三方将联手开发低功耗的手势识别技术,共同推动AR体验迈向全新高度。此次合作将结合Prophesee领先的事件视觉传感技术、Ultraleap在手势识别技术方面的专长,以及雷鸟创新在消费级AR硬件和软件开发方面的专业技术......
    建立战略合作伙伴关系,三方将联手开发低功耗的手势识别技术,共同推动AR体验迈向全新高度。此次合作将结合Prophesee领先的事件视觉传感技术、Ultraleap在手势识别技术方面的专长,以及雷鸟创新在消费级AR硬件和软件开发方面的专业技术......
    。 用户可以使用简单的手势来控制或与设备交互,而无需接触他们。姿势,步态和人类行为的识别也是手势识别技术的主题。手势识别......
    者在 VR 交互中更加热衷于使用自然手势与虚拟对象进行交互,手势交互具有自然性、多维性和高效性等特点 [2]。手势识别技术也是作为人机交互的重要组成部分,它以更自然、更符合人类习惯的交互形式 [3],能够......
    调试结果如图7 所示。 图7 系统调试结果 5   结束语 随着科技的进步与社会的发展,人类生活趋于智能化,智能识别技术与智能机器人一定是未来研究的热门课题,基于手势识别的小车运动控制系统将手势识别技术......
    (3):46-47+54. [4] 白旭,郭豆豆,杨学康,等.基于低纬度决策树算法的智能手语翻译手套[J].科技视界,2020(17):33-36. [5] 吴桐. 基于弹性传感器的手势识别技术研究[D......
    是接听电话,调节音量还是切歌,这些简单的操作都可以用手势来实现。 新的专利主要描述了一种可以被应用在腕上设备里的手势识别技术。苹果实现手势识别的关键在于“腕部关节动作”。当手腕活动时,它肯......

我们与500+贴片厂合作,完美满足客户的定制需求。为品牌提供定制化的推广方案、专属产品特色页,多渠道推广,SEM/SEO精准营销以及与公众号的联合推广...详细>>

利用葫芦芯平台的卓越技术服务和新产品推广能力,原厂代理能轻松打入消费物联网(IOT)、信息与通信(ICT)、汽车及新能源汽车、工业自动化及工业物联网、装备及功率电子...详细>>

充分利用其强大的电子元器件采购流量,创新性地为这些物料提供了一个全新的窗口。我们的高效数字营销技术,不仅可以助你轻松识别与连接到需求方,更能够极大地提高“闲置物料”的处理能力,通过葫芦芯平台...详细>>

我们的目标很明确:构建一个全方位的半导体产业生态系统。成为一家全球领先的半导体互联网生态公司。目前,我们已成功打造了智能汽车、智能家居、大健康医疗、机器人和材料等五大生态领域。更为重要的是...详细>>

我们深知加工与定制类服务商的价值和重要性,因此,我们倾力为您提供最顶尖的营销资源。在我们的平台上,您可以直接接触到100万的研发工程师和采购工程师,以及10万的活跃客户群体...详细>>

凭借我们强大的专业流量和尖端的互联网数字营销技术,我们承诺为原厂提供免费的产品资料推广服务。无论是最新的资讯、技术动态还是创新产品,都可以通过我们的平台迅速传达给目标客户...详细>>

我们不止于将线索转化为潜在客户。葫芦芯平台致力于形成业务闭环,从引流、宣传到最终销售,全程跟进,确保每一个potential lead都得到妥善处理,从而大幅提高转化率。不仅如此...详细>>