Kinect开发（三）——手势识别

最新推荐文章于 2025-05-15 09:31:20 发布
最新推荐文章于 2025-05-15 09:31:20 发布
阅读量1.8k 收藏 11
点赞数
CC 4.0 BY-SA版权
分类专栏： Kinect
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/JLX_Sir/article/details/119698873

此开发内容，以Kinect for Unity SDK 2.20插件进行开发，插件各版本下载链接SDK2.20  https://download.csdn.net/download/JLX_Sir/21059009

SDK2.19.2https://download.csdn.net/download/JLX_Sir/21070889

SDK2.16.2https://download.csdn.net/download/JLX_Sir/21070879

★开发要点：

1、需添加新脚本，并继承接口GestureListenerInterface、CloudFaceListenerInterface

2、GestureCompleted(long userId, int userIndex, KinectGestures.Gestures gesture, KinectInterop.JointType joint, Vector3 screenPos)方法

     需要在方法中对需要的手势进行注册监听

示例代码：

using System;

using System.Collections;

using System.Collections.Generic;

using UnityEngine;

using UnityEngine.UI;

using static KinectGestures;

namespace KinectStudy

{

    public class KinectUser : MonoBehaviour, GestureListenerInterface, CloudFaceListenerInterface

    {

        /// <summary>

        /// 背景—摄像头检测到的内容

        /// </summary>

        [SerializeField] private RawImage _kinectImage;

        /// <summary>

        /// 跟踪到的人索引，0为第一个人，1为第一个人

        /// </summary>

        [SerializeField] private int _playerIndex;

        /// <summary>

        /// 上一个用户Id

        /// </summary>

        private long _lastUserId = 0;

        private void Update()

        {

            KinectManager _kinectManager = KinectManager.Instance;

            //检测设备是否可用

            if (_kinectManager && _kinectManager.IsInitialized())

            {

                if (_kinectImage.texture == null)

                {

                    //从设备获取彩色数据

                    Texture2D _kinectPic = (Texture2D)KinectManager.Instance.GetUsersClrTex();

                    //把彩色数据给控件显示

                    _kinectImage.texture = _kinectPic;

                }

                #region 暂时弃用的（测试使用）

                //检测到玩家

                //if (KinectManager.Instance.IsUserDetected())

                //{

                //    //Debug.LogError("检测到玩家信息了");

                //    //获取用户ID

                //    long _userId = KinectManager.Instance.GetPrimaryUserID();

                //    //获取用户离Kinect的距离信息

                //    Vector3 _userPos = KinectManager.Instance.GetUserPosition(_userId);

                //    //Debug.LogError("用户距离Kinect的距离坐标为：" + _userPos);

                //    //获取左手信息

                //    int _jointType = (int)KinectInterop.JointType.HandLeft;

                //    //关节点被追踪到了

                //    if (KinectManager.Instance.IsJointTracked(_userId, _jointType))

                //    {

                //        Vector3 _leftHandlePos = KinectManager.Instance.GetJointKinectPosition(_userId, _jointType);

                //        //获取左手姿势

                //        KinectInterop.HandState _leftHandState = KinectManager.Instance.GetLeftHandState(_userId);

                //        if (_leftHandState == KinectInterop.HandState.Closed)

                //        {

                //            Debug.LogError("检测到左手握拳了");

                //        }

                //        else if (_leftHandState == KinectInterop.HandState.Open)

                //        {

                //            Debug.LogError("检测到左手张开了");

                //        }

                //        else if (_leftHandState == KinectInterop.HandState.Lasso)

                //        {

                //            Debug.LogError("检测到左手Yes手势了");

                //        }

                //    }

                //}

                //else

                //{

                //    Debug.LogError("未检测到玩家");

                //}

                #endregion

                //当前使用者Id

                long _userId = _kinectManager.GetUserIdByIndex(_playerIndex);

                if (_lastUserId != _userId)

                {

                    _lastUserId = _userId;

                }

                if (_userId == 0 && _userId != _lastUserId)

                {

                    _lastUserId = _userId;

                    //检测不到当前用户

                }

            }

            else

            {

                Debug.LogError("没有检测到Kinect设备");

            }

        }

        /// <summary>

        /// 对要检测的姿势进行定义

        /// </summary>

        /// <param name="userId"></param>

        /// <param name="userIndex"></param>

        public void UserDetected(long userId, int userIndex)

        {

            KinectManager _kinectManager = KinectManager.Instance;

            if (!_kinectManager || (userIndex != _playerIndex))

                return;

            //对要检测的手势进行添加监听

            foreach (Gestures _gestures in Enum.GetValues(typeof(Gestures)))

            {

                _kinectManager.DetectGesture(userId, _gestures);

            }

        }

        /// <summary>

        /// 对当前姿势进行识别

        /// </summary>

        /// <param name="userId"></param>

        /// <param name="userIndex"></param>

        /// <param name="gesture"></param>

        /// <param name="joint"></param>

        /// <param name="screenPos"></param>

        /// <returns></returns>

        public bool GestureCompleted(long userId, int userIndex, KinectGestures.Gestures gesture, KinectInterop.JointType joint, Vector3 screenPos)

        {

            if (userIndex != _playerIndex)

                return false;

            switch (gesture)

            {

                case Gestures.None:

                    break;

                case Gestures.RaiseRightHand:

                    ShuntHandSignal.Instance.HandSignalCarryOut(HandSignalType.Signal_Two);

                    break;

                case Gestures.RaiseLeftHand:

                    break;

                case Gestures.Psi:

                    ShuntHandSignal.Instance.HandSignalCarryOut(HandSignalType.Signal_Three);

                    break;

                case Gestures.Tpose:

                    ShuntHandSignal.Instance.HandSignalCarryOut(HandSignalType.Signal_One);

                    break;

                case Gestures.Stop:

                    break;

                case Gestures.Wave:

                    break;

                case Gestures.SwipeLeft:

                    break;

                case Gestures.SwipeRight:

                    break;

                case Gestures.SwipeUp:

                    break;

                case Gestures.SwipeDown:

                    break;

                case Gestures.ZoomIn:

                    break;

                case Gestures.ZoomOut:

                    break;

                case Gestures.Wheel:

                    break;

                case Gestures.Jump:

                    break;

                case Gestures.Squat:

                    break;

                case Gestures.Push:

                    break;

                case Gestures.Pull:

                    break;

                case Gestures.ShoulderLeftFront:

                    break;

                case Gestures.ShoulderRightFront:

                    break;

                case Gestures.LeanLeft:

                    break;

                case Gestures.LeanRight:

                    break;

                case Gestures.LeanForward:

                    break;

                case Gestures.LeanBack:

                    break;

                case Gestures.KickLeft:

                    break;

                case Gestures.KickRight:

                    break;

                case Gestures.Run:

                    break;

                case Gestures.RaisedRightHorizontalLeftHand:

                    break;

                case Gestures.RaisedLeftHorizontalRightHand:

                    break;

                case Gestures.TouchRightElbow:

                    break;

                case Gestures.TouchLeftElbow:

                    break;

                case Gestures.MoveLeft:

                    break;

                case Gestures.MoveRight:

                    break;

                case Gestures.UserGesture1:

                    break;

                case Gestures.UserGesture2:

                    break;

                case Gestures.UserGesture3:

                    break;

                case Gestures.UserGesture4:

                    break;

                case Gestures.UserGesture5:

                    break;

                case Gestures.UserGesture6:

                    break;

                case Gestures.UserGesture7:

                    break;

                case Gestures.UserGesture8:

                    break;

                case Gestures.UserGesture9:

                    break;

                case Gestures.UserGesture10:

                    break;

                default:

                    break;

            }

            return true;

        }

        /// <summary>

        /// 用户丢失

        /// </summary>

        /// <param name="userId"></param>

        /// <param name="userIndex"></param>

        public void UserLost(long userId, int userIndex)

        {

        }

        /// <summary>

        /// 姿势正在进行

        /// </summary>

        /// <param name="userId"></param>

        /// <param name="userIndex"></param>

        /// <param name="gesture"></param>

        /// <param name="progress"></param>

        /// <param name="joint"></param>

        /// <param name="screenPos"></param>

        public void GestureInProgress(long userId, int userIndex, Gestures gesture, float progress, KinectInterop.JointType joint, Vector3 screenPos)

        {

          

        }

        /// <summary>

        /// 当取消激活此方法时

        /// </summary>

        /// <param name="userId"></param>

        /// <param name="userIndex"></param>

        /// <param name="gesture"></param>

        /// <param name="joint"></param>

        /// <returns></returns>

        public bool GestureCancelled(long userId, int userIndex, Gestures gesture, KinectInterop.JointType joint)

        {

            if (userIndex != _playerIndex)

                return false;

            return true;

        }

        public void UserFaceDetected(int userIndex, UserGender gender, float age, float smile)

        {

            if (userIndex != _playerIndex)

                return;

            //后续待写

        }

    }

}

kinect笔记 三、识别手型（手部位置和手势）
anyan1858的博客
09-18 2129
在unity中获取手的位置 创建一个空物体，命名为KinectManager，给该物体绑定上KinectManager 和InteractionManager脚本 其中InteractionManager脚本上有三个纹理，Grip Hand Texture 是握拳，Release Hand Texture是手摊开的状态，Normal Hand Texture理论上应该是手呈半握状态...
Kinect Windows SDK 开发：手势识别
ugfdfgg的博客
11-03 4580
分享一下我老师大神的人工智能教程！零基础，通俗易懂！http://blog.csdn.net/jiangjunshow也欢迎大家转载本篇文章。分享知识，造福人民，实现我们中华民族伟大复兴！&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 像点击(clicks)
[译]Kinect for Windows SDK开发入门(十)：手势识别 上：基本概念
weixin_34417183的博客
04-21 1182
      像点击(clicks)是GUI平台的核心，轻点(taps)是触摸平台的核心那样，手势(gestures)是Kinect应用程序的核心。和图形用户界面中的数字交互不同，手势是现实生活中存在的动作。如果没有电脑我们就不需要鼠标，但是没了Kinect，手势依然存在。从另一方面讲，手势是日常生活中人与人之间相互交流的一部分。手势能够增强演讲的说服力，能够用来强调和传递情感。像挥手(wavin...
Kinect2.0鼠标控制体验：手势控制新篇章
最新发布
gitblog_06724的博客
05-15 502
Kinect2.0鼠标控制体验：手势控制新篇章 【下载地址】Kinect2.0鼠标控制体验 这是一个基于Kinect2.0的手势控制开发包，专为Windows 10系统设计。通过此工具，开发者可以轻松实现手势控制电脑程序的功能，为用户带来全新的交互体验。只需安装Kinect2.0 SDK，下载并解压资源文件，即可根据示例...
kinect-gesture:基于kinect 的人体 动作识别
05-16
Action recognition 基于kinect的人体动作识别系统。对应的 development environment（开发环境）： 程序描述：基于Kinect的人体动作识别系统 开发测试所用IDE版本：Visual Studio 2013 开发测试所用OpenCV版本： 3.0 beta 开发测试所使用硬件： KinectV2 Xbox 操作系统：Windows 10 Kinect SDK版本：KinectSDK-v2.0-PublicPreview1409-Setup 2017年4月 Created by @胡保林 Basic useful functions（基本功能）: Save file: 保存深度图像和骨骼图像到任意指定目录下 Detect： 可以检测人的左移右移、上蹦下跳等动作 Display: 可以实时显示深度图像和骨骼图像 Start/Exit：启动/退出 界
KinectGestures
a1305242233的博客
04-02 594
KinectGestures 原文链接 KinectGestures是管理和检测所有编程手势的组件，由被跟踪的用户执行。如果场景中有一个或多个手势监听器，请不要忘记添加KinectGestures组件，以便检测用户手势。 [外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-mbSjTeYR-1617252758187)( )] 属性: 描述: ...
Kinect 手势识别
海涛高软
06-22 9048
本篇文章是基于 Kinect v2 Examples with MS-SDK 2.10.1 这个Kinect的插件中的KinectGesturesDemo1这个demo来的KinectGestures.Gestures.Psi 双手伸直，微微向上抬起，这个手势比较容易识别KinectGestures.Gestures.Push 单手往前推， 但是这个手势识别精准度不高，然后双手做一个弓
Kinect手势识别理解
hehe_CSDNALS的博客
10-11 1392
文章转载自：https://blog.csdn.net/shenmifangke/article/details/50418698 有两种方式可以在unity工程里使用姿势检测 第一种很简单就是使用KinectManager，只是一个在例子场景主摄像机上的组件。有被称为“用户通用姿势（Player Common Gestures）”的列表。这里你可以放置任何在整个游戏中需要对每个人检测的姿势并且可...
Kinect 常用识别手势
weixin_34378767的博客
07-07 1431
以下手势能被流畅的识别： ◎RaiseRightHand/RaiseLeftHand–左手或右手举起过肩并保持至少一秒 ◎Psi–双手举起过肩并保持至少一秒 ◎Stop–双手下垂. ◎Wave–左手或右手举起来回摆动 ◎SwipeLeft–右手向左挥. ◎SwipeRight–左手向右挥. ◎SwipeUp/SwipeDown–左手或者右手向上/下挥 ...
tof摄像头手势识别_Time of Flight（飞行时间技术）——三维手势识别
weixin_39909001的博客
12-20 1329
原标题：Time of Flight(飞行时间技术)——三维手势识别三维手势识别需要的输入是包含有深度的信息，可以识别各种手型、手势和动作。相比于前两种二维手势识别技术，三维手势识别不能再只使用单个普通摄像头，因为单个普通摄像头无法提供深度信息。要得到深度信息需要特别的硬件，目前世界上主要有3种硬件实现方式。加上新的先进的计算机视觉软件算法就可以实现三维手势识别了。下面就让小编为大家一一道来三维手...
python手势识别上下左右(SVM+HOG特征)
12-21
在本文中，我们将探讨如何使用Python进行手势识别，特别是上下左右的手势，通过结合支持向量机（SVM）和方向梯度直方图（HOG）特征。这个项目主要涉及计算机视觉和机器学习，利用OpenCV库进行图像处理，以及scikit-...
Kinect手势
03-30
Kinect手势动态开发与识别，可以为广大学习者学习交流
基于Kinect深度图像信息的手势跟踪与识别
10-17
针对基于视觉的手势识别技术对环境背景要求较高的问题，提出了一种利用深度信息进行手势提取和识别的研究方案。采用Kinect深度摄像头，通过中值滤波以及深度信息与邻域特点来分割手部区域并用Canny算子提取出手势轮廓，再以深度图像的凸缺陷指尖来完成对指尖的检测，从而实现对数字手势1到5的手势识别。该方法可快速有效地对指尖进行检测，鲁棒性和稳定性都比其他方法更好。实验结果表明，该手势识别方案的平均识别率达到92％，证明了该方法的可行性。
kinectgestures:通过 Kinect (1.8.0) SDK 检测手势的 JavaScript 库
06-05
通过 Kinect (1.8.0) SDK 检测手势的 JavaScript 库 如何使用 安装来自 Microsoft 的 Kinect SDK 1.8.0和。 运行工具包中提供的 WebServer。 在 TootlKit 文件夹中的 WebServer 文件夹的 Content 文件夹中创建一个新的 HTML 文件，例如“gestures.html”：根据 WebServer 设置，它将在： gestures.html 中可用。 将添加到您的 HTML 将 （或）添加到您的 HTML 启动传感器： var sensor = Kinect . sensor ( Kinect . DEFAULT_SENSOR_NAME , function ( sensorToConfig , isConnected ) { // pass here your configurat
Microsoft kinect gestures
06-18
基于Microsoft kinect 的手势识别代码，代码已经简化，便于理解和应用与自己的app中，希望和大家一起学习
kinectV1 手势识别
05-14
本代码功能是利用kinect的图像采集功能和骨骼信息对实时视频的手势进行识别，可以识别手掌的伸开和紧握
双手控制(Two hands)_Hands_Kinect2控制_pc_手势_鼠标_
10-03
描述中的“可以通过Xbox的kinect2控制pc鼠标”进一步确认了这个系统的核心功能——利用Kinect v2（通常与Xbox关联，但也支持PC）的深度摄像头和骨骼追踪技术，识别用户的手部动作，并将这些动作转化为鼠标的移动和...
【Unity/Kinect】手势识别Gesture
weixin_33739646的博客
06-16 1296
在Unity的AssetStore官方商店下载Kinect v2 Examples案例包，参考KinectDemos/GestureDemo这个文件夹下的例子。 自定义一个类，实现KinectGestures.GestureListenerInterface接口。参考案例中的CubeGestureListener中的用法。下面演示监听SwipeLeft向左划，SwipeRight向右划，Swipe...
Kinect 开发 —— 常见手势识别（上）
weixin_30901729的博客
07-18 328
悬浮按钮 （Hover Button） 悬浮按钮通过将鼠标点击换成悬浮然后等待(hover-and-wait)动作，解决了不小心点击的问题。当光标位于按钮之上时，意味着用户通过将光标悬浮在按钮上一段时间来表示想选中按钮。另一个重要特点是悬浮按钮在用户悬浮并等待时，多少提供了视觉反馈。 必须使用一个计时器来记录当前用户光标停留在按钮上的时间。一旦用户的手的光标和按钮的边界交叉就开始计时。如果...
Kinect手势识别技术：基于骨架数据的操控新方法
Kinect手势识别技术是微软公司开发的一种能够捕捉和分析人类动作的交互技术，这一技术广泛应用于游戏和电脑操作之中。在讲述Kinect手势技术的基础上，我们将深入解析该技术是如何实现的，以及如何通过骨架数据进行...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值