研究方向
在安大略理工大学科研实习期间，参与了基于 Kinect 相机三维点云数据的手部识别项目，并将其与机器人系统进行集成。
指导教师：Prof. Haoxiang Lang。
项目概述
项目致力于构建一套利用 Kinect 相机采集的三维点云数据对人手进行识别与跟踪的系统，并将该识别能力与机器人系统融合，以支持人机交互场景下的应用。
技术工作
- 利用 Kinect 相机采集人手的三维点云数据
- 研究并实现基于点云数据的手部检测与识别算法
- 运用点云处理技术提取手部特征与手势信息
- 将手部识别系统集成到机器人平台，实现实时交互
- 开展实验验证，评估系统的识别精度与运行性能
成果
- 成功实现基于 Kinect 点云数据的三维手部识别
- 完成将手部识别与机器人系统融合的可运行原型
- 积累了在计算机视觉、三维点云处理与机器人方向的实践经验
- 为人机交互与手势识别研究贡献了有价值的实验成果
视频
- 手部识别与机器人集成 — 演示通过手部姿态发送指令，使机器人根据识别到的手部动作移动到不同位置。youtube.com/embed/qq9L5BcOeig
- 手势识别：数字识别 — 演示手部位置识别与手部移动速度的同步跟踪。youtube.com/embed/etjiZT4aRaQ
获奖
- Mitacs Globalink Research Internship — 作为第三位获资助的本科生入选
- Student Research Showcase 2016 — 作为实验室代表与 Katherine Pyra 共同进行演示与汇报
发表论文
- Hand Gesture Recognition and Motion Estimation using the Kinect Sensor — Bin Wang, Yunze Li, Haoxiang Lang, Ying Wang. Mechatronic Systems and Control, 2020.