本帖最后由 zz. 于 2025-11-6 18:00 编辑
项目介绍
本项目基于MediaPipe的hand_landmarker.task模块,将手部检测模型(hand_detector.tflite)与手部关键点检测模型(hand_landmarks_detector.tflite)部署至RK3588开发板。系统通过单目摄像头(IMX415)采集视频流,先由手部检测模型定位手掌区域并生成正方形ROI,再通过手部关键点检测模型提取21个关键点坐标,最终结合手势判别算法实现手势识别功能。在Ubuntu环境下,系统通过图形化界面实时显示推理结果,并通过UDP协议将RK3589板端数据同步传输至主机端进行可视化呈现,实现低延迟的端到端手势交互系统。
方案平台
本项目基于瑞芯微(Rockchip)RK3588平台,使用一个IMX415摄像头作为视频输入。
方案演示:
通过网盘分享的文件:基于RK3588平台的MediaPipe 21点手势识别及实时传输项目.rar
链接: https://pan.baidu.com/s/16W91p40KJu1yii0g4yHVWQ?pwd=tb5a 提取码: tb5a
|