跳到主要内容

手势识别

应用场景

RDK Studio 帮助零基础开发者快速上手,开启高效手势识别工作流:手势识别算法集成了人手关键点检测,手势分析等技术,使得计算机能够将人的手势解读为对应指令,可实现手势控制以及手语翻译等功能,主要应用于智能家居,智能座舱、智能穿戴设备等领域。

准备工作

支持连接 USB 和 MIPI 摄像头,本章节以 USB 摄像头为例进行说明,USB 摄像头连接方法如下: 接入摄像头图片

运行过程

  1. 点击 手势识别 示例下的 Node-RED。

    示例页面

  2. 进入示例应用流程界面。

    提示

    点击 RDK Studio 右上角 链接图标 图标可以快速在浏览器中打开示例!

    手势识别示例页面

  3. 选择连接摄像头的类型,点击对应的 启动 指令,等待大约 10s 后自动打开可视化窗口进行识别,并将识别到的结果通过语音播报。

    示例图片

  4. 性能信息输出:点击右侧调试图标将右侧边栏定位至调试窗口,可在调试窗口查看性能信息输出结果。

    示例图片

  5. 输出统计: 输出采集到的手势次数统计结果。

    示例图片

  6. 点击执行 关闭 指令,关闭摄像头。

    示例图片

    注意

    如果对节点、流程等进行了修改,需点击右上角 部署图片 按钮后才能生效!

  7. 点击右上角 × 图标,选择 “关闭程序” 退出 Node-RED 应用。

    示例图片

更多功能

可视化页面

  1. 点击执行 可视化界面 指令,自动打开 TogetherROS Web Display。

    示例图片

  2. 点击 Web Display, 进入可视化页面实时识别手势。

    示例图片

  3. 点击可视化页面右上角的 × 退出可视化页面。

了解更多

点击执行 了解更多 指令,可打开在线文档查阅有关示例的更多信息。

示例说明图片