手势识别+柔性手臂,Imagination助力DoubleQ打造人形机器人灵巧手技术方案

随着人工智能(AI)技术的不断发展,机器人领域迎来了前所未有的技术变革。尤其是由AI 技术赋能的人形机器人,在人机交互、服务行业、医疗保健等领域的应用前景日益受到业界的关注。不久前,Imaginaiton重要的合作伙伴 DoubleQ 生态对外发布了最新的 AI 机器人技术:仿生手掌部位的手势识别和柔性手臂原型演示。

仿生手掌具有多个关节,能单独对每个手指进行控制,手腕处拥有一个转动自由度,可以进行手掌的翻转。手掌能够能够实现抓握等基本动作;柔性手臂具有多个自由度,可模仿人的手臂动作。“肩关节”处能够进行向前和向侧面抬升的动作,“小臂”能够围绕“肘关节”进行360 度方向的伸展和收缩。此演示依托 MediaPipe 实现了手势识别,并利用 OpenCV 完成实时手势捕捉,并与机械手联动,通过传输数据给 MCU 开发板,实现电机的驱动和控制,最后呈现出机械手同步人手手势的效果。


该机器手臂使用了亮衡AI 核心板 B100_A,其搭载了 紫光展锐的T710 芯片。该芯片采用了创新的异构双核架构,集成了Imagination 的GPU 和神经网络处理器 NNA 技术。得益于 T710 芯片的优异能效、商用成熟度以及Imagination 的先进 AI 技术,B100_A具备出色的图像处理能力和实时响应性,从而确保机器人在各种场景下都能流畅地运作。

在我们采访DoubleQ 时,CEO梁炜表示:“在人形机器人技术领域,我们深知每一步创新的重要性。而此次,得益于与Imagination Technologies的紧密合作及其卓越的IP技术,我们的AI核心板B100_A为DoubleQ的机器人生态带来了质的飞跃。”

此外,Imagination屡获殊荣的 NNA IP 具有高度可扩展性,专门设计用于加速边缘端机器学习工作负载。经过硅验证的该技术已经进入汽车、移动、AIoT和数据中心/桌面等多个市场。拥有多核架构的IMG 4 系列NNA 具有超高的单位面积性能,并且通过多核计算可以将最高性能扩展到500TOPS及以上。该架构上的亮点包括 Imagination Tensor Tiling,可以减少带宽的需求,配套的驱动和软件工具也十分完善。

值得一提的是,DoubleQ生态一直是 Imagination 的重要合作伙伴,自 2019 年起双方便展开了深度合作。为了推动 AI 技术的应用和落地,Imagination 作为协办方与 DoubleQ 生态、紫光展锐、桂林电子科技大学等伙伴连续举办了三届机器人开发者大赛,培养了不少优秀的AI 开发者。

在此次公布的仿生手掌部位的手势识别和柔性手臂原型演示中,我们也看到了Imagination IP 技术的应用和落地,希望未来Imagination 可以助力更多开发者打造“更聪明”的机器人方案。

最新文章