English 日本語 Русский

动作捕捉系统用于飞行机械臂目标检测与定位算法验证

动作捕捉系统用于飞行机械臂目标检测与定位算法验证

客      户
南京航空航天大学
关  键 词
动态捕捉、飞行机械臂、位姿估计
被捕捉物
飞行机械臂

无人机近些年发展迅速,可以实现检测、巡逻、航拍等功能,但是仍然不能与目标物进行交互,无法满足无人机作业中完成更复杂任务的需求。搭载多关节机械臂的旋翼飞行机械臂可以实现抓取等交互任务。

飞行机械臂在大多数环境下需要具有一定的独立获取和处理信息的能力,一个很重要的环节就是目标物的识别和定位,因此视觉系统的构建是关键问题。南京航空航天大学的研究人员设计了一种基于YOLOv5深度学习目标检测算法和RGB-D传感器的视觉识别和定位算法,可以实现飞行机械臂抓取时实时检测目标物并进行位姿估计。

动作捕捉系统用于飞行机械臂目标检测与定位算法验证

由于目前团队的飞行机械臂尚不支持完成完整的飞行抓取控制实验,研究人员在室内可控环境下对目标物位姿估计算法进行测试,通过简化实验验证该算法的有效性。实验中在摄像头和目标物上放置多个反光标识点分别建立刚体,利用NOKOV度量动作捕捉系统进行定位。

室内可控环境下对目标物位姿估计算法进行测试

NOKOV度量动作捕捉系统可以实时输出二者在世界坐标系下的位姿数据,由于定位精度高达亚毫米级,数据作为实际值,与视觉系统目标检测、拟合点云中心以及坐标转换的得到的测量值进行对比。通过向各方向移动摄像头模拟飞行机械臂飞行过程中相机的运动,测试算法的整体性能。

NOKOV度量动作捕捉系统实时输出高精度位姿数据

参考文献:[1]张睿,王尧尧,段雅琦,陈柏.面向飞行机械臂的实时目标检测与定位算法[J].南京航空航天大学学报,2022,54(01):27-33.DOI:10.16356/j.1005-2615.2022.01.003.




原文链接:https://kns.cnki.net/kcms/detail/detail.aspx?dbcode=CJFD&dbname=CJFDAUTO&filename=NJH

惯性式上肢动作捕捉系统开发

西安交通大学机械工程学院陕西省智能机器人重点实验室施虎老师团队利用惯性传感器开发了一套低成本、高灵活性的上肢动作捕捉系统,为机械臂遥操作任务提供了更自然、更高效的人机交互方案。NOKOV度量光学动作捕捉系统提供了人体上肢运动的高精度位置和姿态数据,助力惯性动捕系统性能评估。

IEEE RAL 足式机器人鲁棒状态估计 精度较基线提升40%以上

山东大学研究团队发表面向绳驱动连续体机器人的融合非线性扩展状态观测器的自适应滑模跟踪控制方法,度量动捕为实验提供机器人末端执行器位姿数据,助力验证控制方法有效性。

室外环境无人车动作捕捉

清华大学李翔老师团队在室外环境下对无人车进行动作捕捉。NOKOV度量抗日光版本动捕镜头过滤日光干扰,准确识别无人车表面的反光标记点,获取高精度运动轨迹。

IJRR | 北航团队提出机器人复合分层抗干扰框架:实现无人机边飞边学

北航杭研院郭克信老师团队在IJRR上发表FORESEER机器人复合分层抗干扰框架,研究在五种不同构型的无人机平台上进行了室内外大量实验,通过四类代表性任务系统验证框架的性能。 NOKOV度量动作捕捉系统为实验提供了无人机在室内执行飞行任务时的高精度位姿数据及轨迹信息,助力验证FORESEER框架处理各种不确定性的有效性。
联系我们
如需更多应用、案例信息或产品报价,请致电 010-64922321,或在下方留言:
机器人/无人机 VR/AR/XR 运动康复 传媒娱乐
北京度量科技有限公司(总部)
Location 北京市朝阳区安慧里四区15号五矿大厦8层820室
Email info@nokov.com
Phone 010-64922321
提交成功!请您耐心等待!
欢迎关注公众号,获取更多信息
关闭