动作捕捉系统用于飞行机械臂目标检测与定位算法验证-度量科技

无人机近些年发展迅速，可以实现检测、巡逻、航拍等功能，但是仍然不能与目标物进行交互，无法满足无人机作业中完成更复杂任务的需求。搭载多关节机械臂的旋翼飞行机械臂可以实现抓取等交互任务。

飞行机械臂在大多数环境下需要具有一定的独立获取和处理信息的能力，一个很重要的环节就是目标物的识别和定位，因此视觉系统的构建是关键问题。南京航空航天大学的研究人员设计了一种基于YOLOv5深度学习目标检测算法和RGB-D传感器的视觉识别和定位算法，可以实现飞行机械臂抓取时实时检测目标物并进行位姿估计。

动作捕捉系统用于飞行机械臂目标检测与定位算法验证

由于目前团队的飞行机械臂尚不支持完成完整的飞行抓取控制实验，研究人员在室内可控环境下对目标物位姿估计算法进行测试，通过简化实验验证该算法的有效性。实验中在摄像头和目标物上放置多个反光标识点分别建立刚体，利用NOKOV度量动作捕捉系统进行定位。

室内可控环境下对目标物位姿估计算法进行测试

NOKOV度量动作捕捉系统可以实时输出二者在世界坐标系下的位姿数据，由于定位精度高达亚毫米级，数据作为实际值，与视觉系统目标检测、拟合点云中心以及坐标转换的得到的测量值进行对比。通过向各方向移动摄像头模拟飞行机械臂飞行过程中相机的运动，测试算法的整体性能。

NOKOV度量动作捕捉系统实时输出高精度位姿数据

参考文献：[1]张睿,王尧尧,段雅琦,陈柏.面向飞行机械臂的实时目标检测与定位算法[J].南京航空航天大学学报,2022,54(01):27-33.DOI:10.16356/j.1005-2615.2022.01.003.

原文链接：https://kns.cnki.net/kcms/detail/detail.aspx?dbcode=CJFD&dbname=CJFDAUTO&filename=NJH

人形机器人如何实现 MuJoCo 仿真训练与遥操作？NOKOV度量动作捕捉助力宇树 G1实验验证

宁波职业技术大学利用 NOKOV 度量动作捕捉系统和宇树 G1 人形机器人，开展 MuJoCo 仿真训练与真机遥操作实验。实验中，操作者穿戴带有反光标记点的动捕服，NOKOV 度量动作捕捉系统实时采集人体运动数据，并同步驱动 MuJoCo 仿真环境中的宇树 G1 模型，同时实现真实机器人动作跟随。该案例展示了动作捕捉在人形机器人遥操作、动作映射、模仿学习及算法验证中的应用价值。

上海交通大学谢威老师团队：四旋翼无人机编队“8”字协同吊运｜NOKOV度量动作捕捉系统参与控制闭环

上海交通大学电子信息与电气工程学院谢威老师团队展示了4架四旋翼无人机完成“8”字编队协同吊运实验。实验中，NOKOV度量动作捕捉系统参与无人机控制闭环，实时输出高精度位姿数据，为无人机编队控制、协同运输及飞行算法验证提供稳定的位置反馈。

IEEE RA-L | Aqua-Splat声呐—视觉水下三维重建，NOKOV提供水下机器人六自由度位姿真值

哈工大（深圳）胡靓教授团队提出Aqua-Splat声呐—视觉水下三维重建方法，提升几何重建精度与图像保真度。NOKOV度量动作捕捉系统为搭载双目相机与前视声呐的BlueROV2水下机器人提供六自由度位姿真值，用于建立每帧视觉、声呐数据与机器人位姿之间的空间对应关系。

双层LSTM光纤形状实时重建，NOKOV度量动捕提供高精度三维真值

中科院深圳先进院刘奂奂团队基于 NOKOV度量动作捕捉系统，提出面向微创手术导航的双层LSTM光纤形状重建方法。NOKOV获取光纤标记点高精度三维坐标，作为模型训练真值，并验证动态重建精度与稳定性，助力实现FBG光谱到光纤三维形状的端到端实时重建。