智源社区 10小时前
一机迷航,双机成行!北航高低无人机协同导航方案:高空掌全局+低空查细节,复杂场景不迷航
index_new5.html
../../../zaker_core/zaker_tpl_static/wap/tpl_guoji1.html

 

北航刘偲教授团队提出了一种创新的高低无人机协同导航范式,打破了单台无人机在复杂环境中容易迷失方向的困境。该范式巧妙地将两台无人机进行分工:高空无人机扮演“全景指挥官”,负责全局感知和推理,构建统一的概率预测图;低空无人机则作为“地面侦察员”,执行精细导航和目标搜索。这种协同作战模式,能够快速、精准地定位湖边树下的汽车、小型目标,甚至根据目标文字描述或环境细节特征进行识别。为支持该任务,团队构建了HaL-13k数据集,并设计了AeroDuo协作框架,在仿真环境中验证了其有效性。该研究成果预计将发表于ACM MM 2025。

🌟 高低协同定位:该范式通过高空无人机的全局感知与推理,以及低空无人机的精细导航与目标搜索,实现了复杂环境中目标的高效定位。高空无人机提供概率分布图,低空无人机据此进行搜索,有效解决了单无人机在视野和导航精度上的局限性。

🎯 精准识别能力:协同系统不仅能定位宏观地标附近的目标,还能精准识别小型目标,甚至能根据目标上的文字描述或其周边环境的细节特征进行匹配和定位,展现了强大的环境理解和目标识别能力。

📊 数据集与框架构建:为支撑该研究,团队构建了HaL-13k数据集,这是在UAV-Need-Help数据集基础上补充了高空无人机数据的扩展。同时,设计了AeroDuo协作框架,并在Openuav仿真环境中进行了充分的验证,证明了其在高空覆盖、导航精度和自主性之间的平衡。

🧠 智能决策与规划:高空无人机采用Pilot-LLM多模态统一框架,利用大语言模型进行推理,并通过全局地图构建模块提升环境理解。低空无人机则采用三阶段导航搜寻策略,包括航点规划、强化学习避障和视觉语言模型目标检测,保证了任务的有效执行。

🚀 未来扩展潜力:该协同模式具备向多机协作扩展的潜力,可以通过优化算法将任务分配给多台低空无人机,进一步提升效率和覆盖范围。同时,通过补充真实环境数据训练模型,有望将系统从仿真环境迁移到实际应用场景。

无人机在复杂环境中不怕迷失方向了,迅速找到目标!

北航刘偲教授团队提出高低无人机协同导航新范式,两台无人机分工配合:高空无人机作为“全景指挥官”,负责全局感知与推理;低空无人机作为“地面侦察员”,执行精细导航与目标搜索,两者协同快速找到目标。

话不多说,来看实例。想让无人机“去湖边指定房子附近找到那辆停在树下的汽车”,单台无人机要么飞得太高,看不到树下的汽车;要么飞得太低,顾不上房子、湖泊这些宏观地标。单台无人机在复杂环境中容易迷失方向,但当高低空无人机协同作战,就能快速找到目标:

如下三张图分别从“前视图、高低无人机轨迹、概率预测图”角度,展示此方案如何工作:

像找小狗这样的小型目标,也能快速配合完成定位:

若目标物标有特定字母、文字描述也可精准匹配:

依据目标人物周边环境的细节特征,也能完成精准识别:

为支持该任务,团队基于UAV-Need-Help构建了HaL-13k数据集,并设计了协作框架AeroDuo。他们在Openuav仿真环境对AeroDuo测评,验证了其高低协同在环境覆盖、导航精度与自主性之间的有效平衡。

团队表示,本文研究成果将发表于ACM MM 2025。以下是更多细节。

数据集构建

考虑到UAV-Need-Help数据集中仅包含单无人机信息,研究团队在此基础上补充采集了高空无人机的轨迹与感知数据,并优化部分原始轨迹,构建出HaL-13k数据集。数据集构建示意图如下:

高空无人机规划策略

为提升高低无人机系统的感知与决策能力,研究团队构建了多模态统一框架Pilot-LLM,利用大语言模型进行多模态推理。

其中,为了更好地整合高空无人机历史信息,研究团队提出全局地图构建模块,通过正射投影消除畸变,并拼接历史图像生成统一坐标系下的地图,提升环境理解与目标定位能力。

此外,为避免精确坐标预测误差,采用轻量解码器生成目标概率分布图,兼顾探索能力与空间建模效果。

低空无人机导航搜寻策略

低空无人机采用三阶段导航搜索策略:首先,根据高空无人机的预测概率图选取高置信度区域的质心作为导航目标并结合A*算法规划关键航点;随后,利用基于强化学习的避障策略,实现安全灵活的路径执行;最后,通过视觉语言模型进行目标检测与定位。

团队表示,未来这套协同模式能轻松扩展到多机协作——在高空无人机预测出目标概率分布图后,它可以提取多个潜在目标位置,并借助优化算法(如匈牙利算法)将这些任务分配给各个低空无人机。

同时,通过优化动作控制确保安全避障,补充真实环境数据训练模型,也有助于将高低无人机系统从仿真环境中迁移到现实场景。

项目主页:https://rey-nard.github.io/AeroDuo_project/

一键三连「点赞」「转发」「小心心」

欢迎在评论区留下你的想法!

—  —

🌟 点亮星标 🌟

科技前沿进展每日见

内容中包含的图片若涉及版权问题,请及时与我们联系删除

Fish AI Reader

Fish AI Reader

AI辅助创作,多种专业模板,深度分析,高质量内容生成。从观点提取到深度思考,FishAI为您提供全方位的创作支持。新版本引入自定义参数,让您的创作更加个性化和精准。

FishAI

FishAI

鱼阅,AI 时代的下一个智能信息助手,助你摆脱信息焦虑

联系邮箱 441953276@qq.com

相关标签

无人机协同导航 高低空协同 目标定位 人工智能 计算机视觉
相关文章