视觉和语言-港科大 NMPC 控制下的高效自主导航!SkyVLN:城市环境无人机视觉语言导航与非线性模型预测控制 - MKT

视觉和语言-港科大 NMPC 控制下的高效自主导航!SkyVLN:城市环境无人机视觉语言导航与非线性模型预测控制 - MKT

image

  • 任务示例:
    • 无人机需要根据自然语言指令和第一人称视角的视觉感知完成导航任务。
    • 示例任务包括“经过交叉口后左转,沿着街道右侧飞行,与建筑物保持至少5米距离,将包裹送到下一个交叉口的六楼,然后继续飞到粉色建筑的大屋顶上”。

 

image

 

image