​

开源空中机器人

基于深度学习的OmniNxt全向视觉算法+OAK-4p-New 全景硬件同步相机

机器人的纯视觉避障定位建图一直是个难题：

系统实现复杂

纯视觉稳定性不高

很难选到实用的视觉传感器

为此多数厂家还是采用激光雷达的定位方案。

​

OAK-4p-New

为了弥合这一差距，我们提出了基于深度学习的  OmniNxt   全向视觉算法+  OAK-4p-New 全景硬件同步相机套装，这是一个具有全向感知的完全开源的空中机器人软硬件解决方案。

OmniNxt

OmniNxt能够在有限的计算资源占用下实现全向避障、精确定位和实时稠密建图。我们进行了大量的飞行实验，验证了OmniNxt在实际应用中的卓越性能。（效果如下）

【开源】利用四鱼眼相机设计实现全向视觉感知的开源空中机器人无人机

更多信息

OmniNxt所有硬件和软件均可在： https://github.com/HKUST-Aerial-Robotics/OmniNxt  找到；

我们提供了所提出系统中每个关键模块的docker镜像

项目页面：https://hkust-aerial-robotics.github.io/OmniNxt

~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~分割线

相机资料：https://www.oakchina.cn/product/oak-4p-new/

OAKChina官网：https://www.oakchina.cn/

OAK使用教程：https://docs.oakchina.cn/en/latest/

其他资料可以在B站、知乎等找到