返回项目库
MODULE ID:EMBODIED-SIGN-UAV
具身科研v0.8.0-alpha

Embodied UAV · 具身微型无人机视觉语言指路系统

15W边缘计算实时45FPS路标解码、开集多模态指令理解与气流漂移抑制

面向室内复杂多障碍非结构化走廊环境的具身微型无人机(UAV)自主导航核心。在仅有 15W 功耗的嵌入式算力板上,实现 45 FPS 的高保真物理指示牌检测、语义意图解译与六自由度飞控动作指令闭环。搭载改进型 MobileNetV4 骨干特征提取网与板载自适应扩展卡尔曼滤波 (EKF),在强室内扰动气流下依然保持厘米级路点循迹精度。

TARGET PLATFORMROS2 / Jetson Orin Nano
LINES OF CODE9,840
COMMITS LOGGED142
LICENSEApache-2.0
交互体验舱 · 站内试玩 / 实时模拟

硬件边缘端与 ROS2 物理在机工程

本项目运行于 Jetson Orin 边缘载板与 500FPS 工业相机,已开源 ROS2 驱动与 Gazebo / Isaac Sim 物理仿真包,可直接通过 GitHub 获取源码并研读雷达白皮书。

系统四阶架构拓扑图
01

前视鱼眼去畸变

120° 宽广视角视频帧硬件加速实时双线性插值去畸变

02

轻量路标检测分割

MobileNetV4 锚点网快速输出指示牌边界框与语义分割掩码

03

拓扑决策推理器

符号语言模型结合当前航向规划三维可行避障航点

04

PX4 姿态速率下发

通过 MAVLink 将速度与偏航角速度精确推送到飞行控制器

算法与性能调优视窗
复杂走廊多路标识别与航迹推演

实测 45 FPS 连续捕获转角应急指示标牌并解算航向角

ROS2 核心航迹控制节点

结合卡尔曼滤波的状态估计与安全禁飞区投影

// C++17 / GLSL Vector Kernel
constexpr auto SIMD_TICK = 50Hz;
机载功耗与感知延迟

在 Jetson Orin Nano 上的持续工况监测

端到端延迟21.5ms
平均整机功耗14.2W
航迹精度3.4cm
版本演进与发布日志
v0.8.0-alpha(2026-04-05)
  • 完成 Isaac Sim 真实工业厂房物理资产库的数字孪生对接
  • 将 MobileNetV4 算子替换为 TensorRT 8.6 优化内建核心
  • 增加突发强风阻抗自适应补偿模块

工程研讨与留言区

0
支持纯文本与 Markdown 代码块
// NO TRANSMISSIONS · 暂无评论信标

拒绝伪造虚假数据。登录 GitHub 发送第一条真实的工程探讨或反馈信标。

同频相关工程
WARP VECTOR ENGAGED
>> JUMPING TO:
COMPUTING TRAJECTORY PACKETS