论文记录 · 证据边界公开

Enhancing Vision-Based Policies with Omni-View and Cross-Modality Knowledge Distillation for Mobile Robots

arXiv technical report · 2026-03-21 · 视觉识别

论文元数据

作者: Kai Li、Shiyu Zhao
机构: Zhejiang University、Westlake University
发布日期精度: 日
研究方向: 视觉识别
机器人: Gazebo mobile robot、lightweight omnidirectional mobile robot
DOI: 未披露
arXiv: 2603.20679
引用元数据: 0
记录状态: included
质量检查: 无自动质量红旗

工程资源状态

代码: 已核验未发布
权重: 已核验未发布
数据: 已核验未发布
许可证: 未核验

当前实践优先级

观察 · 59/100 · 4–6 个月

研发注意力：47/80 · 证据分项观察

工程落地：12/15 · 量化实机证据＋工程实用增量

标准分类标签：主流迭代

路线评审说明：低算力视觉导航2.0·全景深度蒸馏到单RGB·真机结果未拆分

社区证据类型：尚无独立社区验证

四向深度teacher向单前视RGB student同时蒸馏动作和潜变量，使23.5M ResNet-50在Orin NX平均24.10ms、合并成功率72%；但80次仿真与20次真机被合并，官方仓仅README，尚不能把它当作可复现真机主流方案。

近期窗口 · 28/35
发布距评分基准日 5 个月，落入 4–6 个月窗口。
社区可复查验证 · 1/25
仓库固定提交可复查其只有README，但没有外部部署、指标或故障复现。
跨领域技术创新 · 18/20
把多视角深度、单目RGB、SAC expert、DAgger和表示蒸馏连接到低成本移动机器人边缘部署。
量化实机证据 · 7/10
论文报告20次实体导航并给出Orin机载延迟，但成功率与80次仿真合并，无法单独审计真机效果。
开放与可复现 · 0/5
官方仓没有代码、权重、数据或许可证。
工程实用增量 · 5/5
给出11.7M/23.5M学生的均值与p99延迟，可直接作为Orin视觉编码选型上限。

社区可复查证据：尚未收录；Stars、forks 与作者演示不计社区验证。

证据缺口：缺少显式可复查社区复现/部署证据；开放与复现条件不足；仿真与真机成功率未拆分；官方仓只有README；50,000元组、权重、TensorRT引擎未开放；Depth Anything V2另需约55ms；无独立复现

当前实践分只决定今天的阅读与最小验证优先级；近期、社区验证和跨领域创新合计 80/100，不会把前沿观察条目自动升级成候选或确认里程碑。社区维度只有显式独立证据才能得高分，只有失败记录时必须标为社区反证。

每日候选人工终审

该工作用四向深度teacher、单前视RGB student和动作/潜变量联合蒸馏，把多相机深度策略压缩到Jetson Orin NX。论文报告50,000个仿真与真实(state,image,action)元组、80次仿真导航及20次真机导航；最终表格把两类试验合并，不能读出单独真机成功率。ResNet-50 student为23.5M参数，TensorRT FP16编码平均24.10ms、p99 31.45ms，合并成功率72%，高于最强列出基线62%；ResNet-18为11.7M、16.85ms和67%。四向深度teacher为80%，但Depth Anything V2生成深度另需约55ms。官方robot-kd仓固定提交只有README且GitHub仓大小为0，没有README声称的environment.yaml、训练脚本、配置、数据、权重或许可证，因此它是有真机信号的低算力导航改进，不是已开放可复现方案。

实机证据：physical_navigation_trials_reported_but_aggregated_with_simulation；论文说明每个实验含80次仿真和20次真实场地导航，但成功率表没有拆分仿真/真机。真机机载延迟可量化，单独实体成功率、碰撞类型、人工接管和逐回合日志不可得。

硬件/本体：custom lightweight omnidirectional mobile robot、Jetson Orin NX 16GB at 25W、single front RGB camera

红旗与边界：80次仿真与20次真机成功率合并，无法单独计算实体效果；Depth Anything V2 teacher路径额外约55ms，不能与单RGB学生延迟直接等价；官方仓仅README且没有许可证；数据、权重、逐回合日志和独立复现缺失

查看资源 · code · 状态 official_placeholder_repository_readme_only · 许可证 No software license
固定提交只有README；仓库tree没有环境、训练、蒸馏、评测或部署文件。
weights · 状态 teacher_student_and_TensorRT_assets_not_released · 许可证 No model license
没有SAC teacher、DAgger student、TensorRT engine或checksum。
data · 状态 50000_mixed_sim_real_tuples_described_not_released · 许可证 No dataset license
50,000个仿真/真实混合元组没有分项数量、schema、文件、manifest或许可。

论文入库不等于代码、权重或数据开放；“承诺开放”“声称开放”和“已核验可下载”严格分开。

原始来源

最近核验：2026-07-22。链接存在不等于官方仓库、可运行、已开放权重/数据或许可证允许使用。

训练算力(显卡)	未披露
训练时长	未披露
部署推理硬件	Jetson Orin NX 16GB at 25W
显存/内存/CPU 占用	未披露
运行效率(Hz)	未披露

论文元数据

算力与训练档案 置信 low · 模型 glm-5.3 · 更新 2026-09-01T18:54:39Z

算力与训练档案置信 low · 模型 glm-5.3 · 更新 2026-09-01T18:54:39Z