论文记录 · 证据边界公开

See like a Robot: Robot-Centric Pointmaps for Vision-Language-Action Models

arXiv · 2026-07-13 · 通用或轻量 VLA

论文元数据

作者: Byungkun Lee、Dongyoon Hwang、Dongjin Kim、Hojoon Lee、Minho Park、Jaegul Choo
机构: KAIST AI、Holiday Robotics
发布日期精度: 日
研究方向: 通用或轻量 VLA
机器人: 未关联具体机器人
DOI: 未披露
arXiv: 2607.11498
引用元数据: 0
记录状态: included
质量检查: 无自动质量红旗

工程资源状态

代码: 未核验
权重: 未核验
数据: 未核验
许可证: 未核验

当前实践优先级

高潜待持续验证 · 69/100 · 0–6 个月

路线标签：近期热门、机器人坐标3D感知主流技术2.0候选

社区证据类型：尚无独立社区验证

把 RGB-D 先对齐到机器人/末端坐标后再进入现有图像编码器，跨π0.5/SmolVLA并在FR3未见视角增益11.7点；代码仍soon且依赖精确标定。

近期窗口 · 35/35
发布距评分基准日 0 个月，落入 0–6 个月窗口。
社区可复查验证 · 0/25
无实现、权重、示范/标定或独立复现。
跨领域技术创新 · 19/20
把多视角几何、机器人动作坐标、稠密点图和预训练2D VLA最小改造结合。
量化实机证据 · 10/10
Franka FR3四任务、seen/unseen、每格15次；未见视角55.0→66.7%。
开放与可复现 · 0/5
官方仓只有项目媒体且 Code soon，无实现、checkpoint、标定和许可证。
工程实用增量 · 5/5
一条第二图像编码器加逐元素融合即可验证，20Hz/180示范和相机协议披露清楚。

社区可复查证据：尚未收录；Stars、forks 与作者演示不计社区验证。

证据缺口：缺少显式可复查社区复现/部署证据；开放与复现条件不足；需精确RGB-D标定；未测相机数/FOV变化；训练硬件未披露；代码soon；无权重数据；无独立复现

当前实践分只决定今天的阅读与最小验证优先级；近期、社区验证和跨领域创新合计 80/100，不会把前沿观察条目自动升级成候选或确认里程碑。社区维度只有显式独立证据才能得高分，只有失败记录时必须标为社区反证。

每日候选人工终审

See like a Robot 把 RGB-D 像素先变换到机器人/末端坐标系，保留 H×W 网格，用第二个图像编码器与 RGB token 逐元素相加，直接消除相机观测坐标与机器人动作坐标的结构错位。RoboCasa 中 π0.5 平均 55.3→62.9%，Franka FR3 四任务各 15 次下，seen 73.3→78.3%、unseen 55.0→66.7%。这是空间感知进入 VLA 的主流技术 2.0 候选，改动小且证据设计公平；代价是必须有准确深度和内外参，未测试相机数量/FOV变化，官方 DAVIAN-Robotics 仓固定提交只有项目页、论文和视频，页面明确 Code soon，无实现、权重、数据或许可证。

实机证据：quantified_franka_fr3_seen_unseen_camera_trials；四任务、seen/unseen 两视角、每格 15 次，即每模型 120 次。π0.5+pointmap seen 平均 78.3% 对 RGB 73.3%，unseen 66.7% 对 55.0%；训练有三外部相机位置、每任务每位置 15 示范，共 180 条。没有独立实验室复现。

硬件/本体：Franka Research 3、Intel RealSense D405 wrist camera、Intel RealSense D435i external camera、Meta Quest 3 teleoperation、π0.5、20 Hz control

红旗与边界：必须有可靠 RGB-D 与相机内外参；未测试相机数量和视场变化；训练硬件和完整训练成本未披露；官方仓只有项目媒体且无许可证；无代码、权重、示范、标定或独立复现

查看资源 · code · 状态 official_project_media_repository_no_implementation · 许可证 not_disclosed
固定提交 57 个文件均为 README、项目 HTML、论文、图片和实机视频；页面按钮明确 Code (soon)，没有 pointmap 构建、π0.5/SmolVLA 训练、评测或部署源代码。
weights · 状态 not_released · 许可证 not_disclosed
RoboCasa 和 Franka pointmap/RGB checkpoint 未发布。
data · 状态 real_robot_demonstrations_and_calibration_not_released · 许可证 not_disclosed
180 条 FR3 示范、三训练/一测试视角内外参、深度处理、评测日志和失败轨迹未开放。

论文入库不等于代码、权重或数据开放；“承诺开放”“声称开放”和“已核验可下载”严格分开。

原始来源

最近核验：2026-07-21。链接存在不等于官方仓库、可运行、已开放权重/数据或许可证允许使用。