论文记录 · 证据边界公开

DeWorldSG: Depth-Aware 3D Semantic Scene Graph Generation via World-Model Priors

ECCV 2026 / arXiv preprint · 2026-07-01 · incremental RGB-D 3D semantic scene graph generation for embodied spatial reasoning

论文元数据

作者: Seok-Young Kim、Abdelrahman Elskhawy、Taewook Ha、Dooyoung Kim、Eunjae Shin、Benjamin Busam、Woontack Woo
机构: 机构尚未补齐
发布日期精度: 日
研究方向: incremental RGB-D 3D semantic scene graph generation for embodied spatial reasoning
机器人: no physical robot platform evaluated
DOI: 未披露
arXiv: 2607.00889
引用元数据: 0
记录状态: included
质量检查: 无自动质量红旗

工程资源状态

代码: 已核验未发布
权重: 已核验未发布
数据: 已核验未发布
许可证: 未核验

当前实践优先级

观察 · 57/100 · 2–3 个月

研发注意力：53/80 · 近期跨域高潜·社区待验证

工程落地：4/15 · 量化实机证据＋工程实用增量

标准分类标签：主流技术2.0

路线评审说明：空间语义图技术2.0·深度与世界模型融合·真实扫描离线·代码声明未兑现

社区证据类型：尚无独立社区验证

DeWorldSG用3D高斯对象节点、跨帧关系聚合和V-JEPA2先验显著提升3DSSG/ReplicaSSG，A6000上108.53毫秒/帧；但无机器人闭环，Code按钮仍为Coming Soon，官方仓只有网页素材。

近期窗口 · 32/35
发布距评分基准日 2 个月，落入 2–3 个月窗口。
社区可复查验证 · 2/25
论文表格、项目演示和固定网页仓可查；论文声称的代码与模型实际未发布，也没有社区重跑。
跨领域技术创新 · 19/20
把RGB-D检测、概率3D高斯节点、时序关系证据、V-JEPA2先验和SLAM位姿串成增量空间语义图。
量化实机证据 · 0/10
3DSSG含真实室内扫描，但没有物理机器人平台、在线闭环导航/操作或实机试验。
开放与可复现 · 0/5
项目Code为空且标Coming Soon；无算法、权重、split、环境、日志或软件许可证。
工程实用增量 · 4/5
预测位姿下仍保持关系图增益并给出模块时延，但48 GB A6000、108.53毫秒和2D类别漂移限制端侧长期运行。

社区可复查证据：尚未收录；Stars、forks 与作者演示不计社区验证。

证据缺口：缺少显式可复查社区复现/部署证据；开放与复现条件不足；量化实机证据不足；论文开放声明与项目Coming Soon冲突；单张48 GB A6000为108.53毫秒/帧；V-JEPA2相对DINOv2的普通Recall边际增益较小；2D类别漂移会重复建点和碎片化关系；无代码、权重、数据处理产物、许可证、机器人闭环和独立复现

当前实践分只决定今天的阅读与最小验证优先级；近期、社区验证和跨领域创新合计 80/100，不会把前沿观察条目自动升级成候选或确认里程碑。社区维度只有显式独立证据才能得高分，只有失败记录时必须标为社区反证。

每日候选人工终审

DeWorldSG把RGB-D检测实例表示为深度过滤后的3D高斯节点，跨帧合并对象/关系，再只在高不确定边上融合V-JEPA2视频先验。在3DSSG的1,482次真实RGB-D扫描和ReplicaSSG上，关系/物体/谓词Recall达到50.2/75.0/57.3，前一强基线FROSS为27.9/62.4/33.0；使用ORB-SLAM3预测位姿时仍为37.4/33.8/42.8。单张RTX A6000 48 GB上14,400帧平均108.53 ms，其中关系细化69.39 ms、SAM分割25.26 ms；消融显示世界模型相对DINOv2只带来0.7关系Recall、0.4物体Recall和0.7谓词Recall，但mRecall增益更明显。局限是2D类别跨帧漂移会创建重复节点。更关键的是论文声称代码与模型已开源，官方项目页Code却明确Coming Soon且href为空；固定GitHub仓只有20个网页/图片/视频blob、约149 MB，无算法、权重、数据、环境或LICENSE。它是高价值空间语义表示候选，但只有离线真实场景数据，没有机器人实机闭环，也不能计入已开放制品。

实机证据：real_world_rgbd_scan_benchmark_only_no_physical_robot_closed_loop_or_robot_trial；3DSSG来自478个真实室内环境的1,482次RGB-D扫描，能证明方法处理真实感知数据；但论文没有机器人本体、在线传感器流、导航/操作任务、闭环控制、功耗或端侧部署。项目视频是数据集场景可视化，不是物理机器人实验。

硬件/本体：3DSSG/3RScan real indoor RGB-D scans、ReplicaSSG rendered indoor scenes、ORB-SLAM3 predicted camera trajectories

红旗与边界：论文写code and models are open-sourced，但官方Code按钮仍为Coming Soon且href为空；108.53 ms/帧只在单张48 GB RTX A6000上测，不是低算力端侧结果；关系细化69.39 ms和SAM分割25.26 ms占主要延迟；世界模型相对DINOv2的普通Recall增益较小，不能把全部相对FROSS提升归因于V-JEPA2；对比依赖统一标签映射，具体重跑代码与配置未开放；2D检测类别漂移会跨帧重复建点并破坏关系图；只有离线真实RGB-D扫描，无物理机器人闭环；代码、权重、split、日志、许可证和独立复现均缺

查看资源 · project · 状态 official_project_media_page_with_code_marked_coming_soon · 许可证 Website footer is CC BY-SA 4.0; repository has no LICENSE and this does not license unreleased method code, weights or data
项目页列ECCV 2026、论文、方法和三段场景视频，但Code按钮文字为Coming Soon且href为空。固定网页仓c1d83c84792ae923213e2de06a670ac7bf50ad6a仅26路径、20个blob、约149,216,794字节，内容为网页、PDF、图片和MP4。
code · 状态 paper_claims_open_source_but_official_project_code_is_empty_and_only_site_repository_exists · 许可证 No DeWorldSG software license is disclosed
未开放检测/掩码、双域深度过滤、3D高斯合并、V-JEPA2探针、ORB-SLAM3接口、评测脚本、配置或环境。官方组织只有网页仓。
weights · 状态 no_detector_probe_or_deworldsg_checkpoint_found · 许可证 No model or derivative-weight license is disclosed
未找到2D检测器、关系模型、V-JEPA2探针、DINOv2消融或完整DeWorldSG模型权重。
data · 状态 uses_external_3dssg_and_replicassg_benchmarks_but_no_project_split_cache_or_output_release · 许可证 Upstream 3DSSG, 3RScan, ReplicaSSG, V-JEPA2 and detector assets retain separate terms; no project redistribution matrix is provided
作者没有开放所用split、标签映射、14,400帧运行清单、中间3D高斯、世界模型关系先验、预测位姿、完整图输出或错误案例数据。

论文入库不等于代码、权重或数据开放；“承诺开放”“声称开放”和“已核验可下载”严格分开。

原始来源

最近核验：2026-07-22。链接存在不等于官方仓库、可运行、已开放权重/数据或许可证允许使用。

训练算力(显卡)	未披露
训练时长	未披露
部署推理硬件	未披露
显存/内存/CPU 占用	未披露
运行效率(Hz)	未披露

论文元数据

算力与训练档案 置信 low · 模型 glm-5.3 · 更新 2026-09-02T07:43:03Z

算力与训练档案置信 low · 模型 glm-5.3 · 更新 2026-09-02T07:43:03Z