论文记录 · 证据边界公开

EgoHTR: Egocentric 4D Demonstrations of Human Terrain Traversal

arXiv · 2026-07-15 · 人类视频到机器人动作

论文元数据

作者: Alex Brandes、Haig Conti Georges Sajelian、Manthan Patel、Dominik Hollidt、Chenhao Li、Matthias Heyrman、Oliver Hausdoerfer、Manuel Kaufmann、Xi Wang、Jonas Frey、Angela P. Schoellig、Christian Holz、Marc Pollefeys、Marco Hutter
机构: ETH Zurich、Stanford University、University of California Berkeley、Technical University of Munich
发布日期精度: 日
研究方向: 人类视频到机器人动作
机器人: 未关联具体机器人
DOI: 未披露
arXiv: 2607.13472
引用元数据: 0
记录状态: included
质量检查: 无自动质量红旗

工程资源状态

代码: 已核验未发布
权重: 已核验未发布
数据: 已核验未发布
许可证: 未核验

当前实践优先级

观察 · 66/100 · 0–1 个月

研发注意力：55/80 · 近期跨域高潜·社区待验证

工程落地：11/15 · 量化实机证据＋工程实用增量

标准分类标签：颠覆性分支

路线评审说明：人类地形数据到人形控制颠覆性分支

社区证据类型：尚无独立社区验证

多传感 4D 人类—崎岖地形对齐、厘米级精度门槛和 G1 感知模仿共同指出一条区别于奖励工程的路线；但数据/代码仍是 coming soon，G1 没有真机成功率，因此先列当前可实践观察而非里程碑。

近期窗口 · 35/35
发布距评分基准日 1 个月，落入 0–1 个月窗口。
社区可复查验证 · 0/25
没有可下载数据、实现、策略或独立 G1 复现；项目页视频不计社区验证。
跨领域技术创新 · 20/20
把 egocentric SLAM、IMU 动捕、3D 扫描、4D 人体场景重建、脚接触标注和人形感知模仿统一到同一数据链。
量化实机证据 · 6/10
G1 展示两段实体横梁/上箱动作；量化提升和五种子曲线来自仿真，真机次数、成功率和跌倒率未给出。
开放与可复现 · 0/5
项目页当前明确写 Dataset/Code coming soon，没有下载、固定版本、许可证或策略 checkpoint。
工程实用增量 · 5/5
0.05m 可容忍、0.1m 以上训练崩溃的精度阈值为低成本采集替代路线提供了可直接检验的停止条件。

社区可复查证据：尚未收录；Stars、forks 与作者演示不计社区验证。

证据缺口：缺少显式可复查社区复现/部署证据；开放与复现条件不足；代码和数据尚未发布；昂贵多传感采集栈；逐动作专家而非统一策略；静态场景且无手部；真机统计缺失；无独立复现

当前实践分只决定今天的阅读与最小验证优先级；近期、社区验证和跨领域创新合计 80/100，不会把前沿观察条目自动升级成候选或确认里程碑。社区维度只有显式独立证据才能得高分，只有失败记录时必须标为社区反证。

每日候选人工终审

EgoHTR 用 Project Aria、Rokoko IMU 动捕、Leica BLK2GO 和可选外部视角构建 55 条、150k 帧、1.37 小时的场景对齐人类崎岖地形运动，并用 0.7 小时动捕真值校准局部/全局误差；Unitree G1 的横梁与上箱体动作证明数据可进入感知模仿链路。它是人类地形数据到人形控制的高价值新分支，但 G1 只有公开视频和仿真五种子曲线，没有真机试验次数/成功率；项目页当前又明确标注 Dataset 和 Code 均 coming soon，不能把论文中的开放承诺写成已下载开放。

实机证据：quantified_capture_and_simulation_with_unquantified_unitree_g1_deployment；55 条序列、8 名参与者、7 个场景、1.37 小时/约 150k 帧，另有 0.7 小时标记式动捕真值。五种子仿真中 stepping-stones 加脚接触奖励后最大成功率由 67% 提至 72%、50% 收敛步数由 7.14e8 降至 5.72e8；G1 展示 beam 与 box-up 两段实机执行，但无逐任务真机次数、成功率、跌倒率或长期运行统计。

硬件/本体：Unitree G1、Project Aria Gen 1、Rokoko Smartsuit Pro II、Leica BLK2GO、GoPro Hero 10

红旗与边界：Dataset 与 Code 均为 coming soon，不得写成已开放；G1 实机只有公开视频，没有次数、成功率、跌倒率和方差；训练是逐 reference clip 的专家策略，不是统一通用地形策略；静态场景、未纳入手部、没有关节式物体；完整采集需要昂贵 Aria、Rokoko 与 BLK2GO 设备；无独立复现

查看资源 · code · 状态 announced_coming_soon_not_released · 许可证 not_disclosed
项目页按钮明确显示 Code (coming soon)；网站仓库只证明项目页和媒体，不含论文重建/训练实现。
查看资源 · data · 状态 announced_coming_soon_not_downloadable · 许可证 not_disclosed
项目页可浏览统计和演示，但 Dataset (coming soon)，没有匿名下载、申请表、文件清单、固定版本或数据许可证。
weights · 状态 not_released · 许可证 not_disclosed
Unitree G1 感知模仿策略 checkpoint 和部署包未发布。

论文入库不等于代码、权重或数据开放；“承诺开放”“声称开放”和“已核验可下载”严格分开。

原始来源

最近核验：2026-07-21。链接存在不等于官方仓库、可运行、已开放权重/数据或许可证允许使用。

训练算力(显卡)	未披露
训练时长	未披露
部署推理硬件	Unitree G1
显存/内存/CPU 占用	未披露
运行效率(Hz)	未披露

论文元数据

算力与训练档案 置信 medium · 模型 glm-5.3 · 更新 2026-09-03T06:27:13Z

算力与训练档案置信 medium · 模型 glm-5.3 · 更新 2026-09-03T06:27:13Z