论文记录 · 证据边界公开

CLIPort: What and Where Pathways for Robotic Manipulation

CoRL 2021 / arXiv · 2021-09-24 · 操作

论文元数据

作者: Mohit Shridhar、Lucas Manuelli、Dieter Fox
机构: University of Washington、NVIDIA
发布日期精度: 日
研究方向: 操作
机器人: fixed-base tabletop robot with RGB-D observation and pick-place primitive
DOI: 10.48550/arXiv.2109.12098
arXiv: 2109.12098
引用元数据: 0
记录状态: included
质量检查: 无自动质量红旗

工程资源状态

代码: 已核验开放
权重: 已核验可访问（使用限制见许可证）
数据: 已核验未发布
许可证: 许可证条款已核验（不等于可商用）

当前实践优先级

观察 · 45/100 · 37–60 个月

研发注意力：26/80 · 证据分项观察

工程落地：14/15 · 量化实机证据＋工程实用增量

标准分类标签：未达到专项标签门槛

社区证据类型：尚无独立社区验证

近期窗口 · 8/35
发布距评分基准日 59 个月，落入 37–60 个月窗口。
社区可复查验证 · 6/25
人工复核“独立复现”10/15；未附符合独立复现门槛的正向社区证据，本维度封顶 6/25。
跨领域技术创新 · 12/20
沿用人工复核“跨任务跨本体”3/5。
量化实机证据 · 9/10
沿用人工复核“量化实机证据”13/15。
开放与可复现 · 5/5
沿用人工复核“开放与长期复现”10/10。
工程实用增量 · 5/5
沿用人工复核“公平横评增量”14/15。

社区可复查证据：

官方代码、checkpoint、生成器、Docker 和限制文档提供可审计复跑面；后续广泛采用仅证明接口影响，不替代相同实机协议的独立复现
不把 GitHub 热度、视频或不同本体的下游实现计入核心实体证据

证据缺口：缺少显式可复查社区复现/部署证据

当前实践分只决定今天的阅读与最小验证优先级；近期、社区验证和跨领域创新合计 80/100，不会把前沿观察条目自动升级成候选或确认里程碑。社区维度只有显式独立证据才能得高分，只有失败记录时必须标为社区反证。

每日候选人工终审

CLIPort 将 CLIP 的语义表征与 Transporter 的空间交叉相关分为 what/where 两路，直接预测 pick/place affordance，形成早期语言条件视觉操作中可复跑且兼具零样本语义与平面几何归纳偏置的工程路线。官方项目报告一项多任务策略覆盖九项真实桌面任务、仅179个 image-action training pairs；官方 Apache-2.0 仓提供模拟数据生成、训练/评测、Docker、checkpoint 与模型卡。它仍是单固定工作台、SE(2) pick-place 范式，README 也明确不预测 z 值，不能把真实任务数量写成跨本体、人形或灵巧手泛化。

实机证据：author_quantified_fixed_base_multitask_protocol；官方项目页报告一个多任务策略覆盖九项真实任务、179 image-action pairs。平台、动作维度、相机、分母和失败轨迹不应由此补写为人形或移动操作结论。

硬件/本体：fixed-base tabletop manipulation、RGB-D observation、pick-place primitive

红旗与边界：九项真实任务是作者项目页陈述，不能与其他平台成功率组成统一排行榜；CLIPort 主要预测二维 SE(2) pick/place；README 明示不预测末端 z 值；代码 Apache-2.0 不覆盖 CLIP、Ravens、Google Scanned Objects、U-Net、checkpoint 或实机数据；全量数据生成约1.6TB、旧依赖和 batch-size=1 限制使今天的性能/成本横评需重新测量

查看资源 · paper · 状态 verified_public_primary_v1 · 许可证 arXiv nonexclusive distribution; not artifact license
原文定义 what/where 两流与动作中心表征，并报告模拟和真实桌面协议。
查看资源 · project · 状态 verified_official_project · 许可证 not declared for all artifacts
项目页连接原文、代码、视频并报告九项真实任务/179 image-action pairs 的作者结果。
查看资源 · code · 状态 open_source · 许可证 Apache-2.0 for CLIPort repository; CLIP, Ravens, Google Scanned Objects and U-Net retain listed upstream terms
固定提交含训练、评测、任务/数据生成、Docker、模型卡与实机训练 FAQ；默认 torch 1.7.1/torchvision 0.8.2，依赖较旧。
查看资源 · weights · 状态 verified_official_quickstart_checkpoint_release · 许可证 checkpoint terms not separately declared
官方 quickstart checkpoint 对应 language-conditioned 多任务模型；Google Drive 的完整 checkpoint 集未在本审查中逐文件下载与哈希。
查看资源 · data · 状态 official_generation_and_upstream_asset_instructions_not_full_dataset_download_verified · 许可证 Google Scanned Objects CC BY 4.0; Ravens and other upstream terms apply
官方提供生成脚本；README 标明全量数据约1.6TB且生成可能耗时数日，未把生成说明误记为已核验的完整数据集发布。

论文入库不等于代码、权重或数据开放；“承诺开放”“声称开放”和“已核验可下载”严格分开。

原始来源

最近核验：2026-08-13。链接存在不等于官方仓库、可运行、已开放权重/数据或许可证允许使用。