论文记录 · 证据边界公开

TARS: Tactile Affordance in Robot Synesthesia for Dexterous Manipulation

IEEE Robotics and Automation Letters 10(1), 327-334 (2025); DOI online 2024 · 2024-11-25 · 灵巧手与视觉触觉操作

论文元数据

作者: Qiwei Wu、Haidong Wang、Jiayu Zhou、Xiaogang Xiong、Yunjiang Lou
机构: Harbin Institute of Technology
发布日期精度: 日
研究方向: 灵巧手与视觉触觉操作
机器人: UR5 robotic arm (Isaac Gym simulation)、two simulated GelSight Mini optical tactile sensors
DOI: 10.1109/lra.2024.3505783
arXiv: 未披露
引用元数据: 4
记录状态: included
质量检查: 无自动质量红旗

工程资源状态

代码: 已核验可访问（使用限制见许可证）
权重: 已核验未发布
数据: 已核验未发布
许可证: 许可证条款已核验（不等于可商用）

每日候选人工终审

TARS 是视觉—触觉融合中“非接触视觉 affordance 与接触触觉点云连续切换”的可运行模拟基线：它将相机点云、两枚 GelSight Mini 的模拟触觉点和六维力放入统一点云编码，先用 oracle observation 的 SAC teacher 训练，再训练 Visual-Tactile Affordance（VTA）与 Visual-Tactile Policy（VTP）。论文公开稿在 Isaac Gym 的 UR5、两枚 GelSight Mini 模拟上覆盖 Lift Objects、Pull Drawer、Open Door 等四个任务，输入为 8192 点（其中两传感器合计 128 触觉点），并考察点云四倍下采样。作者仓 VisualTactile 公开 Isaac Gym 任务、SAC/custom 训练入口、需求和 MIT 许可证，但 README 所称的可选资产只给 Google Drive 链接，未发布论文 checkpoint、真实触觉/相机轨迹或明确数据许可证。稿件声称可借触觉解耦部署到真实系统，却没有可审计实机硬件、任务分母、成功率、日志或独立复现；公共库据此把它标为“视觉触觉融合迭代/仿真可运行”，而不计作真实机器人、跨手型或跨本体泛化证据。

实机证据：real_robot_deployment_claim_without_auditable_public_protocol；公开稿实验段明确写为 Isaac Gym 仿真，统一使用 UR5 与 GelSight Mini tactile sensor simulation；它描述触觉信息解耦以支持未来/实际系统部署，但没有列出实机机器人、传感器型号、任务次数、成功率、视频、日志、失败分母或标定方案。因此不以其“可部署”文字作为真机证据。

硬件/本体：UR5 and GelSight Mini simulated in Isaac Gym

红旗与边界：论文公开稿的实机部署表述没有匹配的公开实机协议或可审计数据，不能写成真实 UR5/GelSight、灵巧手或人形验证；MIT 仅覆盖 VisualTactile 仓；不覆盖 Isaac Gym、PointNet2、UR5/GelSight、Google Drive assets 或论文方法以外的内容；四任务、UR5 与两枚模拟 GelSight Mini 的结果不构成跨手型、跨臂、跨传感器、跨人形或跨真实场地泛化；TARS 是 point-cloud affordance 和 RL policy 框架，不是 VLA、触觉大模型、世界动作模型或语言条件通用策略；无论文权重、完整轨迹/失败数据、release/容器与独立复现；真实部署成本和效果未能从公开资料核验

查看资源 · paper · 状态 verified_publisher_identity_and_online_date · 许可证 publisher article access does not grant artifact rights
IEEE DOI 锚定 RA-L 发表身份；作者公开审稿稿提供方法、仿真设置和任务描述。
查看资源 · preprint · 状态 verified_author_anonymous_review_manuscript_method_and_simulation_protocol · 许可证 not an artifact license
公开稿描述 VTA/VTP、UR5/GelSight Mini 的 Isaac Gym 协议、8192 点输入、四任务及 SAC teacher；它不是已发布代码/数据许可证。
查看资源 · code · 状态 public_author_linked_repository · 许可证 MIT
作者资料与论文摘要指向该仓。仓库含 Isaac Gym 触觉模拟、pointcloud/force 输入、SAC/custom 训练与测试入口、requirements 和 MIT LICENSE；未见 GitHub Release。
查看资源 · assets · 状态 optional_external_asset_link_not_verified_as_paper_dataset · 许可证 not disclosed
README 仅列可选 Google Drive assets；本核验未将其升级为可下载论文训练集、真实数据或有许可证的资产包。
weights · 状态 no_tars_teacher_vta_or_vtp_checkpoint_verified · 许可证 not disclosed
仓库训练配置需要用户指定/自行生成模型；未核验到 TARS teacher、VTA、VTP 或策略 checkpoint。
data · 状态 no_packaged_real_or_simulated_tars_trajectory_dataset_verified · 许可证 not disclosed
未核验到四任务训练/评测轨迹、视觉触觉点云、失败样本、相机或 GelSight 标定的可下载数据包。

论文入库不等于代码、权重或数据开放；“承诺开放”“声称开放”和“已核验可下载”严格分开。

原始来源

最近核验：2026-08-14。链接存在不等于官方仓库、可运行、已开放权重/数据或许可证允许使用。