论文记录 · 证据边界公开

Fine-Tuning Vision-Language-Action Models: Optimizing Speed and Success

arXiv · 2025-02-27 · 通用或轻量 VLA

论文元数据

作者: Moo Jin Kim、Chelsea Finn、Percy Liang
机构: Stanford University
发布日期精度: 日
研究方向: 通用或轻量 VLA
机器人: 未关联具体机器人
DOI: 10.48550/arXiv.2502.19645
arXiv: 2502.19645
引用元数据: 0
记录状态: included
质量检查: 无自动质量红旗

工程资源状态

代码: 已核验开放
权重: 已核验开放
数据: 已核验开放
许可证: 许可证条款已核验（不等于可商用）

当前实践优先级

当前重点 · 87/100 · 13–24 个月

路线标签：社区验证、可能成为新主流、VLA微调稳妥主流技术2.0

社区证据类型：尚无独立社区验证

OFT把OpenVLA的动作分块、连续动作回归和高吞吐微调变成完整开源基线，且有2000-episode独立复现；研发采用时必须区分suite-specific 97.1%、joint 96.8%和109.7Hz模型吞吐。

近期窗口 · 28/35
发布距评分基准日 16 个月，落入 13–24 个月窗口。
社区可复查验证 · 22/25
独立大样本复现与实现修正同时公开，可审查性强。
跨领域技术创新 · 18/20
动作分块、连续动作回归、视觉裁剪和微调优化组合为高吞吐路线。
量化实机证据 · 9/10
四项ALOHA任务披露示范量与10/10/12/30试验数。
开放与可复现 · 5/5
MIT代码、联合/分套件权重、RLDS数据和复现命令均公开。
工程实用增量 · 5/5
显著提高动作生成吞吐并给出16GB级推理门槛。

社区可复查证据：

社区证据 1
独立2000-episode复现96.7%，并记录四元数约定修复，接近官方96.8/97.1口径。

证据缺口：8卡训练成本；最佳checkpoint选择敏感；吞吐不等于控制频率；ALOHA权重未随LIBERO权重统一发布；不同LIBERO权重口径易混

当前实践分只决定今天的阅读与最小验证优先级；近期、社区验证和跨领域创新合计 80/100，不会把前沿观察条目自动升级成候选或确认里程碑。社区维度只有显式独立证据才能得高分，只有失败记录时必须标为社区反证。

已终审工程资源

官方数据集 · 许可证 MIT dataset repository; underlying LIBERO assets and content retain applicable source terms · 最近核验 2026-07-22
依赖：Git LFS、TensorFlow Datasets or compatible RLDS reader、OpenVLA-OFT data loader；硬件/传感器：local storage for approximately 10 GB plus training cache、GPU only required for policy training；实机证据：Simulation training data only; it does not contain the ALOHA real-robot demonstrations from the paper.；开放范围/限制：Filtering near-zero actions changes the training distribution and must be disclosed in comparisons with unmodified LIBERO data.
官方模型/权重 · 许可证 MIT model repository · 最近核验 2026-07-22
依赖：openvla-oft fixed code revision、OpenVLA model stack、matching action normalization keys；硬件/传感器：approximately 16 GB GPU VRAM for LIBERO inference、server-client deployment for robot control；实机证据：The downloadable joint checkpoint is for LIBERO simulation; the paper's ALOHA results use separately fine-tuned policies.；开放范围/限制：Do not attach the paper's 97.1% suite-specific average to this combined checkpoint; its reported comparable average is 96.8%.
官方代码 · 许可证 MIT · 最近核验 2026-07-22
依赖：Python、PyTorch、Transformers、FlashAttention 2、LIBERO for simulation evaluation、OpenVLA-compatible tokenizer and processor；硬件/传感器：one GPU with about 16 GB VRAM for LIBERO inference、paper fine-tuning uses 8 A100/H100 GPUs、ALOHA dual-arm platform for reported real-robot results；实机证据：Four ALOHA tasks use 30/30/45/60 demonstrations and 10/10/12/30 evaluation trials.、OFT+ reports 77.9 generated actions per second and a 0.321-second action-chunk latency; this is not equivalent to the closed-loop replanning frequency.；开放范围/限制：The 109.7 Hz A100 throughput comparison is a model throughput measurement, not a blanket real-robot control-rate claim.

“官方”表示归属与论文关系已核验；仍应按所列依赖、硬件和许可证复现。

每日候选人工终审

OpenVLA-OFT系统拆解并验证并行解码、动作分块、连续动作、L1目标和FiLM，把OpenVLA在LIBERO四套件平均成功率从76.5%提高到97.1%，动作吞吐从4.2Hz提高到109.7Hz；ALOHA上以25Hz控制完成双臂折衣、舀取和放入任务。官方MIT代码、五套约15.9GB的LIBERO权重与训练脚本真实开放；AllenAI独立用联合checkpoint复跑2,000 episode得到96.7%，并公开四元数反极点归一化会让Goal/Long从83.4/55.8恢复到97.4/95.4的关键失败模式。这是VLA高频适配的主流技术2.0，而不是简单“给OpenVLA加LoRA”。限制是论文训练使用8×A100/H100、ALOHA推理仍0.321秒/chunk，L1对多模态示范的边界未解决。

实机证据：quantified_aloha_four_tasks_with_explicit_trial_counts；四项ALOHA任务使用30、30、45、60条示范，评测分别10、10、12、30次；OFT+在相同平台与π0、RDT-1B、ACT、Diffusion Policy比较。推理100次查询测得77.9 actions/s、0.321秒/chunk；吞吐不是每秒完整闭环重规划次数。

硬件/本体：ALOHA bimanual robot、three 224x224 RGB views、14D robot state、25Hz controller、NVIDIA A100 inference benchmark

红旗与边界：LIBERO训练使用8×A100/H100并按最佳checkpoint报告；ALOHA四任务样本量仍小；L1目标对多模态示范可能学到中位动作；ALOHA数据和任务checkpoint未全部公开；吞吐量与闭环重规划频率不可混同；四元数约定差异会造成巨大复现回退

查看资源 · code · 状态 open_source · 许可证 MIT repository code; base OpenVLA/Llama and datasets retain upstream terms
固定提交含LIBERO/ALOHA训练、评测、数据重建与部署代码；官方声明LIBERO推理约16GB、ALOHA约18GB显存，训练按配置需1–8张27–80GB GPU。
查看资源 · weights · 状态 verified_public_non_gated_joint_checkpoint · 许可证 MIT model card plus inherited OpenVLA/Llama component terms
官方联合四套件checkpoint可公开下载；另有四个单套件checkpoint。单套件模型约15.9GB，联合模型用于AllenAI 2,000-episode复现。
查看资源 · data · 状态 verified_external_modified_benchmark_dataset_dependency · 许可证 dataset card/upstream LIBERO terms; not a new real-robot dataset
官方训练路径使用修改后的LIBERO RLDS并公开重建脚本；这不是ALOHA实机示范的公开替代，论文ALOHA数据未发布。

论文入库不等于代码、权重或数据开放；“承诺开放”“声称开放”和“已核验可下载”严格分开。

原始来源

最近核验：2026-07-22。链接存在不等于官方仓库、可运行、已开放权重/数据或许可证允许使用。