论文记录 · 证据边界公开

Benchmarking the Safety of Large Language Models for Robotic Health Attendant Control

arXiv（Kyushu Institute of Technology；官方数据集+代码仓） · 2026-04-29 · 数据与基准

论文元数据

作者: Mahiro Nakao、Kazuhiro Takemoto
机构: 机构尚未补齐
发布日期精度: 日
研究方向: 数据与基准
机器人: 无真实机器人（Robotic Health Attendant 仿真环境 + mock 导航服务器评测）
DOI: 未披露
arXiv: 2604.26577
引用元数据: 0
记录状态: included
质量检查: 无自动质量红旗

工程资源状态

代码: 已核验可访问（使用限制见许可证）
权重: 未核验
数据: 未核验
许可证: 未核验

每日候选人工终审

arXiv abs/全文(PDF)均实际取回 200，身份一致（九州工业大学 Mahiro Nakao/Kazuhiro Takemoto）。Robotic Health Attendant(RHA) LLM 安全基准：270 条有害指令×9 类（锚定 AMA 医学伦理原则）+ 270 条配对被试良性指令，在基于 RHA 框架的仿真环境（mock 导航服务器）评测 72 个 LLM；全模型平均违规率 54.4%，闭源模型显著更安全（中位 23.7% vs 开源 72.x%），体积/发布日期是开源权重安全性的主因。数据集与评测代码仓 kztakemoto/RHASafety 实测 200（含 270 有害+270 良性指令集、评测脚本）；无真实机器人本体实验（仿真评测）。

实机证据：paper_quantitative_lm_evaluation_no_physical_robot；270 有害+270 良性指令，72 个 LLM：平均违规率 54.4%、过半模型>50%；闭源中位 23.7% vs 开源 72.x%；GPT-4.1 生成+GPT-5 验证+GPT-5.4 judge 管线；违规集中于表面合理指令（设备操作/延误急救）

硬件/本体：未披露

红旗与边界：无真实机器人本体实验；指令与判定均依赖 LLM 生成/judge；数据集含有害内容需授权与安全处理

查看资源 · paper · 状态 verified_primary_arxiv_abs_and_fulltext · 许可证 arXiv paper license only (not an artifact license)
arXiv abs 与全文(PDF)均实际取回 HTTP 200；标题/作者/版本/日期以 arXiv API 实取为准，身份一致。
查看资源 · code · 状态 verified_official_repository_code_available · 许可证 not_disclosed
仓实测 200，含 270 有害+270 良性指令数据、评测脚本与 mock 导航服务器；根目录未见 LICENSE

论文入库不等于代码、权重或数据开放；“承诺开放”“声称开放”和“已核验可下载”严格分开。

原始来源

最近核验：2026-09-03。链接存在不等于官方仓库、可运行、已开放权重/数据或许可证允许使用。