何が起きたか
arxiv.orgは2026-09-07、Unitree G1 EDUヒューマノイドを使った安全ベンチマーク論文「How Long Until Your Robot Ignores You? A Safety Benchmark for LLM Orchestrators in Human-Humanoid Collaboration」を公開した。論文は、自然言語でロボット行動を調整するLLMオーケストレータの信頼性を、人間とヒューマノイドの協働における安全判断として評価する枠組みを示している。評価は3層構成で、本文ではテキスト指示の層について、40回の100ターンセッションを用いた結果を報告した。
詳細
論文は、Model Context Protocol（MCP）ベースのアーキテクチャ上に、ISO 10218-2:2025の保護措置に基づく安全不変条件を組み込んだという。評価指標として、5つの検証可能な安全不変条件、4段階のコンプライアンス分類（correct compliance、overcompliance、undercompliance、full violation）、3層の評価パイプライン（text prompting、simulated sensor-actuator loops、physical validation on a Unitree G1 EDU humanoid）を定義した。 Layer-1では、Claude Haiku 4.5、GPT-4o-mini、Gemini 2.5 Flash、qwen3:8bを、full-context条件とsliding-window budget条件の下で比較した。論文は、ClaudeとGeminiが違反をほぼゼロに抑えた一方、GPT-4o-miniは1セッションあたり最大13件の違反を起こしたと報告した。文脈管理については、cloud backendごとの平均的な行動上の問題を42〜57%減らした一方、GPT-4o-miniでは違反が3.8件から7.2件へほぼ倍増したとしている。Geminiでは、動作速度を規則で定めた最大値に抑える比例的コンプライアンスが一貫して現れたという。
Key Facts
| arxiv.orgは2026-09-07、「How Long Until Your Robot Ignores You? A Safety Benchmark for LLM Orchestrators in Human-Humanoid Collaboration」を掲載した。 | [1] |
| 論文はUnitree G1 EDU humanoidを用いたphysical validationを含む3層評価パイプラインを定義した。 | [1] |
| 評価対象はClaude Haiku 4.5、GPT-4o-mini、Gemini 2.5 Flash、qwen3:8bで、40回の100ターンセッションを実施した。 | [1] |
| 論文は、ClaudeとGeminiがほぼゼロ違反だった一方、GPT-4o-miniは1セッションあたり最大13件の違反を示したと報告した。 | [1] |
| 文脈管理により平均的な行動上の問題は42〜57%減少したが、GPT-4o-miniでは違反が3.8件から7.2件へ増加したとした。 | [1] |
本紙の見方
この論文の新しさは、LLMをロボットの会話窓口として見るだけでなく、ヒューマノイドとの協働で安全判断を担う主体として測定した点にある。しかも、評価をテキスト指示に閉じず、MCPベースの構成、ISO 10218-2:2025の保護措置、そしてUnitree G1 EDUを使う物理検証まで三層に分けているため、単なる言語モデル比較よりも実装寄りである。他方で、今回はLayer-1の結果が中心であり、simulationとphysical validationはongoingとされている以上、最終的な安全性能を断定する段階ではない。 本紙の関連記事であるleaderobot.com、単体報道で人形ロボットの硬件制約を論じるは、本体側の制約がAIの進化に追いつきにくいという論点を扱っていた。今回の論文は、その議論を抽象論から評価系へ落とし込んだ形と読める。つまり、ロボット側の制約を部品や機構だけでなく、LLMオーケストレータの振る舞いとして定量化しようとしている点が、前回の硬件制約論と接続する。 業界構造への含意は3点ある。第1に、ロボットの安全性は機体単体の性能ではなく、言語モデル、センサー・アクチュエータのループ、物理検証の組み合わせで見ないと評価しにくい。第2に、モデル間の差は小さく見えても、GPT-4o-miniのように違反が増幅する条件があり、オーケストレーション層の選定が製品設計上の焦点になる。第3に、Geminiで見られた比例的コンプライアンスは、単純な拒否ではなく速度制限のような制御に落ちる可能性を示しており、ロボット向け指示系の設計に影響しうる。もっとも、ここで確認すべきなのは、physical validationの具体的な手順、各不変条件の内容、そして40回の100ターンセッションがどの程度一般化可能かである。
なぜ重要か
論文が示したのは、Unitree G1 EDUのようなヒューマノイドを前提にしたとき、LLMの安全性を言語出力だけでなく物理挙動まで含めて測る必要があるという点である。発表元のarxiv.orgによれば、3層評価のうち物理検証は継続中であり、実機に接続するロボット制御系では、モデル選定だけでなく文脈管理や安全不変条件の設計が課題になるとみられる。
日本への影響
Unitree G1 EDUを使った物理検証を含むため、日本でヒューマノイドや協働ロボットの制御基盤を扱う側にとっては、言語モデルの選定だけでなく安全制約の実装方法が論点になる。とくに、速度制限のような比例的コンプライアンスが評価対象に入っている点は、単純な停止判断以外の制御ロジックを設計できるかが焦点になる。