日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

週刊ニュースレター購読
指示追従/タスクプランニングarXiv:2610.38744

AtomTree:状態認識型の具現化指示追従のための階層的フレームワーク

AtomTree: A Hierarchical Framework for State-Aware Embodied Instruction Following with LLMs

シェア:XThreadsFacebookLINEはてブBluesky

LLMを用いて現在の状態から逐次的にサブゴール木を構築し、失敗時には階層的バックトラックで再計画する指示追従プランナを提案。ALFREDで既存LLMプランナを上回る。

詳しい要約

1. どんなもの?

- AtomTreeは、対話環境でのembodied instruction following向けに提案された、LLMを用いた階層的なタスク計画フレームワークである。 - 自然言語命令を解釈し、long-horizonタスクを完了するエージェントを対象とする。 - 単一の直列推論で全体計画を一度に生成するのではなく、subgoalとactionからなる木を逐次的に構築する。 - 現在のsymbolic stateに基づき、LLMが各ステップで更なる分解かgrounded low-level actionの出力かを判断する。 - 軽量なmemory moduleで過去の結果を要約し、後の意思決定に再利用する。 - low-level actionが停滞した際にはhierarchical backtracking replanningを発動する。

2. 先行研究と比べてどこがすごい?

- 既存plannerは、大規模なlabeled trajectoriesに依存するか、few-shot/zero-shot LLM promptingで全体計画を単一の直列推論で生成していた。 - それらはlinguistic common senseに依存し、初期命令から計画にコミットし、失敗後にのみ更新するため、robustnessとstate awarenessが弱い。 - AtomTreeは現在のsymbolic stateから各ステップで判断し、逐次的にsubgoal/actionの木を構築する点で異なる。 - 失敗後のみの更新ではなく、action停滞時にhierarchical backtracking replanningで親ノードへ戻り、最新stateからsubtree planを再生成する。 - zero-shot評価のALFRED benchmarkで、prior LLM-based plannersを上回ったと報告している。

3. 技術・手法の肝は?

- 階層的な木構造: subgoalとactionからなるtreeをincrementallyに構築する。 - LLMによる逐次判断: 現在のsymbolic stateを入力に、各ステップで更なるdecomposeかgrounded low-level actionの出力かを決める。 - memory module: 軽量なモジュールで過去のoutcomesを要約し、以降のdecisionで再利用する。 - hierarchical backtracking replanning: low-level actionがstallした場合にparent nodeへ戻り、最新stateからsubtree planを再生成し、誤ったtrajectoryへのdriftを防ぐ。 - 初期命令で全体計画に固定せず、state-awareに計画を更新する点が肝である。

4. どうやって有効だと検証した?

- ALFRED benchmark上でのzero-shot評価を実施している。 - その結果、AtomTreeはprior LLM-based plannersをoutperformしたと報告している。 - 具体的な成功率や比較対象の詳細な数値は要旨からは不明。 - 実ロボットでの検証や他のbenchmarkでの評価は要旨からは不明。

5. 議論はある?

- 既存手法の課題として、labeled trajectoriesへの依存、単一の直列推論、初期計画へのコミット、失敗後のみの更新を挙げている。 - AtomTreeはstate-awareな逐次判断とhierarchical backtracking replanningでこれらに対処する。 - memory moduleの設計や要約の粒度、backtrackingの頻度やコストについては要旨からは不明。 - zero-shot設定での性能は示されているが、few-shot設定や他のembodied benchmarkへの汎化については要旨からは不明。 - 限界や失敗事例に関する議論は要旨からは不明。

6. 次に読むべき論文は?

- 要旨で比較対象として明示されているprior LLM-based planners(具体的な手法名は要旨からは不明)。 - ALFRED benchmarkに関する論文。 - embodied instruction followingにおけるLLM-based planningの代表的手法(例: SayCan、Inner Monologueなど同分野の定番)。 - hierarchical task planningやbacktracking replanningに関する関連研究。 - memory moduleを用いたLLMエージェントの研究。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Haotian Zhai, Tianming Sha, Junnan Li

分類: cs.RO, cs.AI, cs.CL

原文アブストラクト

Embodied instruction following in interactive environments requires agents to interpret natural language commands and complete long-horizon tasks. Existing planners either rely on large labeled trajectories, or use few-shot and zero-shot LLM prompting that produces a whole plan in a single serial reasoning process. These approaches depend on linguistic common sense, commit to a plan from the initial instruction, and only update after failures, which weakens robustness and state awareness. We present AtomTree, a hierarchical framework for state-aware task planning with LLMs. AtomTree incrementally builds a tree of subgoals and actions, where the LLM decides at each step, from the current symbolic state, whether to further decompose or to output a grounded low-level action. A lightweight memory module summarizes past outcomes for reuse in later decisions. When a low-level action stalls, AtomTree triggers hierarchical backtracking replanning to return to the parent node and regenerate the subtree plan from the latest state, preventing continued drift along an incorrect trajectory. In zero-shot evaluation on the ALFRED benchmark, AtomTree outperforms prior LLM-based planners. Project page: https://zhaihaotian.github.io/atomtree-website/.

PR本紙発行元 EmplifAI