arXiv論文「FiberTune」、VLA微調整で視覚残差を保持する手法を提案

何が起きたか

arXivは2026-06-07、vision-language-action（VLA）ポリシー向けの微調整手法「FiberTune」を掲載した。論文は、action-supervised fine-tuningが弱く制約された視覚構造を圧縮しうる点を「local action fibersに沿った residual visual collapse」として定式化した。FiberTuneは学習時の目的関数で視覚残差を保持し、推論時の追加オーバーヘッドは増やさない設計である。

詳細

手法は、学習中にオンラインの action probe を用いて中間の visual-token 表現から action-predictive directions をふるい分ける。そのうえで、凍結した visual teacher による centered directional alignment と effective-rank regularization により、残差を保持する。 論文によれば、同一条件下でFiberTuneは2つのベンチマーク、2つのアーキテクチャ（$π_{0.5}$ と OpenVLA-OFT）、計6つのシミュレーション設定すべてで task-loss-only fine-tuning を上回った。代表例として、long-horizon CALVIN ABC$\rightarrow$D では SR(5) が +10.7 pp 改善し、物理SO-101 pick-and-place では task success が 72.7% から 78.1% に上がったとしている。

Key Facts

本紙の見方

FiberTuneの新しさは、VLAの微調整で「何を学習するか」ではなく「どの視覚情報を落とさないか」を前面に出した点にある。action-supervised fine-tuningは行動に効く方向へ表現を寄せる一方で、視覚表現の細部を圧縮しやすいという問題設定を置き、その対策を学習時の正則化として実装している。推論時に計算を足さないという設計も、ロボット実装では重要な制約である。 本紙の見方では、この論文はVLAの性能改善を単純な損失最適化ではなく、表現の保存問題として扱っている点が要点である。以前からVLAでは行動予測を強めるほど表現が狭くなる懸念があったが、FiberTuneはそれを local action fibers と residual visual collapse という形で整理し、online action probe、frozen visual teacher、effective-rank regularization を組み合わせた。ここでの焦点は、行動予測に有利な方向と、視覚情報の残差を保持すべき方向をどう分離するかである。 業界構造への含意としては、学習フェーズでのデータ・表現設計が、ロボットの実運用性能に直結することを示す材料になる。特に、CALVIN ABC→Dのような長期タスクと、SO-101 pick-and-placeのような物理系タスクの両方で改善を示した点は、単一ベンチマーク向けの微調整ではない可能性を示す。一方で、論文は6つの設定で有効性を示したとはいえ、汎用性の判断には、別タスクでの再現性、学習コスト、teacherの選び方、effective-rank regularizationの感度を確認する必要がある。 未確定の論点は、どの程度のデータ規模で性能差が維持されるか、推論時に本当にゼロオーバーヘッドと言える条件が何か、また実機タスクでの改善がSO-101以外にも広がるかである。論文が示した改善幅は具体的だが、実装上の再現条件がどこまで一般化できるかは、今後の追試で詰める必要がある。

なぜ重要か

action-supervised fine-tuningで視覚情報が削られるなら、ロボットの見え方に依存する長期タスクでは性能の上限に効く可能性がある。FiberTuneは、学習時の工夫だけで物理SO-101 pick-and-placeの task success を72.7%から78.1%へ引き上げたと論文が述べており、実機での改善余地を示した点に意味がある。