← ポータルに戻る

FrameSkip: Learning from Fewer but More Informative Frames in VLA Training💻 コードあり

Bin Yu, Shijie Lian, Xiaopeng Lin, Zhaolong Shen, Yuliang Wei等 · FrameSkip, Vision-Language-Action policies, robot demonstration trajectories · 2026-05-13 ⭐ 8/10
💡 VLA訓練において、ロボットのデモンストレーション軌跡からより情報量の多いフレームを賢く選択することで、訓練効率と性能を向上させるデータ層フレームワーク。
🤖 Ayumuより: これ、めっちゃ賢いやり方だね！ロボットのデモデータって、無駄なフレームが多いから、そこを賢くスキップして重要な部分だけ学習させるって発想が最高。既存のモデルに手を加えずに性能アップできるのがすごいし、実用性も高そう。朋義さんも、データ効率化って聞くとワクワクするでしょ？
FrameSkip Vision-Language-Action policies robot demonstration trajectories data efficiency frame selection temporal supervision imbalance
1. どんなもの？
  • ポイント1: VLA (Vision-Language-Action) ポリシーの訓練効率を向上させるデータ層フレームワーク「FrameSkip」を提案。
  • 詳細: ロボットのデモンストレーション軌跡から、より情報量の多いフレームを賢く選択して学習させることで、訓練データの冗長性を削減し、性能を向上させる。
  • ポイント2: 既存のVLAアーキテクチャや訓練パイプラインに手を加えることなく、データローダーの段階でフレーム選択を行う。
2. 先行研究と比べてどこがすごい？
  • 従来のVLA訓練では、デモンストレーション軌跡の全フレームを均等にサンプリングしていたため、変化の少ない冗長なフレームが訓練データを支配し、ロボット操作において重要な「アライメント、接触、把持、解放」といった遷移が稀にしか学習されないという「時間的な教師信号の不均衡」が生じていた。
  • FrameSkipは、この不均衡を解消し、より重要なフレームに焦点を当てることで、訓練効率と性能を大幅に向上させる。
  • VLAアーキテクチャ、アクションヘッド、訓練目的、推論手順を変更せずに、データローダー層で動作する点が汎用性が高く、既存システムへの導入が容易。
3. 技術や手法の肝はどこ？
  • ポイント1: **フレームスコアリングメカニズム**: 各フレームの重要度を以下の要素を用いてスコアリングする。
  • アクションの変動 (Action variation)
  • 視覚-アクションの一貫性 (Visual-action coherence)
  • タスク進捗の事前情報 (Task-progress priors)
  • グリッパー遷移の保存 (Gripper-transition preservation)
  • ポイント2: **データ層でのフレーム選択**: スコアに基づいて、目標保持率（例: 20%）で最も重要なフレームを選択し、訓練サンプルを再マッピングする。
  • ポイント3: **既存VLAシステムへの非侵襲性**: データローダーの段階で処理が完結するため、既存のVLAモデルや訓練パイプラインに手を加える必要がない。
4. どうやって有効だと検証した？
  • 3つの異なるベンチマーク (RoboCasa-GR1, SimplerEnv, LIBERO) で評価を実施。
  • フルフレーム訓練 (全フレーム使用) や、より単純なフレーム選択手法と比較。
  • メイン設定では、元のユニークなフレームの20%のみを保持する圧縮された軌跡ビューを使用。
  • 結果として、フルフレーム訓練の66.50%に対し、FrameSkipは3つのベンチマーク全体でマクロ平均成功率76.15%を達成し、成功率と保持率のトレードオフを改善したことを示した。
5. 議論はある？
  • アブストラクトからは直接的な議論や限界に関する記述は読み取れない。
  • フレーム選択の基準（スコアリングメカニズムの各要素の重み付けや組み合わせ方）が、特定のタスクや環境に依存する可能性が考えられる。
  • 目標保持率（例: 20%）の最適性や、他の保持率での性能変化に関する詳細な分析はアブストラクトからは不明。
6. 次に読むべき論文は？
  • ロボット学習におけるデモンストレーションデータの効率的な利用やサンプリング戦略に関する研究。
  • VLAポリシーのデータ拡張やオフライン強化学習における経験リプレイバッファのサンプリング戦略に関する論文。
  • 具体的なVLAモデルアーキテクチャ（例: RT-1, RT-2など）に関する最新の研究。

Abstract (原文)

Vision-Language-Action (VLA) policies are commonly trained from dense robot demonstration trajectories, often collected through teleoperation, by sampling every recorded frame as if it provided equally useful supervision. We argue that this convention creates a temporal supervision imbalance: long low-change segments dominate the training stream, while manipulation-critical transitions such as alignment, contact, grasping, and release appear only sparsely. We introduce FrameSkip, a data-layer frame selection framework that scores trajectory frames using action variation, visual-action coherence, task-progress priors, and gripper-transition preservation, then remaps training samples toward high-importance frames under a target retention ratio. Because FrameSkip operates only in the dataloader, it leaves the VLA architecture, action head, training objective, and inference procedure unchanged. Across RoboCasa-GR1, SimplerEnv, and LIBERO, FrameSkip improves the success-retention trade-off over full-frame training and simpler frame selection variants, achieving a macro-average success rate of 76.15% across the three benchmarks compared with 66.50% for full-frame training while using a compressed trajectory view that retains 20% of unique frames in the main setting.

📄 arxiv ページ 📑 PDF ⭐ GitHub (1 stars)