エンドツーエンド自動運転：課題と最前線
1分まとめ
270以上の論文を整理し、エンドツーエンド自動運転の方法論、ベンチマーク、課題、将来動向を体系的にまとめたサーベイである。CARLAリーダーボードのスコア推移から2021年頃の性能急伸を示し、クローズドループ評価の重要性と因果混乱などの未解決課題を標準的な枠組みとして確立した。
- 270以上の論文を模倣学習・強化学習・ベンチマーク・課題・将来動向に分類し、エンドツーエンド自動運転の研究地図を示したサーベイである。
- CARLAリーダーボードのトップスコアは2019年の8.94から2022年には79.95へ上昇したと記載されており、この間の性能向上の規模を把握できる。
- オープンループ評価は実際のテスト分布を測れず、クローズドループ評価を推奨するという主張は、その後の研究の前提となった。
- ただし本論文は独自の実験を含まない。掲載されたCARLAスコアは各年のトップ手法の報告値であり、統一条件での比較ではない。
- 現在の実装に直接効く知見というより、課題設定と評価の枠組みを確認するための参照点として読むべき論文である。
課題
従来のモジュラー方式は認識・予測・計画を個別に最適化するため、モジュール間で目的関数が食い違い、誤差が蓄積する。一方、エンドツーエンド方式の研究は増加したが、方法論・ベンチマーク・課題を横断的に整理したサーベイが存在せず、研究全体の構造を把握することが困難だった。
提案手法
本論文はサーベイであり、270以上の既存研究を次の観点で整理する。(1) 方法論：模倣学習（行動クローニングと逆最適制御）と強化学習に大別し、それぞれの代表的な枠組みと課題（共変量シフト、因果混乱、報酬設計など）を説明する。(2) ベンチマーク：実車評価、シミュレーションによるクローズドループ評価、データセットを用いたオープンループ評価の3種類を整理し、特にクローズドループ評価の構成要素（パラメータ初期化、トラフィックシミュレーション、センサシミュレーション、車両ダイナミクス）を分解する。(3) 課題：マルチモーダル融合、視覚的抽象化、世界モデル、マルチタスク学習、ポリシー蒸留、解釈性、安全性保証、因果混乱、ロバスト性（ロングテール分布、共変量シフト、ドメイン適応）を個別に論じる。(4) 将来動向：ゼロショット学習、モジュラー型エンドツーエンド計画、データエンジン、基盤モデルを展望する。
評価と結果
サーベイのため独自の定量評価はない。論文が報告している数値は、CARLAリーダーボードの年別トップエントリーのDS（運転スコア、0〜100）が2019年8.94、2020年24.98、2021年47.65、2022年79.95と推移したこと、およびnuPlanチャレンジのスコア0.90（2023年、0〜1）である。またTable 1として、クローズドループ評価に使えるオープンソースシミュレータとベンチマーク（CARLA上のCoRL、NoCrash、Town05、LAV、Roach、Longest6、Leaderboard v1/v2と、nuPlan上のNAVSIM、Val14、Leaderboard）を列挙している。
クローズドループ評価に利用可能な主なシミュレータとベンチマーク
| シミュレータ | ベンチマーク |
|---|---|
| CARLA | CoRL |
| CARLA | NoCrash |
| CARLA | Town05 |
| CARLA | LAV |
| CARLA | Roach |
| CARLA | Longest6 |
| CARLA | Leaderboard v1/v2 |
| nuPlan | NAVSIM |
| nuPlan | Val14 |
| nuPlan | Leaderboard |
CARLAリーダーボードの年別トップスコア推移
新規性
新規の手法提案ではなく、270以上の既存研究を方法論・ベンチマーク・課題の観点から再構成したサーベイである点が新規性であり、既存研究の分類と課題の体系化を提供している。
限界
著者による明記された限界として、エンジニアリング面（バージョン管理、ユニットテスト、データ基盤、ソフトウェア・ハードウェア協調設計など）は公開情報が限られるため扱っていない点が挙げられる。また本論文はサーベイであり、新規の実験的検証を含まない。CARLAスコアは各年のトップエントリーの報告値であり、同じ条件で比較されたものではない。オープンループ評価の限界を主張しているが、その後の研究でもクローズドループ評価とオープンループ評価の乖離は継続的な課題として扱われている。
産業へのインパクト
この論文は、エンドツーエンド自動運転の研究領域を俯瞰する地図を提供した。特に、CARLAリーダーボードのスコア推移から2021年頃の性能急伸を数値で示し、TransFuserなどに代表されるマルチモーダル融合の進展と、因果混乱・解釈性・ロバスト性といった課題を標準的な用語で定義した。現在の研究でも、このサーベイが整理した課題設定と評価の枠組みが前提として使われており、分野の共通言語を確立した点に意義がある。