FreeFlow: 光学フロー推定のためのバイアスフリー階層的Transformer

FreeFlowは、光学フロー推定のためのバイアスのない階層的Transformer。相関ボリュームや特徴量ワープといった従来のフロー固有のバイアスを使わず、単一のエンコーダー・デコーダー構造を採用。ウィンドウアテンション、シフトウィンドウアテンション、グローバルアテンションを組み合わせ、表現力と計算効率を高める。

• FreeFlowは、光学フロー推定のために、従来手法のようなフロー固有のバイアス（相関ボリューム、特徴量ワーピング等）を排除した階層的Transformerモデルである。
• 単一のフィードフォワードエンコーダー・デコーダー構造に、ウィンドウアテンション、シフトウィンドウアテンション、グローバルアテンションを組み合わせている。
• フロー固有のバイアスがないにも関わらず、Sintel、KITTI-2015、Springなどの主要ベンチマークで最先端の結果を達成した。
• モデル容量の増加に合わせて自然にスケールし、小規模から大規模モデルまで一貫した精度向上が見られる。
• 1080p解像度での推論時にもメモリ効率が良い。