メインコンテンツへスキップ
宇佐美研究室

実世界センシングと時空間モデリング

Real-world Sensing and Spatiotemporal Modeling

動画像解析行動認識時系列モデリングセンサフュージョン異常検知

実世界のセンシングデータ(動画像、LiDAR、IMUなど)から、

時間的・空間的な構造を抽出し、行動認識、軌跡予測、異常検知などを実現する研究です。

本研究室では、自己教師あり学習や時系列モデリングに取り組んでいます。

なぜ難しいか

実世界データはノイズ、欠損、オクルージョンなどの問題を含みます。

また、時空間構造の表現は次元が高く、効率的な学習・推論が課題となります。

リアルタイム性が求められる応用も多く、計算効率も重要です。

研究方針

Transformerやグラフニューラルネットワークによる時空間表現学習、

自己教師あり事前学習による汎化性能の向上、効率的な推論手法の開発に取り組んでいます。

評価の考え方

標準的なベンチマークでの定量評価に加え、

実環境での実証実験を通じて実用性を検証しています。

現在の問い

  • 1長時間動画からの行動要約と異常兆候の抽出
  • 2マルチモーダルセンシングの統合による頑健化
  • 3オンライン更新を含む適応的な時空間認識