Previsione del movimento delle mani per anticipare le interazioni con gli oggetti
Magistrale Sperimentale 6–7 mesi

Previsione del movimento delle mani per anticipare le interazioni con gli oggetti

In breve

Sviluppare un modello che prevede dove andranno le mani nel prossimo secondo per anticipare con quale oggetto interagirà l'utente.

Prima di afferrare un oggetto, la mano si muove verso di esso. Prevedere questo movimento permette a un assistente su occhiali smart di capire con quale oggetto l’utente sta per interagire, e quindi di offrire aiuto in anticipo.

L’obiettivo della tesi è progettare un nuovo modello che prevede il movimento delle mani dal video in prima persona e lo usa per anticipare con quale oggetto avverrà la prossima interazione. Il modello va sviluppato e valutato su grandi dataset pubblici di video in prima persona, confrontandolo con lo stato dell’arte. È una tesi di ricerca, tra deep learning, visione artificiale e dispositivi indossabili.

Per iniziare

  • Liu et al., Joint Hand Motion and Interaction Hotspots Prediction from Egocentric Videos, CVPR 2022.
  • Bao et al., Uncertainty-aware State Space Transformer for Egocentric 3D Hand Trajectory Forecasting, ICCV 2023.

Ti interessa questa tesi? Scrivimi indicando il tuo corso di laurea e gli esami sostenuti.