Statistiche di ogni giocatore, direttamente dal video della partita

Il problema da risolvere.

Una partita è una sequenza continua di movimenti, cambi di posizione e situazioni che si sviluppano contemporaneamente. Un singolo fotogramma mostra soltanto una parte del contesto. Per ricavare informazioni dal gioco occorre collegare ciò che viene rilevato nel tempo, mantenendo una lettura coerente della sequenza e del movimento dei soggetti.

Le riprese grandangolari e quelle convenzionali hanno caratteristiche differenti: cambia la porzione di campo visibile, la dimensione dei soggetti nell’immagine e il modo in cui l’azione occupa l’inquadratura. Anche il materiale di partite professionali e amatoriali può presentare condizioni diverse. Il progetto doveva affrontare questa varietà attraverso i modelli e la pipeline video.

Il risultato richiesto comprendeva statistiche e highlights. Era quindi necessario collegare il livello visivo alle informazioni da utilizzare e alle sequenze da rivedere. Il sistema doveva sostenere un percorso di analisi completo, dal video alle uscite applicative, conservando il rapporto fra ciò che è stato osservato e il momento della partita a cui si riferisce.

Come ho affrontato il progetto.

Ho addestrato modelli che svolgono due funzioni complementari. L’object detection individua i soggetti nelle immagini; l’object tracking ne segue la continuità lungo la sequenza. Il tracciamento permette di andare oltre una raccolta di rilevamenti indipendenti e di analizzare come il movimento si sviluppa nei fotogrammi successivi.

Questi componenti sono stati collegati alla pipeline che riceve il video o lo stream della partita. L’analisi produce statistiche e highlights a partire dalle sequenze elaborate. Il lavoro comprende anche l’ingresso in tempo reale, dove l’elaborazione deve accompagnare il flusso disponibile invece di attendere soltanto una revisione successiva dell’intera registrazione.