Συγχρονισμός Video με τη Μουσική
dil_man04_01 - 3 (2023-11-10 08:00:30)

Απαραίτητο στάδιο για τον εντοπισμό των χρονικών σημείων αρχής και τέλος κάθε χορευτικού βήματος είναι ο συγχρονισμός του video με τη μουσική που εισέρχεται στο σύστημα από μια εξωτερική πηγή λήψης.

Στο πρώτο στάδιο του συγχρονισμού έγινε η ανίχνευση του μουσικού beat μέσα στο αρχείο ήχου.

Στη συνέχεια, χρησιμοποιώντας ως είσοδο το ρυθμό μεταβολής της κίνησης του χορευτή στον άξονα y (κάθετος άξονας) έγινε η ανίχνευση των beat κίνησης.

Για τον τελικό συγχρονισμό χρησιμοποιήθηκε ο αλγόριθμος beat alignment που περιγράφεται αναλυτικά στις δημοσιεύσεις. Το beat alignment score υπολογίστηκε ελαχιστοποιώντας το σφάλμα ανάμεσα στο beat κίνησης και το κοντινότερο μουσικό beat.

Στο video που ακολουθεί μπορείτε να δείτε το τελικό αποτέλεσμα του συγχρονισμού.