Πρόγραμμα μετατροπής μουσικής σε παρτιτούρα;

[steve165]

Γειά.
Υπάρχει κάποιο πρόγραμμα το οποίο να μετατρέπει την μουσική από κάποιο όργανο σε παρτιτούρα;

Αν για παράδειγμα ηχογραφήσω από το youtube ένα μουσικό κομμάτι για βιολί υπάρχει πρόγραμμα που θα μετατρέψει τον ήχο σε παρτιτούρα που θα μπορώ να την τυπώσω;

Με ενδιαφέρει κυρίως το ένα όργανο (βιολί), αλλά αν έχει την δυνατότητα να μετατρέπει την μουσική από 2 όργανα (βιολί-πιάνο) σε παρτιτούρα, ακόμα καλύτερα.

[Fourier]

Δεν υπάρχει πρόγραμμα που να κάνει αυτό που ζητάς, ακόμα και για την πιο απλή μελωδία που θα παίξει ένα μονοφωνικό όργανο. Αν και είναι "εύκολο" να αναγνωρίσει ο υπολογιστής ποιοι φθόγγοι παίζονται, αυτό και μόνο δεν αρκεί για να δημιουργηθεί η παρτιτούρα. Χρειάζεται επιπλέον πληροφορία για την ρυθμική αγωγή της μουσικής (time signature, π.χ., 4/4, 6/8, κτλπ) και tempo (ποια είναι η ρύθμιση του μετρονόμου). Αυτές οι πληροφορίες είναι πολύ δύσκολο να τις αναγνωρίσει ο υπολογιστής, όταν μάλιστα ακόμα και έμπειροι μουσικοί μπορεί να διαφωνήσουν (π.χ., σχετικά με την ρυθμική αγωγή ενός κομματιού, ένας μπορεί να "ακούει" 6/8 ενώ άλλος 3/4, για να μην αναφερθώ σε περιπτώσεις όπου το time signature δεν είναι συνηθισμένο ή/και σταθερό).
 
 Ένα επιπλέον σημαντικό στοιχείο που κάνει δύσκολη την αυτόματη μετατροπή μουσικής σε παρτιτούρα είναι η αδυναμία της ίδιας της παρτιτούρας να αναπαραστήσει με "μηχανικό" τρόπο την μουσική. Συγκεκριμένα, αν και η παρτιτούρα καθορίζει τις χρονικές αξίες των φθόγγων, στην πράξη, ο (καλός) εκτελεστής θα αποκλίνει λιγότερο ή περισσότερο προκειμένου να γίνει πιο εκφραστικός. Αλλά ακόμα και να προσπαθήσει να παίξει κάποιος την παρτιτούρα εντελώς μηχανικά, είναι αδύνατο η αναπαραγωγή των χρονικών αξιών να γίνει τέλεια. Αποτέλεσμα είναι, ακόμα και αν ο υπολογιστής γνωρίζει την ρυθμική αγωγή του κομματιού και το μόνο που μένει να κάνει είναι να αντιλαμβάνεται τον φθόγγο και την χρονική αξία του, η "παρτιτούρα" που προκύπτει να έχει παράλογες χρονικές αξίες και να είναι πρακτικά άχρηστη. Για παράδειγμα, αντί ενός φθόγγου αξίας 1/4 ο υπολογιστής μετράει και καταγράφει αξία 1/4 +1/32 επειδή ο εκτελεστής κράτησε το φθόγγο ελάχιστα παραπάνω.
 
 Υπάρχει ένας επιστημονικός κλάδος ("machine learning") που ασχολείται με τέτοια προβλήματα, δηλαδή, την αναγνώριση/ανίχνευση από τον υπολογιστή πραγμάτων που ο άνθρωπος κάνει χωρίς κανένα κόπο. Αν και έχει γίνει πρόοδος σε θέματα όπως, π.χ., αναγνώριση προσώπου, ή αναγνώριση τίτλου ενός μουσικού κομματιού, θεωρώ πως είναι πολύ δύσκολο να γίνει "πραγματική" αναγνώριση μουσικής. Η αντίληψη της μουσικής είναι πολύ "βαθιά" ανθρώπινη διαδικασία, χωρίς ιδιαίτερα μηχανικά/αυτόματα χαρακτηριστικά τα οποία θα μπορούσε να μιμηθεί ο υπολογιστής. Υποθέτω ότι όταν φτάσουμε στο σημείο να καταγράφει ο υπολογιστής μουσική σε παρτιτούρα θα είναι και σε θέση και να συνθέσει (αξιόλογη) μουσική. Κρίνοντας από το πόσο επιτυχημένη είναι η εφαρμογή αυτόματων υποτίτλων του yοutube, έχω την εντύπωση ότι είμαστε μακριά από αυτό το σημείο.

[steve165]

Ευχαριστώ Fourier.

[Βραζίλης]

Ωραίος ο Fourier...

Κάποτε είχα δοκιμάσει ένα πρόγραμμα αναγνώρισης μουσικής. Βασικά, μεγαλύτερη επιτυχία θα έχεις όταν παίζει μόνο ένα όργανο και όχι πολύπλοκα πράγματα/ήχοι/τεχνικές. Και βέβαια, υπάρχει το πρόβλημα της τοποθέτησης των νοτών στον χρόνο, όπως το περιέγραψε ο Fourier. Το πρόγραμμα μπορεί να κάνει Quantization (music) με σχετική επιτυχία, δεν θα είναι τέλειο.
Για μένα, τέτοια προγράμματα είναι καλά για να σου δώσουν μια ιδέα για το πως παίζεται μια μελωδία που έχεις ακούσει ήδη και θέλεις να σιγουρευτείς για κάποιες νότες. Το πρόγραμμα σου δείχνει αρκετές από τις νότες, αλλά πρέπει να γνωρίζεις την μελωδία για να αναγνωρίσεις ποιες είναι οι "σκάρτες".

[Kosthrash]

Να προσθέσω στo πολύ ωραία διατυπωμένο post του fourier ότι ένα τέτοιο πρόγραμμα, εκτός απο την ¨πρόκληση" της αυτόματης αναγνώρισης της ρυθμικής αγωγής (time sign. & tempo) - τα οποία μπορεί να προέκυπταν από το παίξιμο του μπάσου? ή χειροκίνητα εισαγμένα από τον χρήστη ?    - θα είχε να αντιμετωπίσει και την αναγνώριση των κλιμάκων - πχ ίδια συχνότητα είναι η σολ δίεση και η λα υφεση, αλλά ποιά από τις 2 νότες πρέπει να αποτυπωθεί στην παρτιτούρα που θα προκύψει?