Πώς να το χρησιμοποιήσετε
- Επιλέξτε μια ηχογράφηση ενός μόνο οργάνου ή φωνής (έως 10 λεπτά).
- Επιλέξτε «Ανίχνευση νοτών» και περιμένετε όσο ο ήχος αναλύεται στο πρόγραμμα περιήγησής σας.
- Προσαρμόστε τα κατώφλια και τη συντομότερη νότα παρακολουθώντας το piano roll.
- Ορίστε το tempo αν θέλετε οι νότες να ευθυγραμμιστούν με τα μέτρα στο DAW σας και, στη συνέχεια, κατεβάστε το αρχείο MIDI.
Πώς λειτουργεί
Ο ήχος αποκωδικοποιείται από το πρόγραμμα περιήγησής σας, αναμειγνύεται σε μονοφωνικό και επαναδειγματοληπτείται στα 22,050 Hz, τη μορφή εισόδου του Basic Pitch, ενός μοντέλου ανίχνευσης νοτών ανοιχτού κώδικα (Apache 2.0) που δημοσιεύτηκε από το Spotify. Το μοντέλο εκτελείται στο πρόγραμμα περιήγησής σας με το TensorFlow.js και εκτιμά, για κάθε πλαίσιο 11.6 ms και καθένα από τα 88 πλήκτρα πιάνου, πόσο πιθανό είναι να ξεκινά μια νότα και να ακούγεται μια νότα. Αυτές οι πιθανότητες μετατρέπονται σε νότες χρησιμοποιώντας τα κατώφλια έναρξης και πλαισίου, τη μικρότερη διάρκεια νότας και, προαιρετικά, το melodia trick, το οποίο επίσης εντοπίζει νότες που εμφανίζονται σταδιακά χωρίς σαφή επίθεση.
Οι νότες εγγράφονται ως ένα Αρχείο Standard MIDI μονού κομματιού με πρόγραμμα ακουστικού πιάνου. Το Velocity προέρχεται από την ανιχνευμένη ένταση. Το tempo που ορίζετε καθορίζει μόνο το πλέγμα μέτρων· οι νότες διατηρούν τον χρονισμό τους σε δευτερόλεπτα, επομένως δεν θα ευθυγραμμιστούν με τους παλμούς εκτός αν η ηχογράφηση έγινε με μετρονόμο σε αυτό το tempo. Τα pitch bends δεν εγγράφονται.
Τα αποτελέσματα εξαρτώνται σε μεγάλο βαθμό από την ηχογράφηση. Ένα καθαρό σόλο όργανο λειτουργεί καλά· οι συγχορδίες ανιχνεύονται αλλά μερικές φορές με νότες που λείπουν ή επιπλέον· τύμπανα, παραμόρφωση, αντήχηση και πλήρεις μίξεις παράγουν πολλές λανθασμένες νότες. Η ανάλυση διαρκεί από λίγα δευτερόλεπτα έως λίγα λεπτά ανάλογα με τη διάρκεια και τη συσκευή σας.
Παραδείγματα
Ηχογράφηση πιάνου
Μια ηχογράφηση 2 λεπτών ενός κομματιού για πιάνο από το τηλέφωνο δίνει ένα αρχείο MIDI με τη μελωδία και τις περισσότερες νότες των συγχορδιών· η μείωση του κατωφλίου πλαισίου ανακτά τις απαλές νότες, ενώ η αύξησή του αφαιρεί τις νότες-φαντάσματα.
Σιγοτραγουδισμένη μελωδία
Σιγοτραγουδήστε μια μελωδία σε ένα φωνητικό σημείωμα, μετατρέψτε την με ενεργοποιημένο το τέχνασμα melodia και εισαγάγετε το MIDI σε ένα DAW για να την παίξετε με οποιοδήποτε όργανο.
Συχνές ερωτήσεις
Μπορεί να διαχωρίσει τα όργανα σε ένα τραγούδι;
Όχι. Εντοπίζει τις νότες με τονικό ύψος σε ολόκληρη την ηχογράφηση και τις τοποθετεί σε ένα track. Σε μια πλήρη μίξη, τα φωνητικά, το μπάσο, οι συγχορδίες και οι αρμονικές των τυμπάνων καταλήγουν όλα ως νότες, γι' αυτό τα αποτελέσματα σε ολοκληρωμένα τραγούδια είναι ακατάστατα.
Μεταφορτώνεται ο ήχος μου;
Όχι. Ο ήχος αποκωδικοποιείται και αναλύεται στο πρόγραμμα περιήγησής σας. Μόνο το αρχείο μοντέλου λαμβάνεται από αυτόν τον ιστότοπο· η ηχογράφησή σας δεν φεύγει ποτέ από τη συσκευή σας.
Γιατί οι νότες δεν ευθυγραμμίζονται με τα μέτρα στο DAW μου;
Το MIDI διατηρεί τον πραγματικό χρονισμό της εκτέλεσης. Ορίστε το tempo στο tempo του τραγουδιού και κάντε quantize στο DAW σας αν χρειάζεστε νότες πάνω στο πλέγμα.
Γιατί υπάρχει όριο 10 λεπτών;
Η ανάλυση διατηρεί όλη την έξοδο του μοντέλου στη μνήμη. Μεγαλύτερες ηχογραφήσεις μπορεί να εξαντλήσουν τη μνήμη του προγράμματος περιήγησης, ειδικά σε κινητά. Χωρίστε πρώτα τα μεγάλα αρχεία σε μέρη.
Απόρρητο
Το αρχείο ήχου σας αποκωδικοποιείται και αναλύεται εξ ολοκλήρου στο πρόγραμμα περιήγησής σας· δεν μεταφορτώνεται ούτε αποθηκεύεται. Το μοντέλο ανίχνευσης νοτών φορτώνεται από τον διακομιστή αυτού του ιστότοπου.