इस्तेमाल करने का तरीका
- एक ही वाद्य या आवाज़ की रिकॉर्डिंग चुनें (अधिकतम 10 मिनट)।
- नोट पहचानें चुनें और ब्राउज़र में ऑडियो विश्लेषण पूरा होने तक प्रतीक्षा करें।
- पियानो रोल देखते हुए थ्रेशोल्ड और सबसे छोटे नोट को समायोजित करें।
- यदि आप चाहते हैं कि नोट आपके DAW में बार के साथ संरेखित हों, तो टेम्पो सेट करें, फिर MIDI फ़ाइल डाउनलोड करें।
यह कैसे काम करता है
ऑडियो आपके ब्राउज़र द्वारा डिकोड किया जाता है, मोनो में मिक्स किया जाता है और 22,050 Hz पर रीसैंपल किया जाता है, जो Basic Pitch का इनपुट फॉर्मेट है, जो Spotify द्वारा प्रकाशित एक ओपन-सोर्स (Apache 2.0) नोट डिटेक्शन मॉडल है। यह मॉडल आपके ब्राउज़र में TensorFlow.js के साथ चलता है और हर 11.6 ms फ्रेम और 88 पियानो कुंजियों में से प्रत्येक के लिए अनुमान लगाता है कि एक नोट शुरू होने और एक नोट बजने की कितनी संभावना है। उन संभावनाओं को ऑनसेट और फ्रेम थ्रेशोल्ड, सबसे छोटी नोट लंबाई और वैकल्पिक रूप से मेलोडिया ट्रिक का उपयोग करके नोट्स में बदल दिया जाता है, जो बिना स्पष्ट हमले के फेड-इन होने वाले नोट्स को भी पकड़ लेता है।
नोट्स को एक ध्वनिक पियानो प्रोग्राम के साथ सिंगल-ट्रैक स्टैंडर्ड MIDI फ़ाइल के रूप में लिखा जाता है। वेग का पता चली लाउडनेस से आता है। आपके द्वारा सेट किया गया टेम्पो केवल बार ग्रिड को परिभाषित करता है; नोट्स अपना समय सेकंड में बनाए रखते हैं, इसलिए वे बीट्स पर स्नैप नहीं होंगे जब तक कि रिकॉर्डिंग उस टेम्पो पर क्लिक के साथ नहीं बजाई गई हो। पिच बेंड नहीं लिखे जाते।
परिणाम रिकॉर्डिंग पर बहुत निर्भर करते हैं। एक साफ एकल वाद्य यंत्र अच्छा काम करता है; कॉर्ड का पता लगाया जाता है लेकिन कभी-कभी गायब या अतिरिक्त नोट्स के साथ; ड्रम, डिस्टॉर्शन, रीवर्ब और पूर्ण मिक्स कई गलत नोट्स उत्पन्न करते हैं। विश्लेषण में लंबाई और आपके डिवाइस के आधार पर कुछ सेकंड से लेकर कुछ मिनट तक का समय लगता है।
उदाहरण
पियानो रिकॉर्डिंग
पियानो के एक टुकड़े की 2 मिनट की फ़ोन रिकॉर्डिंग से मेलोडी और अधिकांश कॉर्ड नोट्स के साथ एक MIDI फ़ाइल मिलती है; फ्रेम थ्रेशोल्ड कम करने से धीमे नोट्स मिलते हैं, बढ़ाने से ग़लत नोट्स हट जाते हैं।
गुनगुनाई गई धुन
एक धुन को वॉइस मेमो में गुनगुनाएं, मेलोडिया ट्रिक चालू करके इसे कन्वर्ट करें और MIDI को किसी भी वाद्य यंत्र पर बजाने के लिए DAW में इम्पोर्ट करें।
अक्सर पूछे जाने वाले सवाल
क्या यह गाने में वाद्य यंत्रों को अलग कर सकता है?
नहीं। यह पूरी रिकॉर्डिंग में पिच वाले नोट्स का पता लगाता है और उन्हें एक ट्रैक पर डालता है। पूरे मिक्स में, वोकल्स, बास, कॉर्ड और ड्रम ओवरटोन सभी नोट्स के रूप में समाप्त हो जाते हैं, इसीलिए पूरे गानों पर परिणाम गड़बड़ होते हैं।
क्या मेरा ऑडियो अपलोड किया जाता है?
नहीं। ऑडियो आपके ब्राउज़र में डिकोड और विश्लेषण किया जाता है। केवल मॉडल फ़ाइल इस साइट से डाउनलोड की जाती है; आपकी रिकॉर्डिंग कभी आपके डिवाइस से बाहर नहीं जाती।
मेरे DAW में नोट्स बार के साथ लाइन अप क्यों नहीं होते?
MIDI प्रदर्शन का वास्तविक समय बनाए रखता है। यदि आपको ग्रिड पर नोट्स चाहिए तो टेम्पो को गाने के टेम्पो पर सेट करें और अपने DAW में क्वांटाइज़ करें।
10 मिनट की सीमा क्यों है?
विश्लेषण मॉडल के सभी आउटपुट को मेमोरी में रखता है। लंबी रिकॉर्डिंग ब्राउज़र की मेमोरी खत्म कर सकती है, खासकर फ़ोन पर। पहले लंबी फ़ाइलों को भागों में काटें।
गोपनीयता
आपकी ऑडियो फ़ाइल पूरी तरह आपके ब्राउज़र में डिकोड और विश्लेषित होती है; इसे अपलोड या संग्रहीत नहीं किया जाता। नोट पहचान मॉडल इसी साइट के सर्वर से लोड होता है।