Slik bruker du det
- Velg et opptak av ett enkelt instrument eller én stemme (opptil 10 minutter).
- Velg Gjenkjenn noter og vent mens lyden analyseres i nettleseren din.
- Juster tersklene og korteste note mens du ser på pianorullen.
- Angi tempoet hvis du vil at notene skal passe med taktene i DAW-en din, og last deretter ned MIDI-filen.
Slik fungerer det
Lyden dekodes av nettleseren din, mikses til mono og resamples til 22 050 Hz, som er inndataformatet til Basic Pitch, en åpen kildekode-modell (Apache 2.0) for notedeteksjon publisert av Spotify. Modellen kjøres i nettleseren din med TensorFlow.js og estimerer, for hvert 11,6 ms vindu og hver av de 88 pianotangentene, hvor sannsynlig det er at en note starter og at en note klinger. Disse sannsynlighetene gjøres om til noter ved hjelp av terskelverdiene for onset og frame, korteste notelengde og eventuelt melodia-trikset, som også fanger opp noter som fades inn uten et tydelig anslag.
Notene skrives som en Standard MIDI-fil med ett spor og et akustisk piano-program. Velocity kommer fra registrert lydstyrke. Tempoet du angir definerer bare taktinndelingen; notene beholder timingen i sekunder, så de vil ikke justeres til taktslag med mindre opptaket ble spilt til metronom i det tempoet. Pitch bend skrives ikke.
Resultatene avhenger sterkt av opptaket. Et rent soloinstrument fungerer godt; akkorder oppdages, men noen ganger med manglende eller ekstra noter; trommer, vreng, romklang og fulle mikser gir mange feilnoter. Analysen tar fra noen sekunder til noen minutter avhengig av lengden og enheten din.
Eksempler
Pianopptak
Et 2-minutters telefonopptak av et pianostykke gir en MIDI-fil med melodien og de fleste akkordtonene; å senke frame-terskelen får frem svake noter, å heve den fjerner spøkelsesnoter.
Nynnet melodi
Nynn en melodi i et talememo, konverter det med melodia-trikset på og importer MIDI-filen i en DAW for å spille den på et hvilket som helst instrument.
Ofte stilte spørsmål
Kan den skille instrumentene i en sang?
Nei. Den oppdager tonehøydebestemte noter i hele opptaket og legger dem på ett spor. I en full miks ender vokal, bass, akkorder og trommeovertoner opp som noter, og derfor blir resultatene på komplette sanger rotete.
Blir lyden min lastet opp?
Nei. Lyden dekodes og analyseres i nettleseren din. Bare modellfilen lastes ned fra dette nettstedet; opptaket ditt forlater aldri enheten din.
Hvorfor stemmer ikke notene med taktene i DAW-en min?
MIDI-filen beholder den faktiske timingen i fremføringen. Sett tempoet til sangens tempo og kvantiser i DAW-en din hvis du trenger notene på rutenettet.
Hvorfor er det en grense på 10 minutter?
Analysen holder all utdata fra modellen i minnet. Lengre opptak kan bruke opp nettleserens minne, spesielt på telefoner. Del opp lange filer først.
Personvern
Lydfilen din dekodes og analyseres fullstendig i nettleseren din; den lastes ikke opp eller lagres. Notegjenkjenningsmodellen lastes inn fra dette nettstedets egen server.