Audio en MIDI

Il exécute Basic Pitch de Spotify, un modèle de réseau neuronal (TensorFlow.js), entièrement dans votre navigateur. Le modèle détecte le début des notes et les hauteurs, puis produit des événements de note MIDI avec le timing, la hauteur et la vélocité. Aucun fichier audio n'est envoyé sur un serveur.

Les contenus monophoniques et polyphoniques simples - piano solo, guitare, voix, flûte ou une simple ligne principale - sont transcrits avec la plus grande précision. Les mixages denses, les fortes distorsions et les batteries produisent des résultats plus bruités car la hauteur est ambiguë.

Les ressources du modèle local se chargent une fois, puis l'inférence s'exécute sur votre appareil. Le temps dépend de la durée de l'enregistrement et du CPU disponible ; les téléphones anciens et les sons polyphoniques denses peuvent donc être plus lents. Seules les 120 premières secondes sont analysées afin de limiter la charge du navigateur.

La confiance minimale filtre les détections de notes faibles ou incertaines - augmentez-la pour ne conserver que les notes fortes. La longueur minimale de note élimine les bruits très courts. Les deux s'ajustent instantanément à partir de l'analyse en cache sans réexécuter le modèle.

Oui. Le téléchargement est un fichier MIDI standard (format 0) avec des événements de tempo et d'activation/désactivation de note. Importez-le dans Ableton, Logic, FL Studio, GarageBand, MuseScore ou n'importe quelle DAW pour l'éditer, changer d'instrument ou écrire la partition.

Plusieurs instruments, batteries, effets et notes superposées rendent les hauteurs ambiguës. Les mélodies seules, piano, guitare et voix donnent souvent un MIDI plus propre.