Transformer une chanson en partition et en MIDI avec l'IA : notre essai complet

Ce qu'on obtient à partir d'une seule chanson

Partition et MIDI fonctionne avec n'importe quel morceau de votre bibliothèque et livre, en une seule fois :

• Le conducteur (« Partition complète », PDF) : tous les instruments ensemble, en ut, c'est-à-dire en sons réels. Au-delà de 8 portées, il est mis en page en A3 pour rester lisible.
• Les parties séparées (« Parties séparées », PDF) : ce qu'on pose sur le pupitre. Chaque instrument qui joue assez de notes a la sienne.
• Le MusicXML : il s'ouvre dans MuseScore (gratuit), Sibelius, Dorico et Finale, pour corriger des notes, ajouter les nuances et imprimer votre propre version.
• Un MIDI multipiste : une piste par instrument avec un son General MIDI, la batterie sur le canal 10. Il suit le tempo réel de la chanson : dans votre logiciel de MAO, les mesures tombent pile sur l'enregistrement.
• Les pistes d'instruments (MP3) : jusqu'à 12 (chant, chœurs, batterie, basse, guitare, clavier, cordes, cuivres, bois, percussions, synthé et effets).
• Tout (ZIP) : le conducteur, les parties, le MusicXML et le MIDI réunis dans une seule archive, à envoyer d'un coup à tout le groupe.

Le résultat sur une vraie chanson

Pour l'essai, nous avons pris « Sommerregen », la chanson pop qui ouvre notre page d'accueil en allemand : piano, guitare acoustique, batterie feutrée et voix féminine. Elle avait été générée avec « 98 bpm » dans sa description de style, de quoi vérifier notre détection du tempo.

La partie de chant donne une mélodie cohérente, qu'on peut chanter. Les parties plus chargées (accords de piano, guitare rythmique, batterie) sont à traiter comme un brouillon à corriger, et non à déchiffrer telles quelles.

Des barres de mesure tirées de la chanson elle-même

Une note ne sert à rien si elle tombe dans la mauvaise mesure. Avant d'écrire quoi que ce soit, Tunely repère les temps et les barres de mesure directement dans l'audio de la chanson, puis y cale chaque note, quantifiée à la double croche.

Une chanson générée ne tient pas toujours le tempo comme un métronome. Une autre démo de notre page d'accueil accélère de 129 à 130,5 BPM en quatre minutes. Les barres de mesure suivent les vrais temps au lieu de se décaler peu à peu, et le MIDI reprend les mêmes changements de tempo : il reste calé sur l'enregistrement quand vous importez les deux dans votre logiciel de MAO.

Les chansons lentes sont un piège classique : dans une ballade, les croches battent deux fois plus vite que le tempo réel, et la détection des temps peut s'accrocher à cette pulsation. Quand le style d'une chanson indique son tempo, Tunely s'en sert pour trancher. 「晚风慢一点」 a été générée avec « slow 70 bpm » dans son style : la partition est écrite à ♩ = 67 sur 60 mesures, et non à 133 sur deux fois plus de mesures.

Le MIDI commence à la mesure 1. Si la chanson a une intro ou une anacrouse avant le premier temps fort, Tunely affiche le décalage, en secondes, entre le début de la chanson et la mesure 1, pour que vous puissiez caler le MIDI sur l'audio.

À vérifier avant de jouer

Une transcription reste un premier jet. Voici les points à vérifier en priorité :

• Le rythme : les notes sont calées sur une grille à la double croche. Le ternaire (swing, shuffle) et les triolets ressortent donc en binaire ; si la chanson swingue, réécrivez ces mesures dans MuseScore.
• Les accords denses : piano et cordes sont écrits en accords, avec des liaisons de prolongation là où les notes se chevauchent. Le résultat sonne juste, mais il est plus chargé à lire qu'une partie écrite à la main.
• La batterie : une seule voix sur une portée de batterie à cinq lignes (grosse caisse, caisse claire, toms, charleston, cymbales). Mains et pieds ne sont pas séparés en deux voix.
• Les fuites entre pistes (la « repisse ») : une piste isolée contient toujours un peu des autres instruments. Dans notre essai, la piste de basse « jouait » aussi de la batterie et des nappes. Tunely ne garde que les notes qui correspondent à l'instrument de chaque piste, mais une note parasite peut passer.
• En ut : tout est écrit en sons réels. Pour les instruments transpositeurs en si bémol et en mi bémol (clarinette, trompette, saxophone), transposez la partie dans votre logiciel de notation.
• Les clés octaviées : les parties de guitare et de basse ont un petit 8 sous la clé, si bien que les notes restent à leur place habituelle, sans forêt de lignes supplémentaires.

Pas à pas, sur téléphone comme sur ordinateur

La marche à suivre est la même partout :

• 1. Ouvrez votre Bibliothèque et trouvez la chanson.
• 2. Touchez le bouton ••• (Remix sur ordinateur), puis Partition et MIDI.
• 3. Touchez Créer la partition · 6 crédits et laissez la page ouverte. Comptez 2 à 5 minutes, environ 3 pour notre chanson de test ; les crédits ne sont décomptés qu'une fois les fichiers prêts.
• 4. Téléchargez la partition complète, les parties, le MusicXML, le MIDI ou le ZIP. Les pistes d'instruments sont listées juste en dessous.
• 5. Ouvrez le MusicXML dans MuseScore pour corriger la partition et l'imprimer. Si vous rouvrez Partition et MIDI sur la même chanson, vous retrouvez les mêmes fichiers, sans nouveau décompte.

Refaire un seul passage sans toucher au reste

Reste la première demande : garder un long morceau, mais refaire, par exemple, le passage de 5:00 à 7:00. Dans Tunely, c'est Refaire un passage, dans le même menu Remix (forfaits Pro et Ultra, 2 crédits) :

• Choisissez le passage : de 10 secondes à 2 minutes, et pas plus de la moitié de la chanson. La sélection se cale sur les barres de mesure et indique les mesures concernées.
• Dans le champ « Comment ce passage doit-il changer ? », décrivez le changement avec vos mots, dans votre langue, par exemple « faire entrer les cordes et monter la tension, même tempo ». Les nouvelles paroles sont facultatives.
• En deux minutes environ, Tunely génère deux versions et garde celle dont les raccords sont les plus propres : elle devient une nouvelle version de votre chanson, et l'original reste dans votre bibliothèque. Ça marche aussi avec les instrumentaux.

Pourquoi passer par un raccord ? Parce qu'en mesurant la sortie brute, nous avons constaté que le modèle avait refait toute la chanson : hors du passage choisi, elle ne ressemblait que faiblement à l'original (une corrélation de 0,46 à 0,55). Tunely ne garde donc que le nouveau passage et le raccorde à l'original intact, aux endroits où les deux versions jouent exactement la même chose. Après le raccord, tout ce qui se trouvait hors du passage était identique à l'original, échantillon par échantillon.

Pour les longs morceaux, le principe est le même. Les chansons importées, plus anciennes ou de plus de 8 minutes sont traitées sous forme d'extrait (le passage, avec assez de musique de part et d'autre), puis le nouveau passage est raccordé au morceau complet. Un morceau de 10 minutes ne pose donc aucun problème, tant que la partie à refaire ne dépasse pas 2 minutes.

L'essai : le pré-refrain d'une ballade en mandarin

Nous avons essayé Refaire un passage sur 「晚风慢一点」 (« Vent du soir, souffle plus lentement »), une ballade en mandarin de 3:37 tirée de notre propre bibliothèque : piano feutré, guitare à cordes nylon, cordes légères et une voix féminine chaleureuse. Nous avons choisi le pré-refrain, de 1:06 à 1:22, et tapé la consigne en chinois : 「加入弦乐，逐渐推高情绪，速度不变」, c'est-à-dire « faire entrer les cordes, faire monter l'émotion, même tempo ». Les deux extraits en haut de cette page commencent à 0:58 : vous entendez l'entrée, le nouveau passage et la sortie.