Nouveautés de l’importation de partitions numérisées

Une nouvelle version de notre modèle de numérisation lit maintenant tous les PDF et toutes les photos importés. Elle repose sur une nouvelle architecture qui analyse chaque ligne de musique plus en détail et a été entraînée sur un ensemble d’exemples plus propre. Elle est plus précise pour 24 des 26 types de musique sur lesquels nous la testons.

• Les liaisons de prolongation et de phrasé sont mieux distinguées. Une courbe reliant deux notes différentes est maintenant beaucoup moins souvent interprétée comme une liaison de prolongation qui modifie la hauteur de la deuxième note.
• Les portées silencieuses sont lues de façon plus fiable. Dans une partition d’ensemble, une portée au repos sur toute une ligne est moins souvent remplie de notes de batterie inventées ou supprimée de sa partie.
• Les longs silences sont comptés plus précisément. Une suite de 20 mesures vides ou plus respecte bien mieux la durée imprimée, au lieu de se voir ajouter des dizaines de mesures.
• Moins de notes incorrectes. Environ 8% d’erreurs de hauteur, 17% d’erreurs de divisions irrégulières et 10% d’erreurs d’accords en moins par rapport à la version précédente.
• Les notes sont localisées plus précisément sur la page. Cela permet de rattacher les paroles, les nuances et les autres indications à la bonne note.

Notre modèle de numérisation a été mis à jour, avec une attention particulière portée aux chiffrages de mesure, aux clés et aux silences de plusieurs mesures.

• Davantage de chiffrages de mesure sont lus tels qu’ils sont imprimés. Le modèle reconnaît maintenant 29 chiffrages de mesure, ainsi que la mesure à quatre temps et la mesure alla breve. Nouveautés de ce mois-ci : 6/4, 7/4, 8/4, 9/4, 10/8, 11/8, 13/8, 14/8, 15/8, 9/16, 11/16, 13/16, 15/16 et 17/16, fréquents dans la musique folk, le jazz et la musique contemporaine. Avant, ils étaient remplacés par un chiffrage plus courant (10/8 devenait 12/8, 8/4 devenait 5/4) : les mesures ne comptaient alors plus le bon nombre de temps et des notes étaient supprimées pour les ajuster. Consultez toutes les notations prises en charge par la numérisation.
• Les silences de plusieurs mesures conservent leur durée réelle. Dans les parties d’harmonie et d’orchestre, le nombre inscrit au-dessus d’une pause multimesure indique combien de mesures compter. Ce nombre est maintenant beaucoup moins souvent mal lu. Avant, un « 10 » pouvait devenir 100, ajoutant des dizaines de mesures vides à votre partie.
• Les portées sans clé conservent la bonne hauteur de notes. Dans de nombreuses parties, notamment les partitions de jazz et les éditions anciennes, la clé n’est imprimée que sur la première portée de la page. Le modèle devinait auparavant la clé des autres portées ; une erreur décalait toutes leurs notes vers le haut ou vers le bas. Ces portées reprennent maintenant la clé de la portée précédente.
• Moins d’éléments absents de la page sont ajoutés. Un petit « 3 » au-dessus d’un triolet n’est plus interprété comme un doigté, aucune ligne d’octave (8va) n’est ajoutée si elle n’est pas imprimée, et une portée silencieuse sur toute une ligne n’est plus remplie de notes de percussion.
• Davantage de vos notes figurent dans la partition. Lorsqu’une mesure est lue avec plus de temps que ne le permet son chiffrage, certaines notes doivent être omises pour rétablir le bon compte. Comme les rythmes et les chiffrages de mesure sont maintenant lus plus précisément, cela arrive beaucoup moins souvent : dans les importations que nous avons testées, environ 70% moins de notes ont disparu.

Une nouvelle version de notre modèle interne est désormais utilisée pour toutes les importations de PDF et de photos, avec un travail particulier sur la manière dont les triolets sont imprimés sur la page.

• Les triolets implicites sont désormais pris en charge. Les graveurs n’impriment généralement le petit « 3 » ou « 6 » qu’au-dessus du premier triolet ou sextolet d’un passage, puis laissent les groupes suivants sans indication — l’interprète est censé poursuivre le motif. Ces groupes non marqués sont des triolets implicites : ils se jouent comme des triolets, sans que rien ne l’indique sur la partition. Ils sont très fréquents dans les éditions du XIXe siècle, les études et les variations. Le numériseur les reconstitue désormais à partir du rythme de la mesure, au lieu de supprimer des notes pour faire correspondre la mesure à son indication de mesure.
• Moins de triolets inventés de toutes pièces. Le modèle avait tendance à marquer des groupes de notes liés par des barres ordinaires comme des triolets, même lorsqu’aucun chiffre n’était imprimé au-dessus, et ces chiffres apparaissaient alors dans votre partition. Désormais, il n’écrit un triolet que lorsqu’il en existe réellement un sur la page.

Les apps Mac et Windows peuvent maintenant transformer un PDF ou une photo de partition en partition modifiable, avec la même étape de vérification que sur le web.

• Importez sans quitter l’app. Choisissez un fichier, vérifiez ce que la numérisation a lu, puis ouvrez la partition.
• Achetez des crédits IA directement dans l’app sur le Mac App Store, pour éviter qu’une importation ne s’arrête le temps d’aller sur le site web.

Une nouvelle version de notre modèle maison est maintenant utilisée pour chaque importation de PDF et de photo, avec de 22 % à 51 % moins d’erreurs sur nos tests de partitions numérisées. Les gains sont les plus importants sur les pages les plus difficiles — gravures anciennes et impression irrégulière.

Une version améliorée du modèle interne de Flat est désormais utilisée pour chaque importation de PDF et de photo, notamment pour les points suivants :

• Les passages à plusieurs voix avec silences partagés et silences invisibles sont désormais pris en charge.
• Les barres de mesure et les fins de reprise (voltas) sont désormais placées correctement à l’intérieur des mesures.
• Les faisceaux sont reconnus de façon plus fiable.
• Les indications de mesure tracées sur plusieurs portées, comme dans les partitions d’orchestre, sont désormais reconnues.
• Correction de certains symboles d’accord exportés vers MusicXML avec un type d’accord non standard.

L’importation de partitions à partir d’un PDF ou d’une photo suit maintenant un nouveau processus dans l’application web, basé sur le moteur de reconnaissance développé par Flat. Il remplace l’ancien import PDF pour tout le monde.

• Choisissez les pages à importer. Téléversez un PDF ou plusieurs photos, puis gardez seulement les pages qui contiennent de la musique. Chaque page conservée utilise un crédit.
• Suivez la reconnaissance pendant le traitement. Une barre de progression montre où en est la numérisation, page par page, et vous pouvez continuer à utiliser Flat pendant qu’elle s’exécute.
• Vérifiez avant la création de la partition. Quand le moteur n’est pas certain d’un instrument, il vous demande de confirmer le titre et les instruments détectés, avec les noms des parties imprimés sur la page affichés à côté de chacun. Si tous les instruments sont reconnus avec certitude, cette étape est ignorée.

Offert dans Flat et, pour les enseignants et les administrateurs, dans Flat for Education. Le nouveau processus arrivera dans l’app iOS au cours des prochaines semaines.

Le moteur OMR de Flat est maintenant accessible de façon programmatique via l’API développeur. Envoyez des PDF ou des photos, suivez la progression de la reconnaissance, vérifiez les instruments détectés, puis importez le résultat comme partition modifiable dans une bibliothèque Flat ou exportez-le en MusicXML ou MIDI. C’est le même modèle interne qui alimente l’importation de PDF et de photos dans l’éditeur, maintenant offert à grande échelle pour vos propres applications et flux de travail.

L’API OMR dédiée (v2.24.0) s’appuie sur l’importation de PDF en arrière-plan ajoutée à la création de partition dans la v2.23.0 : demandez la prise en charge des tâches lors de l’importation d’un fichier, puis interrogez la tâche jusqu’à ce que la partition soit prête. Consultez le journal des modifications de l’API pour en savoir plus sur ces deux versions.

Nous avons amélioré la façon dont le scan lit la mise en page d'une page. Les importations de PDF et de photos produisent maintenant des partitions plus propres et plus précises, surtout pour les mises en page complexes :

• Les pages denses sont maintenant correctement séparées. Les pages avec de nombreux systèmes courts empilés les uns sur les autres ne sont plus fusionnées : chaque système est détecté séparément.
• Meilleure prise en charge des partitions d'orchestre et de grands ensembles. Les instruments à plusieurs portées comme le piano et l'orgue, ainsi que les grandes partitions avec de nombreuses portées, sont reconnus de façon plus fiable.
• Mises en page larges, paysage et livret. Les pages en orientation paysage ne coupent plus le bord gauche (ce qui pouvait tronquer les clés), et les numérisations multipages et en livret sont correctement traitées.
• Moins de détections parasites. Les éléments indésirables près du pied de page et des marges ne sont plus pris pour de la musique.

Chaque importation de PDF et de photo est maintenant traitée par le propre modèle interne de Flat. Cette version majeure met l’accent sur la précision de la transcription : l’exactitude musicale (les notes, rythmes, liaisons et altérations qui déterminent si une partition est correcte) s’améliore dans tous les ensembles de test, avec les gains les plus importants pour :

• Nuances : +39 %
• Points d’orgue, articulations, liaisons, altérations : +30 à 37 %
• Durées de notes : +22 %
• Liaisons de phrasé, notes pointées, silences, assignation aux portées et aux voix : +14 à 20 %

Le placement du texte, des nuances et de la mise en page est aussi plus précis : les paroles, les noms d’accords et les nuances sont rattachés de façon plus fiable aux bonnes notes, y compris dans des mises en page complexes comme les grandes portées de piano et les parties avec changements de clé.

Nous commençons à déployer le propre modèle d’IA de Flat pour l’importation de PDF et de photos, conçu et entraîné à l’interne pour remplacer le moteur tiers utilisé au lancement. Le fait de maîtriser cette technologie de bout en bout nous permet d’améliorer davantage la précision, d’élargir ce que nous reconnaissons, de livrer des améliorations beaucoup plus rapidement et d’aligner les résultats sur le propre format de notation de Flat afin que les importations s’intègrent naturellement au reste du produit. Cette première version lit déjà une bien plus grande partie de votre musique :

Couverture de notation élargie. Nouvellement reconnus :

• Les symboles d’accord, correctement encodés selon leur signification musicale comme accords modifiables, et non comme simple texte
• Les reprises de mesure et les barres obliques rythmiques
• Les indications de tempo et de métronome (avec BPM)

Paroles et texte dans plus de langues. Les paroles, repères de répétition et autres textes sont reconnus par défaut dans les langues utilisant l’alphabet latin, ainsi qu’en japonais, en coréen et en chinois.

Plus fidèle à la mise en page d’origine. Les importations suivent maintenant beaucoup plus fidèlement la mise en page de la partition source, en respectant le nombre de mesures par ligne, de systèmes par page et la structure générale. Cela fait une réelle différence pour les partitions volumineuses et complexes, comme les œuvres orchestrales et les instruments à plusieurs portées comme le piano. Plus de formats de page sont aussi pris en charge, y compris les pages à l’horizontale qui n’étaient pas prises en charge auparavant.