Que signifie "HFT-Transformer"?
Table des matières
HFT-Transformer est une méthode conçue pour aider les ordinateurs à lire et comprendre la musique de piano. Elle se concentre sur le son (fréquence) et le temps de chaque note, ce qui est super important pour reconnaître la musique avec précision, surtout quand plusieurs notes jouent en même temps.
Comment Ça Marche
Cette méthode utilise deux couches de technologie pour traiter la musique.
La première couche regarde le côté temporel de la musique grâce à un processus spécial appelé convolution, tout en examinant les fréquences sonores avec un type de modèle appelé un encodeur Transformer. Enfin, elle transforme les informations de fréquence en quelque chose que la couche suivante peut utiliser.
La deuxième couche prend la sortie de la première couche et l’examine à nouveau en utilisant un autre encodeur Transformer qui se concentre sur le temps.
Résultats
HFT-Transformer a été testé avec des ensembles de données de musique populaire et a montré qu'il était très efficace pour reconnaître les notes et leurs détails. Il performe mieux que beaucoup d'autres méthodes pour identifier avec précision des qualités spécifiques de la musique, comme quand les notes commencent et s'arrêtent, et à quel point elles sont jouées fort.