Avec l'application Google sur smartphone ou Google Assistant, il est dorénavant possible de recherche une chanson en la fredonnant. Cette possibilité a été déployée dans une vingtaine de langues sur Android (dont le français), mais uniquement en anglais sur iOS pour le moment.
Après appui sur l'icône du micro, il suffit d'une requête vocale "Ok Google, quelle est cette chanson ? " ou d'un appui direct sur un bouton " Rechercher une chanson. " Une écoute active est alors lancée et l"utilisateur peut fredonner pendant 10 à 15 secondes la chanson qui lui trotte dans la tête.
À la manœuvre, un algorithme de machine learning aide à identifier la chanson qui correspond potentiellement à l'air fredonné ou sifflé. Un choix est donné entre plusieurs correspondances parmi celles qui semblent les plus pertinentes. Un taux de correspondance accompagne chaque proposition.
L'utilisateur peut opter pour la correspondance qui lui paraît la meilleure et obtenir des informations supplémentaires via une recherche Google usuelle, avec un aperçu, les paroles, une écoute sur des services de streaming de musique…
Cela ne marche pas à tous les coups, mais même si la justesse du fredonnement laisse à désirer, l'efficacité est tout de même au rendez-vous.
Google explique que la mélodie d'une chanson est comme son empreinte digitale. " Nous avons conçu des modèles d'apprentissage automatique qui peuvent faire correspondre votre fredonnement, votre sifflement ou votre chant à la bonne empreinte digitale. "
Les modèles de machine learning transforment l'audio en une séquence numérique représentant la mélodie de la chanson, et pour une comparaison avec des chansons existantes. Pour l'empreinte numérique, les modèles enlèvent des détails comme les instruments, le timbre et la tonalité de la voix.
