LipNet : une IA qui lit sur les lèvres

LipNet : une IA qui lit sur les lèvres
LipNet : une IA qui lit sur les lèvres - © LipNet

Désormais plus douée que le meilleur expert, une intelligence artificielle peut lire sur les lèvres.

La collaboration entre l’université d’Oxford et une filiale de Google, DeepMind, a créé une intelligence artificielle (IA) qui sait déchiffrer les mouvements des lèvres et les traduire en texte. Pour réussir cette performance, la machine s’est exercée sur près de 5000 heures de programmes tv de la chaîne BBC.

 

LipNet est donc la première intelligence artificielle a faire mieux que les experts en terme d’exactitude : son taux de précision est de 93,4% contre 53,2 pour les personnes les plus douées. Par contre, LipNet n’est pas encore très entraînée à déchiffrer des vraies phrases échangées entre deux personnes, étant davantage aptes à reconnaître des phrases avec des structures précises.

L’IA pourrait encore être améliorer et être utilisée par la suite pour de la reconnaissance vocale mais aussi en terme de doublage de film ou pour reconnaître des paroles dans un environnement bruyant. Cela pourrait aussi servir en terme de surveillance.