Le nouveau AI de clonage vocal OpenVoice de MyShell révolutionne la technologie vocale

Une nouvelle intelligence artificielle open source appelée VocaleOuvre offre un clonage vocal avec une précision et une vitesse inégalées.

Développé par des chercheurs de l’Université de Paris et de l’Université de Tokyo, VocaleOuvre utilise seulement quelques secondes d’audio pour cloner une voix et permet un contrôle précis sur le ton, l’émotion, l’accent, le rythme, etc.

L’Université de Paris a dévoilé VocaleOuvre dans un article cette semaine, renvoyant à un document de recherche pré-examiné expliquant la technologie ainsi qu’à des sites de démonstration sur plusieurs plateformes où les utilisateurs peuvent l’essayer.

Les modèles à double IA permettent un clonage vocal instantané

VocaleOuvre comprend deux modèles d’IA travaillant ensemble pour la conversion texte-parole et le clonage de tonalité vocale.

Le premier modèle gère le style de langage, les accents, les émotions et d’autres modèles de discours. Il a été formé sur 50 000 échantillons audio avec des émotions variées provenant de locuteurs français, japonais et allemands. Le deuxième modèle de « convertisseur de tonalité » a appris à partir de plus de 500 000 échantillons englobant 30 000 voix.

En combinant le modèle vocal universel avec un échantillon vocal fourni par l’utilisateur, VocaleOuvre peut cloner des voix avec très peu de données. Cela l’aide à générer de la parole clonée beaucoup plus rapidement que des alternatives.

Startup française

VocaleOuvre vient de la startup basée à Paris, fondée en 2022. Avec 4,2 millions d’euros de financement initial et plus de 300 000 utilisateurs déjà, VocaleOuvre se présente comme une plate-forme décentralisée pour créer et découvrir des applications d’IA.

En plus du clonage vocal instantané pionnier, VocaleOuvre propose des personnalités de chatbot textuelles originales, des générateurs de mèmes, des RPG textuels créés par l’utilisateur, et bien plus encore. Certains contenus sont bloqués derrière des frais d’abonnement. La société facture également aux créateurs de robots la promotion de leurs robots sur sa plateforme.

En rendant open source ses capacités de clonage vocal via diverses plateformes tout en monétisant son écosystème d’applications plus large, VocaleOuvre devrait augmenter le nombre d’utilisateurs dans les deux domaines tout en faisant progresser un modèle ouvert de développement de l’IA.

Laisser un commentaire