Fish Audio Drama 3 permet aux voix IA de changer d’émotion en cours de phrase

Fish Audio a lancé Drama 3, un modèle de synthèse vocale conçu pour que les dialogues générés par l’IA ressemblent moins à une lecture de script et davantage à une véritable interprétation. Lancé le 13 octobre, le modèle permet aux créateurs de contrôler les émotions, le rythme et l’interprétation vocale à l’aide du langage courant.

Au lieu de s’appuyer sur des préréglages vocaux basiques, les utilisateurs peuvent insérer des consignes directement dans leurs scripts. Un personnage peut commencer à parler calmement, se montrer de plus en plus frustré et terminer une phrase en chuchotant, le tout sans passer d’un enregistrement à un autre. Même les acteurs synthétiques doivent désormais suivre des directives.

Drama 3 prend également en charge les conversations entre plusieurs personnages et 83 langues. Les consignes peuvent être appliquées à des mots ou à des passages précis, ce qui permet aux créateurs de mettre l’accent sur certaines expressions sans modifier le reste du script.

Selon Fish Audio, le modèle a atteint une précision de 93,2 % au benchmark Pronunciation Robustness d'Artificial Analysis, contre 88,1 % pour son prédécesseur, S2.1 Pro. Toutefois, la précision de la prononciation ne garantit pas nécessairement des interprétations émotionnelles convaincantes.

L'entreprise développe également deux outils d'édition avancés. Interactive Editing permettra aux utilisateurs d'affiner les interprétations à l'aide d'instructions supplémentaires, tandis qu'Audio Inpainting est conçu pour remplacer des mots individuels sans régénérer des enregistrements entiers. Tous deux restent en phase de test limitée, accessible uniquement sur invitation.

Drama 3 est disponible sur le site web de Fish Audio, ses applications mobiles et son API. Les poids du modèle sont également téléchargeables, bien que leur utilisation commerciale soit soumise à des restrictions de licence.

Jusqu'au 12 novembre, l'accès à l'API coûte 10 $ par million de caractères, soit une réduction de 80 % par rapport au tarif habituel de 50 $. Les nouveaux abonnements pour les créateurs bénéficient également d'une réduction de 50 % pendant la période promotionnelle.