Doublage par synthèse vocale / deepfake

C'est probablement pas adapté pour faire tout le doublage d'un personnage principal, mais ça peut faire office pour des petits seconds rôles.

J'ai trouvé cet outil : https://fakeyou.com/tts/

Ce n'est pas une synthèse vocale classique, il est combiné à un algorithme "deepfake".
Grosso-modo, c'est un synthétiseur vocal qui va s'adapter à partir d'une banque de son (tout ça trié par IA)

Du coups le site propose toute une collection de voix d'acteurs, personnages, réels ou fictifs..

Citation :

My name is Guybrush Threepwood and I want to be a pirate!

Darth Vader (Waveglow) : https://fakeyou.com/tts/result/TR:qx3ggg7n7azwtzs0a685cv6q25xef

HAL 9000 (WaveGlow version) : https://fakeyou.com/tts/result/TR:9h5sa8dehscyg1ehmhp9hh7smxphd

Mario (Super Mario Franchise) : https://fakeyou.com/tts/result/TR:3ajsdw8r8gra93mg51b669ffnga38

Arnold Schwarzenegger (Movies) : https://fakeyou.com/tts/result/TR:3m0y9jhrmw7xq3r0dsaknawnwp9eg

George Harrison (Beatles) : https://fakeyou.com/tts/result/TR:mk0phkysney6ptb8wdc1f0vj3ecbq
(note: que l'IA l'a fait bafouiller au millieu de la phrase)

Les IA speech-to-text ont fait de gros progrès. Sur 15.ai tu peux choisir une voix et écrire un texte (en anglais) en mettant quelques émotions dans des balises.

Danvzare s'en est servi pour doubler un de ses jeux et le résultat est plutôt cool :
Reality-in-the-Norm

hey c'est génial ce truc

(up)
Il y a eu de gros progrès de faits : https://fakeyou.com/media/m_2k41mvb4k8q069602jwq436tmza0cm
Avec la voix "Sora (français)"

J'ai essayé d'écrire le nom de  Guybrush de façon à ce qu'il le prononce bien, mais c'est pas encore ça...
Mais il y a aussi des défauts de prononciation, qui dépends aussi de la voix choisie.

Par exemple

(réplique du film : C'est arrivé près de chez vous.) a écrit:

Quelle horreur, ça me dégoûte. Ils se croient tout permis ces gens. C'est comme ce ciment, tu peux être sûr que c'est un ciment hongrois, la loi de l’éternel provisoire, hein ?

https://fakeyou.com/media/m_bckg5es80mf8rj0fhqa070nry7gaq7

J'ai essayé rapidement celui-là aussi que j'ai trouvé par mal. Je vais les essayer dans la semaine sur ma version actuelle de jeu en anglais.
https://elevenlabs.io/