Conversion d'Identité de la Voix Chantée par Sélection et Concaténation d'Unités Spectrales - Sorbonne Université
Communication Dans Un Congrès Année : 2018

Conversion d'Identité de la Voix Chantée par Sélection et Concaténation d'Unités Spectrales

Résumé

Cet article présente un algorithme de sélection d'unités spectrales pour la conversion de l'identité de la voix chantée à partir de bases de données non parallèles. Les algorithmes de conversion basés sur des unités de parole présentent des avantages importants pour la conversion de l'identité vocale: la conversion vocale par sélection d'unités permet la préservation des caractéristiques originales de la voix cible, en utilisant des unités réelles; et la segmentation en unités linguistiques permet d'apprendre la conversion à partir d'enregistrements de la voix cible non nécessairement alignés avec ceux de la voix source. La contribution principale de cet article est de réaliser la sélection des unités spectrales de la voix cible en fonction de plusieurs facteurs: acoustique, linguistique (phonèmes) et musicaux (hauteur, intensité et durée). Pour ce faire, la sélection de la séquence d'unités d'enveloppe spectrale est établie comme un problème d'optimisation à partir d'une fonction de coût multiple qui comprend la distorsion spectrale des chanteurs source et cible ainsi que les différences de hauteur, d'intensité et de durée des unités spectrales correspondantes. L'objectif est de guider la sélection vers des enveloppes spectrales du chanteur cible partageant un contexte musical similaire avec celles du chanteur source. Il est montré lors d'une expérience perceptive que l'algorithme proposé améliore le naturel de la conversion et la similarité avec la voix cible.
Fichier principal
Vignette du fichier
conversion-identite-voice-chantee.pdf (327.46 Ko) Télécharger le fichier
Origine Fichiers produits par l'(les) auteur(s)
Loading...

Dates et versions

hal-01795649 , version 1 (18-05-2018)

Identifiants

  • HAL Id : hal-01795649 , version 1

Citer

Nicolas Obin, Pascal Pham, Axel Roebel. Conversion d'Identité de la Voix Chantée par Sélection et Concaténation d'Unités Spectrales. Journées d'Etude de la Parole, Jun 2018, Aix-en-Provence, France. ⟨hal-01795649⟩
153 Consultations
203 Téléchargements

Partager

More