Se concentrer sur les diff\'erences : une m\'ethode d'\'evaluation subjective efficace pour la comparaison de syst\`emes de synth\`ese (Focus on differences : a subjective evaluation method to efficiently compare TTS systems * )
En proposant une nouvelle approche de synth{\`e}se de la parole, les {\'e}tudes comportent g{\'e}n{\'e}ralement une {\'e}valuation subjective d{'}{\'e}chantillons acoustiques produits par un syst{\`e}me de r{\'e}f{\'e}rence et un nouveau syst{\`e}me. Ces {\'e}chantillons sont produits {\`a} partir d{'}un petit ensemble de phrases choisies al{\'e}atoirement dans un unique domaine. Ainsi, statistiquement, des {\'e}chantillons pratiquement identiques sont pr{\'e}sent{\'e}s et r{\'e}duisent les {\'e}carts de mesure entre les syst{\`e}mes, au risque de les consid{\'e}rer comme non significatifs. Pour {\'e}viter cette probl{\'e}matique m{\'e}thodologique, nous comparons deux syst{\`e}mes sur des milliers d{'}{\'e}chantillons de diff{\'e}rents domaines. L{'}{\'e}valuation est r{\'e}alis{\'e}e uniquement sur les paires d{'}{\'e}chantillons les plus pertinentes, c{'}est-{\`a}-dire les plus diff{\'e}rentes acoustiquement. Cette m{\'e}thode est appliqu{\'e}e sur un syst{\`e}me de synth{\`e}se de type HTS et un second par s{\'e}lection d{'}unit{\'e}s. La comparaison avec l{'}approche classique montre que cette m{\'e}thode r{\'e}v{\`e}le des {\'e}carts qui jusqu{'}alors n{'}{\'e}taient pas significatifs.
PDF Abstract