ГОСТ Р 59880-2021

ФЕДЕРАЛЬНОЕ АГЕНТСТВО

                               ПО ТЕХНИЧЕСКОМУ РЕГУЛИРОВАНИЮ И МЕТРОЛОГИИ




                                         НАЦИОНАЛЬНЫЙ                       ГОСТ Р
                                              СТАНДАРТ
                                           РОССИЙСКОЙ
                                                                            59880  —


                                             ФЕДЕРАЦИИ                      2021




                                       Эргономика.
                          Проектирование и применение испытаний
                                   речевых технологий

                         МЕТОДИКА ОПРЕДЕЛЕНИЯ ПОКАЗАТЕЛЕЙ
                          КАЧЕСТВА СИНТЕЗА РЕЧИ ПО ТЕКСТУ


                                           Издание официальное




                                                    Москва
                                       Российский институт стандартизации
                                                      2021




неразрушающий контроль

ГОСТ Р 59880—2021


                                       Предисловие
     1 РАЗРАБОТАН Федеральным государственным унитарным предприятием «Научно-исследова­
тельский институт «Квант» («ФГУП «НИИ «Квант»)

    2 ВНЕСЕН Техническим комитетом по стандартизации ТК 164 «Искусственный интеллект»

     3 УТВЕРЖДЕН И ВВЕДЕН В ДЕЙСТВИЕ Приказом Федерального агентства по техническому ре­
гулированию и метрологии от 25 ноября 2021 г. № 1583-ст

    4 ВВЕДЕН ВПЕРВЫЕ




     Правила применения настоящего стандарта установлены в статье 26 Федерального закона
от 29 июня 2015 г. № 162-ФЗ «О стандартизации в Российской Федерации». Информация об из­
менениях к настоящему стандарту публикуется в ежегодном (по состоянию на 1 января текущего
года) информационном указателе «Национальные стандарты», а официальный текст изменений
и поправок — в ежемесячном информационном указателе «Национальные стандарты». В случае
пересмотра (замены) или отмены настоящего стандарта соответствующее уведомление будет
опубликовано в ближайшем выпуске ежемесячного информационного указателя «Национальные
стандарты». Соответствующая информация, уведомление и тексты размещаются также в ин­
формационной системе общего пользования — на официальном сайте Федерального агентства по
техническому регулированию и метрологии в сети Интернет (www.rst.gov.ru)




                                                              © Оформление. ФГБУ «РСТ», 2021

     Настоящий стандарт не может быть полностью или частично воспроизведен, тиражирован и рас­
пространен в качестве официального издания без разрешения Федерального агентства по техническо­
му регулированию и метрологии

ГОСТ Р 59880—2021


                                                                          Содержание
1 Область пр и м е н е н и я ..................................................................................................................................................1
2 Нормативные с с ы л ки ..................................................................................................................................................1
3 Термины и определения............................................................................................................................................. 2
4 Приборы и оборудование...........................................................................................................................................3
5 Общие требования......................................................................................................................................................3
6 Измерение смысловой разборчивости синтезированной речи аудитивным м е то д о м ................................. 4
7 Измерение смысловой разборчивости ускоренной синтезированной речи аудитивным методом . . . .6
8 Измерение интонационной разборчивости синтезированной речи аудитивным методом........................... 6
9 Измерение интонационной разборчивости ускоренной синтезированной речи
  аудитивным м е то д о м ................................................................................................................................................. 7
10 Измерение естественности синтезированной речи аудитивным м е то д о м ...............................................7
11 Измерение качества нормализации синтезируемого текста......................................................................... 8
12 Измерение качества управления синтезом речи разметкой в формате S S M L .........................................9
13 Неоцениваемые функциональные возможности синтезатора....................................................................10
Приложение А (обязательное) Правила составления таблиц для измерения смысловой
разборчивости речи...................................................................................................................................................... 11
Приложение Б (обязательное) Правила составления таблиц для оценки интонационной
                разборчивости р е ч и ....................................................................................................................... 14
Приложение В (обязательное) Правила составления таблиц для измерения естественности речи. . .20
Приложение Г (обязательное) Правила составления таблиц для проверки нормализации текста . . . .21
Приложение Д (обязательное) Правила составления таблиц для проверки управления синтезом. . . .23
Б иблиограф ия...............................................................................................................................................................25

ГОСТ Р 59880—2021


                                          Введение
      Настоящий стандарт регламентирует методику определения показателей качества синтеза речи
по тексту, основанную на методах измерения показателей разборчивости и естественности речи. Мето­
дика включает в себя измерение разборчивости для нормального и ускоренного темпа речи, показате­
ля деградации разборчивости синтезированной речи, генерируемой синтезатором, и показателя есте­
ственности речи и признаков искажения естественности речи (картавость, гнусавость, помеха и др.).
Дополнительно данная методика учитывает качество нормализации входного текста (преобразование
чисел в числительные, расшифровка сокращений, правильность определения ударений в словах, в
том числе разрешение омонимии, правильность интонационного оформления текста), а также качество
управления процессом синтеза речи с помощью тегов по стандарту Speech Synthesis Markup Language.
      Оценки, установленные настоящим стандартом, могут быть получены в обычном (ручном) и ав­
томатизированном (программном) режимах. В программном режиме использована персональная элек­
тронно-вычислительная машина (ПЭВМ), что обеспечивает автоматизацию измерительных процедур
(аудирование, подсчет результатов измерения, поиск аномальных измерений, оформление протоколов
измерений и пр.).




IV