ДонНТУ> Портал магистров ДонНТУ> Главная | Реферат | Библиотека | Ссылки | Отчет о поиске | Индивидуальное задание

Бондаренко Иван Юрьевич

Тема магистерской диссертации:

Интеграция визуального и речевого способов управления процессом ввода и редактирования текстовой информации

Руководитель: Федяев О.И., доц., к.т.н.

Email: bond005@yandex.ru


МОЯ БИБЛИОТЕКА

ИНТЕГРАЦИЯ ВИЗУАЛЬНОГО И РЕЧЕВОГО СПОСОБОВ УПРАВЛЕНИЯ ПРОЦЕССОМ ВВОДА И РЕДАКТИРОВАНИЯ ТЕКСТОВОЙ ИНФОРМАЦИИ

Федяев О.И., Бондаренко И.Ю.

Материал взят из сборника трудов научной сессии МИФИ–2006: том 3, "Интеллектуальные системы и технологии" ( под ред. Ядыкина И.М., Рыбиной Г.В., Синицына С.В. – М.:МИФИ, 2006, страницы 194 – 195 )


ИНТЕГРАЦИЯ ВИЗУАЛЬНОГО И РЕЧЕВОГО СПОСОБОВ УПРАВЛЕНИЯ ПРОЦЕССОМ ВВОДА И РЕДАКТИРОВАНИЯ ТЕКСТОВОЙ ИНФОРМАЦИИ

Рассматривается включение речевого интерфейса в текстовый процессор Microsoft Word с целью повышения эффективности работы пользователя при вводе и редактировании документов. Распознавание речевых команд осуществляется с помощью метода нечёткого сопоставления образов.

Речевой интерфейс, как более естественный для человека, приобретает всё большую востребованность в современных человеко-машинных системах. В основе его построения лежит задача распознавания речи, для решения которой, несмотря на множество предложенных способов, не найден приемлемый метод. Наметились основные направления, базирующиеся на вероятностном, метрическом и нейросетевом подходах. Также перспективен для решения трудноформализуемых задач, к которым относится задача распознавания речи, подход на основе нечёткой логики[1]. В работе [2] описан метод нечёткого сопоставления образов и приведена высокая оценка его эффективности в распознавании английских, немецких и японских слов. Однако, вопросы применения данного метода к распознаванию русскоязычных слов не рассмотрены.

Данная работа посвящена анализу эффективности метода нечёткого сопоставления в задаче распознавания изолированных русских слов, возникающей при интеллектуализации интерфейса текстового процессора Microsoft Word. Рациональное сочетание речевого и стандартного визуального способов управления процессом ввода и редактирования текстовой информации позволит снизить нагрузку на тактильно-зрительные каналы человека и тем самым повысить эффективность его работы.

Речевой сигнал представляется в виде двумерного спектрального временного образа (СВО), получаемого с помощью оконного преобразования Фурье. СВО позволяет выделить местоположение резонансных частот, т.е. локальных выбросов, что является определяющей особенностью речевого сигнала [2]. На этом основании СВО можно преобразовать к двоичному виду, не теряя указанных информативных признаков речи, с помощью следующей замены: 1 – на месте локального выброса, 0 – в других местах. Полученный образ называют двоичным спектральным временным образом (ДСВО) и используют его как отражение особенностей речевого сигнала.

В качестве единиц речи рассматриваются слова, набор которых определяет словарный состав речевого командного интерфейса с редактором Word.

Для распознавания изолированных слов, произносимых в реальном времени, применялся метод нечёткого сопоставления с эталоном [2]. Эталонные образы для каждого слова словаря формировались как среднее арифметическое ДСВО различных вариантов произношения данного слова и затем подвергались нормализации. В результате формируется бинарное нечёткое отношение между множеством F (номеров частот f) и множеством T (номеров временных интервалов t) в виде:

formula1

где R – нечёткое отношение, которое ставит каждой паре элементов formula2 величину функции принадлежности formula3 [1].

Обозначим число записанных слов через n, множество слов через I = {i1, i2, ...in} и множество нечётких отношений, характерных для каждого слова, через R = {r1, r2, ...rn}. Входной неизвестный образ y рассматривается как обычное (чёткое) отношение между множеством частот и множеством временных интервалов. Для него вычисляются степени сходства Sj с каждым нечётким отношением rj . Результатом распознавания является слово j, такое, что

formula4.

Степень подобия вычисляется по формуле formula5, где formula6, formula7.

В результате исследований установлено, что метод нечёткого сопоставления точно распознаёт даже сильно зашумлённые образы, если они не деформированы. Однако, при распознавании речевых образов русского языка, которые характеризуются сильной изменчивостью по структуре расположения локальных выбросов, точность составила 85%.

Список литературы

  1. Кофман А. Введение в теорию нечетких множеств. – М.: Радио и связь, 1982, 432 с.
  2. Киедзи Асаи, Дзюдзо Ватада, Сокуке Иваи. Распознавание речи// Прикладные нечёткие системы, Под ред. Т.Тэрано и др. – М.: Мир, 1993, с.157-170.
МОЯ БИБЛИОТЕКА
ДонНТУ> Портал магистров ДонНТУ> Главная | Реферат | Библиотека | Ссылки | Отчет о поиске | Индивидуальное задание