Блог Яны Семеновой

Лекция Андрея Александровича Кибрика  «Когнитивная лингвистика и когнитивный анализ дискурса» утвердила меня в мысли, что в текущую разработку алгоритма распознавания эмоций просто необходимо включить анализ просодий. Именно эти супрасегментные единицы несут ценную информацию об отношении говорящего к объекту, побудившему его речевой поток 🙂 TODO: Сопоставление мимических и просодических паттернов на одной временной шкале.

Медицинские исследования показывают, что афазия не является психическим расстройством, поэтому эффективность работы алгоритма поиска и восстановления недостающего звена мыслительного процесса формирования речи может быть оценена непосредственно в процессе речевой деятельности.

Усиление,  акцент, интонационное выделение слова в предложении.

• Sound Forge ver. 6.0. фирмы Sonic Foundry (США) со встроенными дополнительными модулями
• Spectrogram, ver. 7.2. Автор — R.S.Horne
• Cool Edit Pro 1.2a фирмы Syntrillium Software corp. (США)
• Wave Lab, ver. 4 фирмы Steinberg (США)
• Spectra LAB — FFT Spectral Analysis System, ver. 4.32.11 фирмы Sound Technology inc. (США)
• SFS ver. 4.30 Mark Huckvale University College
• Speech Analyzer. A Speech Analysis Tool. Ver. 2.4 Test 2.2. SIL International Acoustic Speech Analysis Project JAARS-CCS, Waxhaw, NC.

Частота выделяемого голоса от 400  до 2500 герц. Посторонние шумы можно убирать в Noise Reduction в Adobe Audition. Можно либо напрямую положить фильтр с графическим эквалайзером, либо выбрать нужный редактор в меню настроек и нажать на правую кнопку мыши Open in Audio Editor.

Динамика произносимых слов является одной из темпо-ритмических характеристик речи. Алгоритм фиксирования высокой или низкой скорости речи, изменение темпа в процессе.

Вербальная компонента может быть представлена как собственно смысловым, так и интонационным наполнением. И последовательность слов, и тон их воспроизведения отражают отношение к предмету сообщения