Как изменить MFCC на PointList и GMM

Я делаю программу распознавания эмоций, используя пакет comirva.

и у меня есть много wav-файлов об эмоциях, таких как злость, радость..

чтобы сделать gmm, сначала я извлек функции mfcc из одного из файлов argry.

что я смутил, так это то, как изменить mffccs на pointlist.

какой из них правильный? i) преобразование mfcc, извлеченных из одного файла, в один список точек ii) преобразование mfcc, извлеченных из многих файлов, в один список точек


person joejo    schedule 31.08.2012    source источник


Ответы (1)


правильно это

iii) объединение файлов mfcc, извлеченных из множества файлов, относящихся к одной и той же эмоции (например, злость), в один список точек и обучение GMM на них. В результате у вас должен получиться набор ГММ, соответствующих эмоциям.

Этот алгоритм классификации эмоций какой-то бессмысленный. Для обнаружения эмоций требуются некоторые другие функции, такие как высота тона и так далее. Я рекомендую вам сначала посмотреть на настоящие библиотеки распознавания эмоций, такие как openart/openear:

https://sourceforge.net/projects/openart/

person Nikolay Shmyrev    schedule 31.08.2012
comment
Огромное спасибо. ваш комментарий очень полезен для меня. Причина, по которой я выбираю mffcc в качестве способа распознавания речи, - это тезис. некоторые тезисы печальны, что комбинация mfcc + delta mfcc + gmm показывает лучшую скорость распознавания. хотя я хочу использовать библиотеку, которую вы рекомендуете, я должен использовать библиотеку Java, потому что моя команда делает приложение для Android. как я знал, очень тяжело пересадить библиотеку С++ в код Java. не так ли? поэтому я думаю, что лучше использовать mfcc + gmm, если это не так бессмысленно. потому что я новичок в английском, я так плохо пишу, извините. и еще раз большое спасибо за вашу поддержку. - person joejo; 01.09.2012
comment
Что касается использования openear, вы можете легко работать с C++, а затем иметь веб-службу, чтобы вы могли взаимодействовать со своей частью Android на C++. Взгляните на: ссылка... - person Mortaza Doulaty; 06.08.2014