Розглянуто модель міміки емоційних станів людини як опуклу комбінацію деяких базових станів. Запропоновано дану формальну модель використовувати як для синтезу мімічних образів емоційних станів, так і для їх розпізнавання. Введено та досліджено множину з двадцяти однієї емоції, які можна одержати в результаті розкладу по базису простору характеристичних ознак. Проаналізовано вплив кожної характеристичної ознаки під час розкладу на базові емоції у побудованому просторі.

Запропоновано новий підхід до побудови базового простору мімічних проявів емоційних станів людини. Для побудови використано метод гнучких моделей, які деформуються. Контурні моделі побудовано за допомогою нерівномірних раціональних базисних сплайнів (NURBS). Довільну емоцію конкретної людини зображено як опуклу комбінацію станів цього базового простору.

Наведено цілісну інформаційну технологію аналізу мімічних виразів емоцій на обличчі людини. Міміку емоційних станів людини описано у вигляді лінійної комбінації деяких базових станів. Параметри моделі одержано за допомогою методу гнучких шаблонів із використанням NURBS-кривих. Довільну емоцію конкретної людини розпізнано як опуклу комбінацію станів запропонованого базового простору.

На базі формальної психологічної моделі емоційних станів розроблено формальну модель їх мімічних проявів - зроблено перехід від простору ознак, що описують базові емоції з точки зору ситуацій, в яких вони виникають, до простору ознак, які характеризують візуальну, мімічну складову для базових емоційних станів. Для уникнення неоднозначностей під час аналізу зроблено перехід від феноменологічного визначення характеристичних мімічних ознак до певної їх формалізації за допомогою NURBS-кривих. Запропоновано загальну формальну модель мімічних проявів емоційних станів у вигляді простору ознак, визначено базис цього простору. Запропоновано нову мультимедійну технологію та засіб штучного інтелекту для аналізу мімічних проявів емоцій.

Запропоновано цілісний підхід для моделювання та розпізнавання мімічних проявів емоцій на обличчі людини. Зроблено перехід від формального опису емоційних станів людини до опису мімічних проявів на обличчі. Фотографічні зображення, які відповідають певним емоційним станам, перетворюються у векторний простір мімічних проявів. Побудовано базис цього простору. Довільна емоція конкретної людини розпізнається як опукла комбінація станів одержаного базового простору.

Запропоновано підхід до сегментації голосових мовних сигналів за ознакою зміни диктора та способи визначення позицій зміни диктора в голосовому мовному сигналі. Позиції зміни диктора визначаються за допомогою аналізу множин характеристичних векторів в околі паузи на основі Байєсівського інформаційного критерію. Покращання якості характеристичних векторів досягається за допомогою використання сегментів з рівнем енергії не нижче певного порога. Запропоновано адаптивний підхід для автоматичного визначення пауз у мовному сигналі.

Досліджено дактильно-жестову мову, яка використовується для спілкування людьми з вадами слуху. Мета дослідження - розробка та реалізація алгоритмів розпізнавання дактильно-жестової мови. Розглянуто застосування методів аналізу зв'язних областей, а також використання кутових параметрів для ідентифікації елементів дактильно-жестової мови.

Для побудови базового простору мімічних проявів емоційних станів людини запропоновано використовувати метод гнучких моделей, які деформуються, у цьому випадку контурні моделі будуються за допомогою нерівномірних раціональних базисних сплайнів (NURBS).

This work presents a computer technology for the emotion detection on human faces. The model is offered as a linear combination of some basic emotions. Parameters of the model are found with the help of the method of deformable templates using NURBS curves. An arbitrary emotion on a human face is detected as a convex combination of basic emotions.

Використовуючи гнучкі шаблони у вигляді NURBS-кривих і B-сплайн апроксимацію, одержано множину опорних точок NURBS-кривої для шаблонів, які характеризують емоцію.

Розглянуто задачу аналізу мімічних проявів у контексті задачі аналізу жестової мови. Запропоновано інформаційну технологію для автоматичного визначення довільного емоційного стану конкретної людини як опуклої комбінації деяких базових станів.