Мультисенс и СимСенсей: интерактивная виртуальная платформа в качестве терапевтического помощи

Институт креативных технологий (ИКТ) Университет Южной Калифорнии (Оск) разработал интерактивную технологию Multisense, который анализирует человеческие выражения и паттерны в режиме реального времени в качестве терапевтической поддержки.

Справочник в исследованиях и разработках передовых технологий виртуальных людей, тем Институт креативных технологий (Институт креативных технологий ИКТ) ОСК разработал, с экспертами в области клинической психологии, когнитивная наука, машинное зрение, и так далее; Многотоннажная интерактивная технология для терапевтической и медицинской поддержки.

MultiSense - это программное обеспечение, которое автоматически отслеживает и анализирует выражения лица в режиме реального времени, поза тела, акустические характеристики, лингвистические паттерны и высокоуровневые поведенческие дескрипторы (Например, внимание, неугомонность,..).

От этих сигналов и поведения, индикаторы психологического дистресса человека фиксируются виртуальным аватаром. Со своей стороны,, SimSensei - это виртуальная человеческая платформа, разработанная специально для поддержки здоровья.

SimSensei позволяет взаимодействовать лицом к лицу, в котором виртуальный человек участвует и автоматически реагирует на ситуацию, воспринимаемую пользователем, и намерение, собственным голосом и жестами.

Эта платформа призвана стать инструментом поддержки для специалистов в области здравоохранения и терапии., а не для лечения или диагностики, так как выполняет роль виртуального психотерапевта, нет необходимости в том, чтобы человек контролировал его, но слушайте и взаимодействуйте как терапия.

Эти разработки используют технологию визуального захвата Корпорация Майкрософт Kinect для анализа выражений лица, позы тела, звуковые детали, лингвистические паттерны и сложные поведенческие детекторы в реальном времени, с помощью визуальных алгоритмов.

Все эти элементы позволяют виртуальному человеку уловить любое сомнение или реакцию и, путем анализа собранных данных, выявлять психологические расстройства, с диагностической эффективностью в случаях депрессии 90%, по мнению экспертов. Луи-Филипп Моранси и Альберт Риццо, Исследователи ИКТ, были основным ответственными за этот проект.

Больше виртуальных людей

Институт креативных технологий (ИКТ) разработал множество интерактивных виртуальных аватаров человека для широкого спектра приложений, от терапевта, описанного выше, до музейного гида, с кем-то, с кем можно пообщаться или военный тренер.

Например, Элли - это интерактивная симуляция, созданная для общения с людьми и взаимодействия в разговоре, кивая и задавая простые вопросы, которые, в соответствии с разговором, направляет пользователя к позитивному настроению.

Для достижения этой цели, этот виртуальный человек (мужской или женский) анализирует тысячи измерений пользователя, с которым он поддерживает виртуальный чат, которые должны иметь компьютер, оснащенный видеокамерой, Сенсор Kinect и звук, для синтаксического анализа выражений, голосовые движения и перегибы.

Элли подробно анализирует все эти элементы, чтобы обнаружить настроение, апатия, изменения высоты тона, Наружность, и так далее. следовать простому протоколу действий в разговоре или прослушивании пользователя. Этот аватар в настоящее время используется в Министерстве обороны США в качестве терапевтической альтернативы..

Другие статьи о Институт креативных технологий-ИКТ, Корпорация Майкрософт