Нейросеть научилась предугадывать жесты

Ученые научили нейросеть предугадывать жесты на основе голоса человека.

нейросеть и жесты

В то же время нейросеть speech2gesture пока умеет предвидеть менее половины жестов.

Исследователи из Калифорнийского университета в Беркли создали нейросеть speech2gesture, которая способна предсказывать жесты, основываясь только на голосе человека. Она выдает реалистичный результат, который оказывается точным почти в половине случаев.

Нейросеть научили на 144 часах видеозаписей с десятью разными людьми, которым приходится много жестикулировать. Среди этих людей — телеведущие, преподаватели и проповедники. В результате алгоритм научился передавать реалистичную жестикуляцию, которую синхронизировали с оригиналом.

Пока система работает с довольно низкой точностью и только в 44% случаев полученные результаты совпадают с оригиналом. В некоторых случаях нейросеть путает положение рук, но в любом случае генерирует вполне правдоподобный результат.

Чтобы поддержать будущие исследования, команда опубликовала в открытом доступе набор данных с характерными жестами и исходный код, загрузить которые можно по ссылке:

Learning Individual Styles of Conversational Gesture

06.07.2019

Предложить интересную новость, объявление, пресс-релиз для публикации »»»

Просмотров: 382
Категория: Коммуникация, Психология Другие новости по теме:

  • Ирина Кобевко. «Любовь» до тех пор, пока взгляды совпадают? Любовь и взаимопонимание
  • Сексуальные жесты женщин и мужчин - описание
  • Жесты-рефрены. Что такое жестикуляционный рефрен
  • Ж. Мессинжер. Речь тела: о чем нам говорят жесты?
  • Исследования одиночества: как работает мозг одиноких людей
  • Ученые нашли источник сознания в мозге человека
  • Классификация психологических типов на основе жестов-рефренов
  • Владимир Стукас. Психологическая типология, которая работает
  • Алгоритм предсказывает будущее пар по интонациям голоса
  • Григорий Чаусовский. Психотренажер для снижения биологического возраста человека
  • Околосмертные переживания - не только перед смертью
  • После 45 лет счастливая жизнь только начинается
  • Мыть руки следует не только перед едой, но и после принятия важных решений
  • Шопинг-терапия: что это и как она работает
  • Семь полезных советов для успеха в любом деле
  • Алла Дзяланская. «…Все может мама, только папой не может быть!»
  • Андрей Торнов. Нервная система: проблемы которые вы имеете и знания, которых вы не имеете
  • Джуди Аппс. Как влиять на людей с помощью голоса. Секреты ораторского мастерства
  • Дэн Вальдшмидт. Почему нужно уметь понимать людей, чтобы стать успешным?
  • Е.В. Повешенный. Сознание человека
  • Узнайте человека по походке
  • Тамара Филиппова. Свобода человека
  • Как функционирует мозг эрудированного человека
  • Чем отличается мозг умного человека?
  • С.В. Уманский. Аутентичность как ресурс самоорганизации человека
  • Нaтaлья Аксeновa. Домашняя магия, или Ритуалы современного человека
  • Григорий Чаусовский. Инструментальная психотехнология гармонизации утреннего пробуждения человека
  • Лара Шрагина. Выявление факторов, влияющих на развитие взрослого человека
  • Игорь Дрозд, Леонид Цыбульский. Структура переживаний и ее место в мышлении человека
  • Ирина Кобевко. Что он «несёт», или Как понять человека с первых слов?



  • ---
    Разместите, пожалуйста, ссылку на эту страницу на своём веб-сайте:

    Код для вставки на сайт или в блог:       
    Код для вставки в форум (BBCode):       
    Прямая ссылка на эту публикацию:       






    Данный материал НЕ НАРУШАЕТ авторские права никаких физических или юридических лиц.
    Если это не так - свяжитесь с администрацией сайта.
    Материал будет немедленно удален.
    Электронная версия этой публикации предоставляется только в ознакомительных целях.
    Для дальнейшего её использования Вам необходимо будет
    приобрести бумажный (электронный, аудио) вариант у правообладателей.

    На сайте «Глубинная психология: учения и методики» представлены статьи, направления, методики по психологии, психоанализу, психотерапии, психодиагностике, судьбоанализу, психологическому консультированию; игры и упражнения для тренингов; биографии великих людей; притчи и сказки; пословицы и поговорки; а также словари и энциклопедии по психологии, медицине, философии, социологии, религии, педагогике. Все книги (аудиокниги), находящиеся на нашем сайте, Вы можете скачать бесплатно без всяких платных смс и даже без регистрации. Все словарные статьи и труды великих авторов можно читать онлайн.







    Locations of visitors to this page



          <НА ГЛАВНУЮ>      Обратная связь