UEA представили розробку читання по губах в Шанхаї
Наука і техніка
UEA представили розробку читання по губах в Шанхаї
12:30 02.04.2016
441
Розповісти друзям

Раніше ми повідомляли про методику читання по губах, розроблену вченими з університету Західної Англії. Тепер дослідники представили розробку в Шанхаї на конференції ICASSP. Створена ними комп'ютерна система здатна читати людську мову по руху губ.

Розроблена дослідниками програма аналізує відео, захоплюване за допомогою камер. Мова людини була розділена на дві складові — фонеми і віземи, які представляють собою візуальний еквівалент фонем. При цьому виявилося, що фонем більше, ніж візем, для системи розпізнавання була потрібна дворівнева ієрархічна система.

Спочатку, відзначає N+1, вчені навчали класифікатори співвідносити віземи зі звуками, потім кількість класифікаторів було збільшено з тим, щоб кожній віземі відповідало кілька фонем.

Ефективність створеної системи поки невелика. При розпізнанні безперервної мови машина розуміє точно 10–15% сказаного, коли вимовляються окремі фонеми, цей показник зростає до 25%.

Британские учёные научили компьютер читать по губам

Вчені сподіваються удосконалити систему, щоб застосовувати її в ситуаціях, коли голоси на записі погано чути або аудіодоріжка зіпсована. Комп'ютерне читання по губах також може бути затребуване у криміналістиці.

Цікаве в розділах на сайті
Перлини української класики (збірник)
Леся Українка Іван Якович Франко Михайло Михайлович Коцюбинський Тарас Григорьевич Шевченко Василь Стефаник Микола Хвильовий Григорій Квітка-Основ’яненко Iван Нечуй-Левицький
Тарзан. Легенда
2016, Великобритания, Канада, США