Дослідженнями під керівництвом Рона Кола (Ron Cole) з Університету Колорадо (University of Colorado, Boulder) створена комп’ютерна програма, здатна допомогти глухим дітям навчитись говорити та сприймати мову шляхом зорового сприйняття.
Навчання проводить синтетичний персонаж – анімований інструктор з прізвиськом Baldi. Головними його інструментами є м’язи обличчя, ром, зуби та язик, рухи яких синхронізуються зі словами, що промовляє програма та точно відповідають рухам людини. Задача учнів – вимовляти ті ж самі фрази, по можливості точно повторювати рухи Baldi, та досягти тим самим правильної вимови, одночасно навчившись читати по губах. Контроль провадиться самою програмою.
Baldi, в створенні якого вкладено майже 2 млн. доларів, являє собою осередок високих технологій – в ньому сполучені останні досягнення в області синтезу та розпізнавання мови, анімації обличчя. Проговорюючи текст, введений з клавіатури, Baldi настільки виразний, що ті, хто вже вміють читати по губах, легко розуміють його (а хто не вміє – вчиться)ю Реалізація точного контролю вимови ґрунтується на вивченні особливостей мови більше тисячі дітей, в результаті алгоритми програми дозволяють виділяти найтонші деталі в говорі учнів та вказувати, що конкретно необхідно виправити.
На сьогодні Baldi випробовують в кількох американських школах в класах по від 6 до 12. Для викладачів та сторонніх розробників програма та супровідні інструменти доступні безкоштовно з web-сайту творців. Між тим, за їхніми словами, напрацювання проекту можуть використовуватись для створення великої кількості інших програм: серед них програми, що полегшують глухим та слабочуючим дітям процес навчання іноземним мовам, виправляють недоліки мови (це вже відноситься до всіх дітей без виключення), виявлення порушень читання.
Джерело: Інвак-Інфо
