Чтение по губам программа

Как освоить азы

Если вы не знаете, как научиться читать по губам, то самым лучшим способом будет пройти обучение у сурдопедагога. Уроки чтения по губам помогут вам овладеть данной техникой в полной мере.

Если у вас нет возможности обучаться у специалиста, тогда это можно будет сделать самостоятельно в домашних условиях.

Все звуки делятся на видимые и невидимые. Видимыми считаются те, в произношении которых, губы принимают четкое положение, а невидимые – это те звуки, которые трудно определить сразу:

• Шевеля ртом перед зеркалом нужно четко и с выражением проговорить все буквы алфавита. При этом нужно обозначить буквы, звучание которых очень схоже по движению лица и почти неразличимые буквы;
• После того как вы научитесь различать буквы, можно будет переходить на проговаривание и запоминание слогов. Есть некоторые из них, которые четко различимы – ФА, ФО, ПУ, ШУ, ПА, ША, поэтому их произнесение нужно будет обязательно запомнить;


• После того, как распознавание букв и чтение слогов будет успешно усвоено, можно будет перейти к следующему этапу, где мы учимся чтению по губам у других. Для этого можно использовать запись знакомого фильма или телепередачи. Смотреть запись нужно будет без звука, обращая внимание на движение губ тех, кто там снят. Для начала можно будет включить субтитры и немного упростить себе задачу;
• При таком чтении нужно обращать внимание и на лицо, так как оно тоже отображает большое количество информации и помогает лучше воспринимать сказанное. Брови способны выразить ужас или удивление, а движение мышц на щеках может свидетельствовать о выражении отвращения.

Руководствуясь всеми этими принципами вскоре можно заметить, что умеешь сносно читать по губам.

Что поможет быстрее освоить навык

Как можно быстрее и лучше освоить навык вы сможете, если вам помогут в этом близкие и друзья. Для этого нужно, чтобы человек регулярно произносил перед вами экспрессивные выразительные слова и предложения, не озвучивая их, а вы в этот момент пытались понять, о чем он говорит.

А вообще, для этого даже не нужно кого-то просить. Усваивать этот навык можно всегда и везде. В метро, кафе, на улице и на работе вы можете постоянно наблюдать за движением губ незнакомых вам людей и пытаться понять, о чем они говорят.

Человек, бегло читающий по губам должен без труда понимать, о чем говорят герои фильмов при просмотре их без звука. При чем, здесь легче улавливать смысл, обращая внимание на ситуацию, мимику и движения губ.

В помощь при чтении с телевизора можно использовать субтитры. Они очень помогают в работе над усвоением навыка. В момент, когда мы учимся читать по чужим губам, важно очень много работать над собой, так как любое умение приходит к нам с практикой.

Изучение артикуляции звуков

Артикуляция – это определенное положение органов, которое необходимо для образования звука.

Человек, который планирует научиться чтению по губам должен уметь различать все этапы артикуляции:

• Подготовка к произношению звука;
• Произношение;
• Завершение произношения и одновременно переход к образованию нового звука.

Это очень важно для того, чтобы при переходе к практическим навыкам легче было различать положение губ при произнесении звуков.

Наверняка глядя на глухонемых людей, вам интересно было понять, как им удается читать слова. Даже сидя в наушниках, вы сможете с легкостью понять некоторые слова, которые произносит вам человек. Например: «Сними наушники».

Постоянно занимаясь над собой, ежедневно хотя бы по 10 минут перед зеркалом, уже в ближайшее время, вы сможет без труда отличить звук «ФА» от «ЛЯ». Степень понимания при чтении зависит от некоторых составляющих.

Прежде всего, это грамотное владение языком. Без его знания, никто не сможет воспользоваться навыком: «читай по губам». Не зная самых элементарных слов, невозможно прочитать их.

Еще одним не менее важным условием при освоении навыка чтения по губам можно назвать догадку. Понятно, что все прочитать просто невозможно. Обычно, человек, который не слышит из пяти сказанных слов, понимает только 2-3, а смысл остальных слов он сможет понять по контексту, по теме разговора и остальным смысловым связям.

Все люди шевелят ртом по-разному, и это тоже имеет большое значение. Плохо когда собеседник, что-то говоря, почти не открывает рот, его слова очень трудно понять. Гораздо лучше, когда он активно артикулирует и его мимические мышцы выражают его эмоции.

Когда два человека, беседуя в вагоне метро, пытаются говорить громче шума поезда, то на их лицах видны образцы активной артикуляции, которые крайне важны для лучшего восприятия слов. Понять речь человека могут мешать даже усы.

Как правило, даже хорошо обученный человек, имеющий большой опыт в этом деле, не может очень долго читать речь. Так, лекция преподавателя уже через 10-15 минут ее чтения перестает восприниматься должным образом, теряется смысловая цепочка и становится сложно держать уровень восприятия речи говорящего, отчего производительность падает.

Даже среди глухих очень мало людей, которые в совершенстве владеют этим умением. Только единицы среди них могут делать это практически всегда и везде, независимо от того, как артикуляция у собеседника.

Как правило, у глухих понимание речи колеблется в пределах 20-50%. Тем не менее, данный навык актуален как для глухих и тех людей, которые плохо слышат, так и для тех, кто, придерживаясь собственных целей, стремиться его освоить.

Для чего человеку нужно восприятие артикуляции звука

Что такое артикуляция? Это своеобразное расположение органов, которые участвуют при образовании какого-то конкретного звука. Если вы хотите научиться читать по губам, то вы должны знать шаги этой самой артикуляции:

• Подготовка к выходу звука.
• Произношение звука.
• Окончание произношения – переход к появлению следующего звука.

Подобная информация пригодится в том случае, когда вам понадобится отличать движение губ при разговоре.

В наше время многие ученые и специалисты стремятся модернизировать программы, дающие возможность глухим людям понимать речь человека глазами. Возможно, такое умение для здорового человека останется лишь кратковременным увлечением, а возможно и поможет в какой-либо жизненной ситуации или после потери слуха.

Существует несколько методов обучения, которые можно практиковать в любом месте. Стоит рассмотреть их более подробно.

1. Практические занятия с сурдопедагогом. Несмотря на то, что эти специалисты обучают детей, записаться на консультацию может каждый желающий. На уроках получится читать звуки с губ и научиться сурдопереводу.
2. Наблюдение за поведением людей. Этот вариант актуален в парке, кафе, университете, на лавочке у подъезда. Стоит лишь определиться на конкретном объекте «слежки» и, не подавая вида, следить за его губами при разговоре.
3. Просмотр телевизора. Попробуйте поставить очень знакомый вам фильм и просмотреть его без звука. Наблюдайте за губами актеров и понимайте, о чем они ведут речь. Изначально вам помогут запомнившиеся ранее фразы. Затем включите незнакомое кино и снова выключите звук. Старайтесь вникать в смысл фильма и понимать, о чем разговаривают герои. Здесь подсказками могут служить субтитры.
4. Использование зеркала. Осваивать новые знания возможно и при помощи зеркального отражения. Вам нужно стать перед зеркалом и проговаривать отдельные слова, а уже после целые предложения. Очень важно обращать внимание на свой рот, и запоминать движения губ при произношении конкретных букв.
5. Работа с партнером. Этот вариант предусматривает помощь супруга или друга. Помощь человека быстрее всего может обучить чтению по губам, если он будет губами беззвучно говорить слова, которые вы должны прочесть. Если вы чувствуете, что у вас это получается, то переходите на произношение предложений.

В чем отличие видимых звуков от невидимых

Звуки, при выходе которых губы вычерчивают определенное движение, называются видимыми. К невидимым же относятся те звуки, которые невозможно понять с одного раза, ибо они представлены практически идентичным положением губ.

Для того чтобы научиться читать по губам, нужно идеально отличать подобные звуки. Для этого рекомендуется использовать самообучение перед зеркалом. Обучаться желаемому навыку можно и на работе, и дома, и в автобусе. Просто наблюдайте за тем, что происходит вокруг вас и как ведут себя окружающие люди: как двигаются их губы, мимика и жестикуляция. Если говорить об электронных помощниках, то здесь стоит вспомнить о программе «ReadmyQuips», заключающейся в тренировке по аудио и видео урокам.

Идеально овладеть чтением по губам получится только тогда, когда вы будете ежедневно прилагать для этого усилия, ведь никто не говорит, что будет легко. Первым делом тренируйтесь на знакомых и родных людях, а уже потом оттачивайте умения на прохожих и соседях по креслам в метро.

Но стоит помнить о том, что все люди разные и не каждый сможет научиться тому, что другому дается с легкостью.

Развитие

При чтении с губ активируется не только зрительная кора мозга, но и слуховая, что происходит и при распознавании слышимой речи.

Даже новорождённые дети пытаются имитировать движения губами и языком, увиденные у взрослых. Младенцы дольше смотрят на источник визуального стимула, если ему соответствует одновременно происходящий аудиальный стимул (в отличие от, например, записи звука). Дети в 4—8 месяцев обращают особое внимание на движения губ говорящих как на родном для себя языке, так и на других языках. После 12 месяцев они перестают следить за губами говорящих на родном языке. Во взрослом возрасте глухие читают по губам лучше слышащих из-за постоянной практики, разница начинает быть заметной с 14 лет. Среди глухих данный навык лучше развит у тех, кто терял слух постепенно, а не внезапно.

В основном чтение по губам используется глухими и слабослышащими. При этом у слабослышащих оно более успешно, если при этом речь слышна хотя бы частично. Для упрощения чтения по губам может использоваться вспомогательная жестовая система, к примеру, маноральная речь. Существуют также автоматизированные средства чтения с губ. Успешность чтения по губам зависит от способности к образному мышлению и аналитическому восприятию, а также зрительной памяти. Чтение по губам усложняется при плохом освещении и наличии у говорящего бороды или усов.

1.Артикуляция как основа обучения

Искусство читать по губам появилось еще в древние времена. Чтобы разузнать планы противника шпионов обучали этому навыку. На данный момент не обязательно быть шпионом чтобы научиться читать по губам. У каждого, кто обучается этому делу свои мотивы, начиная от общеобразовательных и заканчивая тем, что вы от кого то прячетесь или стали хуже слышать. Кстати, такой навык как умение читать слова по губам станет отличным помощником на экзамене, либо на шумном мероприятии.

Говорят, чтобы научится читать по губам недостаточно лишь интереса и концентрации. Понадобится выучить этапы и законы артикуляции и иметь хоть немного склонности. При его отсутствии вам поможет усердие.

Что такое артикуляция и в чем её роль?

Артикуляция — это способ образования и координирования произносительных органов во время образования звуков речи. Все активные произносительные органы принимают участие в произношении каждого звука. Расположение данных органов создают артикуляцию, четкость и отделимость звуков.

Запомните каждый этап артикуляции, научитесь их разделять. Выделяют следующие этапы:

1) Подготовка к произношению звука

2) Произношение звука

3) Завершение произношения

Одновременно завершение служит и переходом к созданию следующего звука. Эти знания помогут с большей легкостью различать положение губ во время образования слов.

2. Самостоятельное обучение

Существуют специализированные программы, которые используются при обучении глухих детей. Они помогают детям воспринимать речь устно и зрительно. Ученые постоянно работают над исследованиями в этой области. Этим же программами пользуются и при помощи обучения те, кто хочет овладеть данным навыком.

Например программа ReadmyQuips. На данный момент она находится на разработке, но никто не мешает вам принять участие в качестве испытателя.

Возможно, данный навык будет являться для вас хобби, либо очередным убивающем свободное время занятием. Но не стоит упускать тот момент, что в непредвиденной ситуации вас может спасти что угодно, в частности и умение читать по губам.

Обучаться самостоятельно можно в любых условиях, используя любовь из возможных способов. Главное, чтобы он вам понравился и был наиболее удобным.

Занятия с сурдопедагогом

Обычно, такие специалисты работают с детьми, чей слух нарушен. В силу чего они имеют множество разнообразных подходов в изучении. Педагоги научат вас считывать звуки с губ и основам сурдотехники.

Игра в шпиона

Суть этого метода заключается в том, чтобы следить за людьми. Находясь в любом месте, в гостях, в библиотеке, общественном парке, в кафе вы всегда можете потренировать свой навык. Выберите объект и не привели внимания наблюдайте за движениями губ, жестикуляцией и мимикой.

Телевизор

Начать можно с просмотра вашего любимого, а значит не раз просмотренного фильма. Выключите звук и приступите к тренировке: следите за движением губ актеров, пробуйте понять или вспомнить о чем они ведут диалог.

В начале вам будет легко с просмотром знакомых фильмов. Как только у вас начнет получаться читать по губам в знакомых картинах, смело включайте не знакомые. Чтобы иметь возможность проверить себя, включите субтитры.

Читайте по лицу

Не только губы, но и лицо отображает множество информации. Старайтесь обращать внимание на мимику, движение бровей, мышцы щек. Запоминайте в какой положении находятся мышцы лица во время гнева, радости, печали и т.д.

Метод «зеркало»

Встаньте напротив зеркала. Внимательно следите за положением и формой губ при каждом произносимом звуке. Начните с того, что произнесет четко и ясно весь алфавит. Затем, произносите звуки по отдельности. Особое внимание уделите невидимым звукам, речь о них пойдет немного ниже.

Затем, все так же внимательно глядя на свое лицо, в особенности губы, произносите слова, а затем и целые предложения. Запоминайте то, каким образом губы принимают форму образовывая звуки.

Тренируйтесь с другом

В этом упражнении на помощь придут родственники, либо друзья. Занятия с напарником не только веселее, но и эффективнее. При помощи партнера вы быстрее это умение. Вставьте в уши наушники с музыкой без речи, либо попросите произносить слова беззвучно. Старайтесь понять что вам говорит партнер. Так же как и в предыдущем упражнении, это усложняется произношением предложений.

Невидимые и видимые звуки

Когда мы произносим видимые звуки, губы принимают отчетливое положение, которое легко различить и запомнить. Если же произносятся невидимые звуки, по положению губ определить произносящуюся букву сложно. При произношении невидимых звуков губы имеют схожее, практически идентичное расположение.

К таким звуком относят: м,-п-б;в-ф; ж-ш;ч-щ;а-я;у-ю;о-ё. Зато из данных букв можно сложить слоги, которые станут видимыми. Научится безупречно различать эти звуки просто необходимо, если вы хотите освоить чтение по губам.

Освоить методику чтения по губам будет не сложно при условии, если вы будете тренироваться этому каждый день. Ежедневная практика необходимый элемент обучения, особенно в таком нелегком деле. Для начала научитесь распознавать по губам то, о чем говорят ваши родственники, друзья, знакомые и коллеги.

Если не все будет сразу получатся, непременно помните, что есть кто-то кому все дается легко, а у кого-то в некоторых делах возникают трудности. Ни за что не сдавайтесь и идите к своей цели. Как говорится, учение и труд все перетрут!

Источник: le-protestant.ru

Может ли ПО существовать, не обновляясь годами? Вопрос, на первый взгляд, абсурдный: конечно же нет. Но только не в сегменте программ для распознавания родной речи. Со времен последних версий «Горыныча», «Комбата», «Диктографа» и «Перпетуум-Мобиле» (всё перечисленное ПО — образца конца 1990-х) на рынке не появилось ни одной новой программы по машинному переводу речи в текст. Фактически он стагнирует более 10 лет. Тем удивительнее было услышать о небольшой казанской компании ООО «РеалСпикер Лаб», задавшейся целью создать коммерческий распознаватель речи для разных платформ.

Проект RealSpeaker заявлен для потенциальных инвесторов как видеорасширение для увеличения точности программ аудиораспознавания речи за счет дополнительной обработки движения губ пользователя. Иначе говоря, помимо обработки звука программа «читает» по губам пользователя, что, по заявлению разработчиков, позволяет улучшить технологию трансформации речи в текст до 20% по сравнению с алгоритмами Dragon NaturallySpeaking (в версии для Mac OS — Dragon Dictate). Учитывая, что за прошедшие годы Dragon пережил 12 версий, оставаясь лидером среди программ по переводу речи (прежде всего английской) в текст, RealSpeaker выступает в роли Давида в поединке с Голиафом.

Разработчики заявляют об интеграции своего продукта в Google Voice Search и поддержке семи языков: русского, английского (американского и британского диалектов), французского, немецкого, китайского, корейского и японского.

По словам генерального директора ООО «РеалСпикер Лаб» Виктора Осетрова, помимо рабочей десктоп-версии под Windows 7 и 8 началась разработка Android-приложения. Кроме того, утверждает он, тестирование видеофильтра RealSpeaker вывело его детище в лидеры по точности распознавания речи среди подробных программ, поэтому в планах компании привлечь стратегического инвестора, способного вывести готовый продукт на международный рынок.

«Скачай бесплатно RealSpeaker, и ты сможешь вводить текст любой длины с помощью голоса в любой текстовый редактор (блокнот, MS Word, Skype, VKontakte и т.д.) на любом из семи языков», — указано на сайте проекта. При этом системные требования RealSpeaker заявлены вполне демократичные: компьютер с фронтальной камерой и микрофоном, наличие доступа в интернет, ОС Windows 7 или 8.

Мы опробовали работу с платной версией RealSpeaker PRO (1 тыс. рублей, среди дополнительных возможностей — использование команд) на двух устройствах — десктопе и ноутбуке. А заодно сравнили его работу с отечественным «Горынычем» (распознавание русской речи) и Dragon NaturallySpeaking (английская речь).

Инсталляция на десктоп с установленной веб-камерой Logitech Webcam 200 оказалась довольной легкой и заняла всего пару минут. В качестве аудиоустройства выступала гарнитура SVEN AP600 — вполне средняя система. Установка RealSpeaker на ноутбук Lenovo G780 также прошла без шероховатостей.

Выставление нужных параметров распознавания текста сводится, по сути, к двум кликам: выбору языка и микрофона — и в окошке программы появляется «Старт». Зеленый цвет окошка и пара рамок, очерчивающих голову и губы пользователя, cвидетельствуют об успешном начале работы видеофильтра.

А вот подстройка под работу приложения таит в себе массу неожиданностей: голову приходится держать ровно — поворот более чем на 3/4 приводит к потере программой лица пользователя. Оптимальное размещение головы диктующего — центр рабочего окна программы, на расстоянии около 40 см от дисплея. Всё бы ничего, но в случае чтения с листа процесс взаимодействия с программой значительно усложняется.

Технический директор ООО «РеалСпикер Лаб» Алексей Степин для повышения чувствительности видеофильтра посоветовал также избегать затемнения помещения и работы на фоне белой стены, а также убрать источники света позади пользователя.

Итог нескольких часов тестирования не столь однозначен. RealSpeaker безошибочно обрабатывает около 2/3 произнесенных слов. При этом практически не реагирует на союзы, иногда «сглатывает» целые куски фраз (при равномерном надиктовывании) и категорически отказывается понимать некоторые слова — например, «кот» так и не дался программе. Субъективно чуть лучше  программа работает с английским и немецким языками. Впрочем, эта странность объясняется довольно просто: словарная база русского языка в отличие от распространенных европейских развита средне, и в следующих версиях RealSpeaker — есть надежда — картина изменится к лучшему.

Сравнение RealSpeaker с «Горынычем» завершилось не в пользу популярной в свое время программы распознавания. Большой плюс «Горыныча» — настройка под голос конкретного пользователя — одновременно является и большим минусом. По сути, для более-менее хороших результатов распознавания пользователю придется самостоятельно начитать «Горынычу» целый словарь (базовый включает лишь тестовый набор из нескольких сотен слов). В противном случае результаты будут довольно неутешительными. Дополнительный минус — архаичный интерфейс. В свое время такие визуальные идеи смотрелись свежо, а сегодня отпугивают неудобством использования.

Dragon NaturallySpeaking также требует подстройки под пользователя, но весь процесс происходит в довольно ненавязчивой, а местами даже игровой форме. Чувствуется и полнота английской лексической базы — там, где RealSpeaker пробуксовывал, Dragon легко справлялся с распознаванием. Сложно оценить преимущество одной программы над другой в цифровых показателях, но более «опытный» NaturallySpeaking, давно избавившийся от детских болезней, вышел в явные лидеры.

Казанские стартаперы представили пока первую версию своей программы. По словам технического директора Степина, в следующей версии, к примеру, будет обязательно реализовано автоматическое настраивание уровня чувствительности микрофона, что позволит улучшить распознавание.

Источник: iz.ru

Способность читать по губам считается уникальной. В военной разведке этому навыку тренируют курсантов, а глухих читать по губам учит сама жизнь. Глухие могут читать с губ, если понимают о чем идет речь. Без контекста такой вид информации воспринимать сложно и можно легко ошибиться.

Исследователи из Оксфордского университета разработали машинный алгоритм чтения по губам LipNet, который распознаёт текст с точностью 93%. Благодаря применению машинного обучения, алгоритм подстраивается под особенности речи каждого человека и безошибочно распознает слова с губ. При этом алгоритму не нужно знать контекст разговора, чтобы в состоянии правильно определять используемые слова. В отличие от существующих алгоритмов чтения по губам, LipNet распознаёт не слова по отдельности, а фразы и предложения целиком. Как показали испытания программы на базе данных GRID, её точность достигает 93,4%. По данным разработчиков, это на 40% превышает средний результат людей с нарушениями слуха, которые используют чтение по губам в повседневной жизни как метод коммуникации. У глухих точность определения слов по губам составляет 52,3%.

Технология распознавания речи с губ находится на этапе исследования, которое рассчитано на три года. В распознавании речи используется искусственный интеллект. Пока новая система способна распознавать только английский язык. Разработчики ищут потенциальные сферы для ее применения. Машинное чтение по губам имеет огромный потенциал для использования в приложениях усовершенствованных слуховых аппаратов, а также для бесшумной диктовки в общественных местах, тайных переговоров, распознавания речи в шумной обстановке, биометрической идентификации и реставрации немого кино. 

Новые возможности открываются не только для военной разведки, но и для глухих — субтитрирование станет по-настоящему автоматическим, и любой прямой эфир можно легко обеспечить субтитрами. А обычным людям эта технология позволит, например, узнать, что именно сказал футболист судье в самом разгаре матча на другом конце стадиона. Близится время, когда глухие будут смотреть на мир через контактные линзы-мультимедийные экраны, а все звуки будут отображаться в виде субтитров прямо в глазах! 

Источник: deafmos.ru