Это значит, что задействовать возможности мозга можно, даже если они раньше не были доступными. Сурдопедагог – это специалист, который занимается обучением чтению по губам.
Если пойти учиться к нему не получается, можно воспользоваться различными рекомендациями, а главное, тренироваться.

Научиться вдвоем читать по губам гораздо проще. Найдите компаньона, который будет читать текст с книги или журнала, пока вы смотрите на него. Пробуйте разобрать, что говорит человек. Главное, чтобы и он произносил слова четко, не издавая при этом звуков. Многие правильно задействуют губы только в процессе производства речи, а вот при имитации этого процесса допускают ошибки. Есть простое решение – возьмите наушники, наденьте их, а ваш напарник пусть читает текст шепотом.

К каждому есть свое домашнее задание, которое заключается в самостоятельном чтении текста. Нужно не просто выговаривать слова, но и учиться быстро улавливать то, как вы это делаете губами. Идеальный вариант – поставить перед собой крупное зеркало, в котором вы сможете повторять текст, видя движение губ и мимику, а также воспринимая смысл, а также техническую составляющую слов.

Как самостоятельно научиться читать по губам

• Проговаривайте алфавит перед зеркалом. Это должны быть буквы то в прямой последовательности, по алфавиту, то в виде слов и предложений.
• Если не получается читать по словам, но вы понимаете, что буквы уже в состоянии различить, перейдите к промежуточному уроку – проговаривайте у зеркала слоги.
• Вспомните, какой фильм или сериал вы уже смотрели, но он вам настолько понравился, что повторный просмотр вас только порадовал бы. Прекрасно, включите запись, сначала со звуком, потом отключите и его. Пробуйте читать по губам. Зная, какой смысл вложен в слова, вам будет проще понимать их. А движение губ в данном случае станет подсказкой, что также полезно в процессе обучения, пока вы полноценно не умеете воспринимать точную информацию из уст.
• Учитывайте эмоции. Если не всегда речь понятна только по губам, то в комплексе с мимикой легко определить хотя бы то, в каком русле говорит человек, негативное это или позитивное, реальная история или юмор, какие ощущения он испытывает.

Ежедневно тренируясь хотя бы по полчаса-часу, вы научитесь читать по губам примерно за месяц-два.

Попробуйте закрыть уши и догадаться, что Вам говорит собеседник или диктор по телевизору. Наверняка Вы обнаружите, что некоторые слова можете понимать, совершенно не слыша звука. Это называется чтением по губам. Чтение по губам может быть игрой, но для кого-то может быть единственным способом получения информации.

Возможно, мы никогда не задумывались, но даже люди с нормальным зрением, слухом и навыками речевого общения подсознательно используют информацию движения губ и выражения лица, в дополнение к слуховому пониманию в каждодневной беседе. Самых быстрых беглоговорящих спикеров порой можно разобрать, читая по губам.

В речевом восприятии присутствует связь между слуховой информацией и зрительной, и это показывает его многомодальность, то есть, что в него вовлечена больше, чем одна сенсорная модальности, например - только звук. Да, можно общаться не слыша голоса, читая по губам. Правда, как звук без зрительного компонента, так и само зрение без звука даст лишь часть картины. Время от времени мы не сможем понять увиденное. Почему? Какие основные проблемы в чтении по губам?

У каждого речевого звука (фонема) есть специфические выражение лица, положение рта, губ (визема), хотя много фонем разделяют на те же самые виземы. В итоге оказывается, что невозможно различить одну визему от другой только визуальной информацией. Это глоттальные или заднещелевые согласные, чье место артикуляции во рту или горле не обнаруживаются визуально.

В русском языке идентичными выглядят глухие и звонкие звуковые пары, такие как [п] и [б], [k] и [г,х], [т] и [д], [ф] и [в], и [с] и [з],[ ж] и [ш]; аналогично для назальных [м], [н] звуков. Считалось, что только от 30 % до 40 % звуков английского языка визуально различимы. Например, в большинстве английских диалектов фраза "где есть жизнь, есть надежда" ("where there"s life, there"s hope") , выглядит идентично фразе "где мыло лаванды" ("where"s the lavender soap").

Таким образом, в чтении по губам важен контекст. Важно знать, о чем вероятно будет сказано, учитывать ситуацию, окружающую среду. Реплики говорящего будут трактоваться, прежде всего в этом контексте, и он должен с этим считаться, так как фразы и выражения оторванные по смыслу и не поддерживающие контекст, такие как имя человека, никогда не встречаемого прежде, могут быть не поняты или даже неверно поняты.

Читающий по губам, глухой от рождения человек, никогда, возможно, не слышал разговорный язык. Он вряд ли будет беглоговорящим пользователем языка, что делает чтение по губам для него намного более трудным. Кроме того, чтение с губ требует большой концентрации, и может быть чрезвычайно утомляющим. По этим и другим причинам много глухих людей предпочитают использовать другие средства общения с теми, кто не владеет жестовым языком, такими как жесты, пантомима или сурдопереводчики.

В разговоре с читающим по губам человеком совсем не полезна преувеличенная артикуляция, и она даже может исказить полезную информацию. Однако можно научиться подчеркивать важные слова и выражения - это и называется разговор губами.

Когда встречаются трудности в восприятии чтения по губам:

• когда недостаточно четко видны губы говорящего. Это включает в себя такую преграду как усы или руки перед ртом;
• голова говорящего повернута в сторону или вообще человек отвернулся;
• источник яркого света, например окно позади говорящего, которое создает контровой свет, так что не видно лица;
• разговор в группе людей, в компании, особенно когда много людей говорят и быстро сменяют друг друга.
• когда у говорящего нечеткая артикуляция или дефекты произношения

Цитата из "Слушающего Глаза", Дороти Клэг, 1953 год: "Когда Вы являетесь глухими, Вы живете в хорошо закупоренной пробкой стеклянной бутылке. Вы видите восхитительный внешний мир, но он не достигает Вас. После обучения чтению по губам Вы все еще в бутылке, но пробка вышла и внешний мир медленно, но уверенно входит к Вам".

В следующей статье мы уделим внимание такой малоизвестной системе общения, как язык знаков (Cued Speech). Эта система присутствует во многих языках, но не в русском. Ее можно обозначить как артикуляционные жесты, но в определенном смысле. Это специальные жесты, которые производятся возле рта и лишь помогают чтению по губам. Сейчас мы затрудняемся дать определение для перевода с английского этой Mouth-Hand System, в которую входит Cued Speech.

Командир Дэйв Боумен и второй пилот Фрэнк Пул, не доверяя компьютеру, решили отключить его от управления кораблём. Для этого они совещаются в звукоизолированной комнате, но HAL 9000 читает их разговор по губам. Кадр из фильма «Космическая одиссея 2001 года»

Чтение по губам играет важную роль в общении. Ещё эксперименты 1976 года показали, что люди «слышат» совершенно другие фонемы, если наложить неправильный звук на движение губ (см. "Hearing lips and seeing voices" , Nature 264, 746-748, 23 December 1976, doi: 10.1038/264746a0).

С практической точки зрения чтение по губам - важный и полезный навык. Можно понимать собеседника не выключая музыку в наушниках, читать разговоры всех людей в поле зрения (например, всех пассажиров в зале ожидания), прослушивать людей в бинокль или подзорную трубу. Область применения навыка очень широка. Освоивший его профессионал без труда найдёт высокооплачиваемую работу. Например, в сфере безопасности или конкурентной разведке.

У автоматических систем чтения по губам тоже богатый практический потенциал. Это медицинские слуховые аппараты нового поколения с распознаванием речи, системы для беззвучных лекций в публичных местах, биометрическая идентификация, системы скрытой передачи информации для шпионажа, распознавание речи по видеоряду с камер наблюдения и т.д. В конце концов, компьютеры будущего тоже будут читать по губам, как HAL 9000 .

Поэтому учёные уже много лет пытаются разработать системы автоматического чтения по губам, но без особого успеха. Даже для относительно простого английского языка, в котором количество фонем гораздо меньше, чем в русском языке, точность распознавания невысока.

Понимать речь на основании мимики человека - сложнейшая задача. Освоившие этот навык люди пытаются распознавать десятки согласных фонем, многие из которых очень похожи внешне. Неподготовленному человеку оcобенно трудно различить пять категорий визуальных фонем (то есть визем) английского языка. Другими словами, различить по губам произношение некоторых согласных звуков практически невозможно. Неудивительно, что люди очень плохо справляются с точным чтением по губам. Даже самые лучшие среди инвалидов по слуху демонстрируют точность всего лишь 17±12% из 30 односложных слов или 21±11% из многосложных слов (здесь и далее результаты для английского языка).

Автоматическое чтение по губам - одна из задач машинного зрения, которая сводится к покадровой обработке видеоряда. Задача сильно усложняется низким качеством большинства практических видеоматериалов, которые не позволяют точно считывать спатиотемпоральные, то есть пространственно-временные характеристики лица во время разговора. Лица двигаются и поворачиваются в разные стороны. Последние разработки в области машинного зрения пытаются отслеживать движение лица в кадре, чтобы решить эту проблему. Несмотря на успехи, до последнего времени они были способны распознавать только отдельные слова, но не предложения.

Значительного прорыва в данной области добились разработчики из Оксфордского университета. Обученная ими нейросеть LipNet стала первой в мире, которая успешно распознаёт по губам речь на уровне целых предложений, обрабатывая видеоряд.

Покадровые карты салиентности для английских слов "please" (вверху) и "lay" (внизу) при обработке нейросетью, которая читает по губам, выделяя наиболее привлекающие внимание (салиентные) признаки

LipNet - рекуррентная нейросеть типа LSTM (long short-term memory). Архитектура показана на иллюстрации. Нейросеть обучали с использованием метода нейросетевой темпоральной классификации (Connectionist Temporal Classification, CTC), который широко используется в современных системах распознавания речи, поскольку с ним отпадает необходимость обучения на наборе входных данных, синхронизированным с правильным результатом.

Архитектура нейросети LipNet. На входе подаётся последовательность кадров T, которые затем обрабатываются тремя слоями пространственно-временной (спатиотемпоральной) свёрточной нейросети (STCNN), каждый из которых сопровождается слоем пространственной выборки. Для извлечённых признаков повышается частота дискретизации по временной шкале (апсемплинг), а затем они обрабатываются двойной LTSM. Каждый временной шаг на выходе LTSM обрабатывается двухслойной сетью прямого распространения и последним слоем SoftMax

На особом корпусе предложений GRID нейросеть показывает точность распознавания 93,4%. Это не только превышает точность распознавания других программных разработок (которые указаны в таблице ниже), но и превосходит эффективность чтения по губам специально обученных людей.

Особый корпус GRID составлен по следующему шаблону:

command(4) + color(4) + preposition(4) + letter(25) + digit(10) + adverb(4),

Где цифра соответствует количеству вариантов слов для каждой из шести словесных категорий.

Другими словами, точность 93,4% - это всё-таки результат, полученный в тепличных лабораторных условиях. Разумеется, при распознавании произвольной человеческой речи результат будет гораздо хуже. Не говоря уже об анализе данных с реальной видеосъёмки, где лицо человека не снимают крупным планом в отличном освещении и с высоким разрешением.

Работа нейросети LipNet показана на демонстрационном видео.

В каждом человеке скрыты способности и таланты, которые он не использует. Так, например, умение понимать речь по губам является одним из скрытых человеческих качеств. Люди, имеющие проблемы со слухом или глухие обладают этим талантом с рождения или же максимально пытаются развить у себя это умение, так как это им жизненно необходимо.

Если же и мы постараемся овладеть этой способностью и научимся читать по губам, то общение в шумном месте или на экзамене не будет представлять никакой сложности.

Если у вас нет возможности записаться к сурдопедагогу, то обучение чтению по губам можно организовать и в домашних условиях.

1. Для начала вам нужно подойти к зеркалу и четко и выразительно проговорить весь алфавит. Вам надо отметить и записать те буквы, звучание которых можно однозначно определить по движению губ (в частности такие, как Б, П, М), и звучание которых почти не различимо.
2. После этого вам следует переходить на проговаривание и запоминание слогов перед зеркалом. Такие слоги как ФО, ФУ, ФЫ, ФА, ПА, ПЫ, ПУ, ПО, ША, ШО, ШУ, ШИ являются четко различимыми на губах, движение губ во время произнесения этих слогов следует хорошо изучить и запомнить.
3. Когда мы научимся читать по собственным губам все буквы в отдельности и большую часть слогов, можно приступать к следующему домашнему уроку чтения по губам. Вам следует найти запись хорошо знакомого вам фильма или передачи. Смотрите этот фильм или передачу без звука, обращая внимание на движение губ снимающихся людей. В первое время можно включить субтитры для упрощения занятия.
4. Попробуйте читать не только «по губам», но и «по лицу». Поскольку лицо также отображает массу информации, помогает понять контекст сказанного. Наблюдайте за движением бровей, следите, как они показывают ужас или удивление. Следите за тем, как двигаются мышцы на щеках, когда говорящий выражает отвращение и т.д.

Выполняя все эти указания, вскоре вы заметите, что чтение по губам не доставляет вам никаких хлопот.

Как ещё можно помочь себе в овладении данным навыком?

А вы знаете, что близкие люди и друзья также могут помочь вам научиться читать по губам? Попросите другого человека ежедневно произносить вам экспрессивные выразительные словосочетания и предложения без звука, а вам пытайтесь понять смысл этих слов. А вообще, учиться читать по губам можно всегда и везде - в кафе, в метро, на улице, на работе, на отдыхе - просто наблюдайте за незнакомыми вам людьми издалека, за их губами, пытайтесь понять, о чем они говорят.

В заключение можно отметить, также попробуйте использовать компьютерную программу чтения по губам ReadmyQuips, представляющую собой систему видео и аудио уроков. На данный момент программа чтения по губам ReadmyQuips находится только в стадии разработки, но почему бы не попробовать поучаствовать в пробных тестах программы?

Научиться читать по губам можно только в том случае, если ежедневно практиковаться длительный период времени, так как это очень нелегкая задача уметь распознавать смысл слов без звука у различных людей. Главное, в первую очередь научиться чтению по губам среди вашего окружения – друзья, родные, коллеги, знакомые, и только после этого у вас будет получаться понимать незнакомых людей. Но помните, как и при любом другом освоении знаний – есть люди, у которых что-либо получается отлично, а что-то другое не так хорошо. Ваше обучение чтению по губам напрямую зависит от ваших индивидуальных способностей. Как говорится - выше своей головы не прыгнешь.

Успехов вам в саморазвитии!

В этой статье мы расскажем о способах обучения чтению по губам. Опустим те случаи, когда это умение – жизненная необходимость по причине плохого слуха или его отсутствия, так как этим занимаются сурдопедагоги, а коснемся тех, кто просто хочет овладеть этим навыком с целью получения дополнительной информации, из простого интереса и т.д.

Как научится читать по губам?

Чтению по губам может научиться каждый, было бы желание. Если у человека, желающего освоить этот навык достаточно терпения, то со временем научиться этому можно и, более того, довести умение читать по губам до фантастических высот.

Самые доступные и распространенные методы обучения:

1. Первое, к чему можно прибегнуть, это занятия у зеркала. Нужно внимательно изучить артикуляцию произносимых вам же букв. Важно запомнить все: положение губ и языка в начале произнесения, при самом произнесении буквы и положение в завершении. После изучения артикуляции всех букв можно переходить к слогам, а затем и словам.
2. Помочь освоить технику чтения по губам помогут . Включите хорошо известную вам кинокартину и внимательно следите за тем, что произносят герои, но при этом полностью отключите звук. После знакомых фильмов усложняйте задачу и переходите к тем картинам, которые вы видите впервые.
3. Своеобразные уроки чтения по губам можно устроить со своими родственниками. Попросите их говорить с вами беззвучно, сначала медленно и отчетливо, а затем в обычном темпе. Вы должны будете угадывать произносимые ими слова, словосочетания и предложения.
4. При достижении более-менее ощутимых результатов можно перейти к наблюдению за людьми в общественных местах: парках, кафе или же просто в общественном транспорте по пути на работу.

Помните, все достижимо, если стремится к