Nangangahulugan ito na posible na gamitin ang mga kakayahan ng utak, kahit na hindi ito magagamit noon. Ang isang bingi na tagapagturo ay isang espesyalista na nagtuturo ng pagbabasa ng labi.
Kung hindi ka maaaring pumunta sa pag-aaral sa kanya, maaari kang gumamit ng iba't ibang mga rekomendasyon, at higit sa lahat, magsanay.

Ang pag-aaral na magbasa ng mga labi nang magkasama ay mas madali. Maghanap ng kasama na magbabasa ng teksto mula sa isang libro o magazine habang tinitingnan mo siya. Subukang alamin kung ano ang sinasabi ng tao. Ang pangunahing bagay ay malinaw niyang binibigkas ang mga salita, nang hindi gumagawa ng mga tunog. Maraming tao ang gumagamit ng kanilang mga labi nang tama lamang sa proseso ng paggawa ng pagsasalita, ngunit nagkakamali sila kapag ginagaya ang prosesong ito. Mayroong isang simpleng solusyon - kunin ang mga headphone, ilagay ang mga ito, at hayaang basahin ng iyong kapareha ang teksto nang pabulong.

Ang bawat isa ay may sariling takdang-aralin, na binubuo sa pagbabasa ng teksto sa kanilang sarili. Kailangan mong hindi lamang bigkasin ang mga salita, ngunit matuto ring mabilis na mahuli kung paano mo ito ginagawa sa iyong mga labi. Ang perpektong opsyon ay maglagay ng malaking salamin sa harap mo, kung saan maaari mong ulitin ang teksto, nakikita ang paggalaw ng mga labi at ekspresyon ng mukha, pati na rin ang pag-unawa sa kahulugan, pati na rin ang teknikal na bahagi ng mga salita.

Paano matutong magbasa ng mga labi nang mag-isa

  • Sabihin ang alpabeto sa harap ng salamin. Dapat itong mga titik alinman sa direktang pagkakasunod-sunod, ayon sa alpabeto, o sa anyo ng mga salita at pangungusap.
  • Kung hindi mo mabasa ang salita sa pamamagitan ng salita, ngunit naiintindihan mo na ang mga titik ay nakikilala na, pumunta sa intermediate na aralin - bigkasin ang mga pantig sa salamin.
  • Mag-isip tungkol sa isang pelikula o serye na napanood mo na, ngunit nagustuhan mo ito nang labis na ikalulugod mo lamang na panoorin itong muli. Mahusay, i-on ang pag-record, una gamit ang tunog, pagkatapos ay i-off ito. Subukang basahin ang mga labi. Ang pag-alam kung ano ang kahulugan ay naka-embed sa mga salita, magiging mas madali para sa iyo na maunawaan ang mga ito. At ang paggalaw ng mga labi sa kasong ito ay magiging isang pahiwatig, na kapaki-pakinabang din sa proseso ng pag-aaral, hanggang sa ganap mong malaman kung paano malalaman ang tumpak na impormasyon mula sa bibig.
  • Isaalang-alang ang mga emosyon. Kung ang pagsasalita ay hindi palaging naiintindihan ng mga labi lamang, kung gayon sa kumbinasyon ng mga ekspresyon ng mukha ay madaling matukoy kahit sa anong direksyon nagsasalita ang isang tao, kung ito ay negatibo o positibo, isang tunay na kuwento o katatawanan, kung anong mga damdamin ang kanyang nararanasan.

Sa pamamagitan ng pagsasanay ng hindi bababa sa kalahating oras o isang oras araw-araw, matututo kang magbasa ng mga labi sa loob ng isang buwan o dalawa.

Subukang isara ang iyong mga tainga at hulaan kung ano ang sinasabi sa iyo ng iyong kausap o TV announcer. Tiyak na makikita mo na naiintindihan mo ang ilang mga salita nang hindi naririnig ang tunog. Ito ay tinatawag na pagbabasa ng labi. Ang pagbabasa ng labi ay maaaring isang laro, ngunit para sa ilan, maaaring ito ang tanging paraan upang makakuha ng impormasyon.

Maaaring hindi natin naisip, ngunit kahit na ang mga taong may normal na paningin, pandinig, at mga kasanayan sa komunikasyon sa salita ay hindi sinasadya na gumagamit ng impormasyon mula sa mga galaw ng labi at mga ekspresyon ng mukha, bilang karagdagan sa pag-unawa sa pandinig, sa pang-araw-araw na pag-uusap. Ang pinakamabilis na matatas na nagsasalita ay maaaring matukoy kung minsan sa pamamagitan ng pagbabasa ng labi.

Sa speech perception mayroong koneksyon sa pagitan ng auditory information at visual na impormasyon, at ito ay nagpapakita ng multimodality nito, iyon ay, na higit sa isang sensory modality ang kasangkot dito, halimbawa, tunog lamang. Oo, maaari kang makipag-usap nang hindi nakakarinig ng mga boses sa pamamagitan ng pagbabasa ng mga labi. Totoo, ang parehong tunog na walang visual na bahagi, at ang paningin mismo na walang tunog, ay magbibigay lamang ng bahagi ng larawan. Paminsan-minsan ay hindi natin mauunawaan ang ating nakikita. Bakit? Ano ang mga pangunahing problema sa pagbabasa ng labi?

Ang bawat tunog ng pagsasalita (ponema) ay may tiyak na ekspresyon ng mukha, posisyon ng bibig, labi (viseme), bagama't maraming ponema ang magkakaparehong visem. Bilang isang resulta, lumalabas na imposibleng makilala ang isang viseme mula sa isa pa sa pamamagitan lamang ng visual na impormasyon. Ito ay mga glottal o back fricative consonant na ang lugar ng artikulasyon sa bibig o lalamunan ay hindi nakikita.

Sa Russian, magkapareho ang hitsura ng mga pares ng tunog na walang boses at tinig, gaya ng [p] at [b], [k] at [g, x], [t] at [d], [f] at [c], at [s ] at [h], [g] at [w]; katulad din sa mga tunog ng ilong [m], [n]. Ito ay pinaniniwalaan na 30% hanggang 40% lamang ng mga tunog ng wikang Ingles ang nakikitang nakikita. Halimbawa, sa karamihan ng mga dialektong Ingles, ang pariralang "kung saan may buhay, may pag-asa" ay mukhang magkapareho sa pariralang "saan" ang sabon ng lavender.

Kaya mahalaga ang konteksto sa pagbasa ng labi. Mahalagang malaman kung ano ang malamang na sasabihin, upang isaalang-alang ang sitwasyon, ang kapaligiran. Ang mga pananalita ng tagapagsalita ay bibigyang-kahulugan, una sa lahat, sa kontekstong ito, at dapat niyang isaalang-alang ito, dahil ang mga parirala at ekspresyon na pinunit ang kahulugan at hindi sumusuporta sa konteksto, tulad ng pangalan ng isang tao na hindi pa nakikilala. , maaaring hindi maintindihan o hindi maintindihan.

Ang isang lip-reader, ipinanganak na bingi, ay maaaring hindi pa nakarinig ng sinasalitang wika. Siya ay malamang na hindi isang matatas na gumagamit ng wika, na ginagawang mas mahirap para sa kanya ang pagbabasa ng labi. Bilang karagdagan, ang pagbabasa ng labi ay nangangailangan ng maraming konsentrasyon at maaaring maging lubhang nakakapagod. Para sa mga ito at sa iba pang mga kadahilanan, mas gusto ng maraming bingi na gumamit ng iba pang paraan ng pakikipag-usap sa mga hindi pumipirma, tulad ng mga kilos, mime, o mga interpreter ng sign language.

Sa isang pakikipag-usap sa isang lip-reader, ang pinalaking artikulasyon ay hindi kapaki-pakinabang, at maaari pa itong sirain ang kapaki-pakinabang na impormasyon. Gayunpaman, maaari mong matutunan na bigyang-diin ang mahahalagang salita at expression - ito ay tinatawag na lip talking.

Kapag may mga kahirapan sa pang-unawa ng pagbabasa ng labi:

  • kapag ang mga labi ng nagsasalita ay hindi malinaw na nakikita. Kabilang dito ang sagabal tulad ng bigote o mga kamay sa harap ng bibig;
  • ang ulo ng nagsasalita ay nakatalikod o ang tao ay tumalikod sa pangkalahatan;
  • isang maliwanag na pinagmumulan ng liwanag, tulad ng isang bintana sa likod ng speaker, na lumilikha ng backlight upang hindi makita ang mukha;
  • pag-uusap sa isang grupo ng mga tao, sa isang kumpanya, lalo na kapag maraming tao ang nag-uusap at mabilis na nagpapalit sa isa't isa.
  • kapag ang nagsasalita ay may malabong artikulasyon o mga depekto sa pagbigkas

Sipi mula sa The Listening Eye, Dorothy Clag, 1953: "Kapag ikaw ay bingi, nakatira ka sa isang mahusay na takip na bote ng salamin. Nakikita mo ang kasiya-siyang mundo sa labas, ngunit hindi ito umabot sa iyo. Pagkatapos mong matutong magbasa ng mga labi, ikaw pa rin sa bote." , ngunit ang tapon ay nasa labas at ang labas ng mundo ay dahan-dahan ngunit tiyak na pumapasok sa iyo."

Sa susunod na artikulo, bibigyan natin ng pansin ang di-kilalang sistema ng komunikasyon gaya ng sign language (Cued Speech). Ang sistemang ito ay naroroon sa maraming wika, ngunit hindi sa Russian. Maaari itong ilarawan bilang articulatory gestures, ngunit sa isang tiyak na kahulugan. Ito ay mga espesyal na kilos na ginawa malapit sa bibig at nakakatulong lamang sa pagbabasa ng labi. Ngayon ay nahihirapan kaming magbigay ng kahulugan para sa pagsasalin mula sa English nitong Mouth-Hand System, na kinabibilangan ng Cued Speech.

Si Commander Dave Bowman at ang co-pilot na si Frank Poole, na hindi nagtitiwala sa computer, ay nagpasya na huwag paganahin ito sa pagkontrol sa barko. Para magawa ito, nagkukuwentuhan sila sa isang soundproof na silid, ngunit binabasa ng HAL 9000 ang kanilang pag-uusap sa mga labi. Kinunan mula sa pelikulang "2001: A Space Odyssey"

Ang pagbabasa ng labi ay may mahalagang papel sa komunikasyon. Higit pang mga eksperimento noong 1976 ay nagpakita na ang mga tao ay ganap na "nakakarinig". iba pa mga ponema kung ang maling tunog ay nakapatong sa paggalaw ng mga labi (tingnan ang "Pagdinig ng mga labi at nakakakita ng mga boses" , Kalikasan 264, 746-748, 23 Disyembre 1976, doi: 10.1038/264746a0).

Mula sa praktikal na pananaw, ang pagbabasa ng labi ay isang mahalaga at kapaki-pakinabang na kasanayan. Maiintindihan mo ang interlocutor nang hindi pinapatay ang musika sa mga headphone, basahin ang mga pag-uusap ng lahat ng taong nakikita (halimbawa, lahat ng pasahero sa waiting room), makinig sa mga tao sa pamamagitan ng binocular o teleskopyo. Ang saklaw ng kasanayan ay napakalawak. Ang isang propesyonal na pinagkadalubhasaan ay madaling makahanap ng isang mataas na bayad na trabaho. Halimbawa, sa larangan ng seguridad o competitive intelligence.

Ang mga awtomatikong sistema ng pagbabasa ng labi ay mayroon ding mayamang praktikal na potensyal. Ito ay mga bagong henerasyong medikal na hearing aid na may speech recognition, mga sistema para sa silent lecture sa mga pampublikong lugar, biometric identification, mga sistema para sa lihim na paghahatid ng impormasyon para sa espionage, speech recognition mula sa mga video sequence mula sa mga surveillance camera, atbp. Sa kalaunan, ang mga computer sa hinaharap ay magbabasa rin ng mga labi tulad ng HAL 9000.

Samakatuwid, sinubukan ng mga siyentipiko sa loob ng maraming taon na bumuo ng mga sistema para sa awtomatikong pagbabasa ng labi, ngunit walang gaanong tagumpay. Kahit na para sa isang medyo simpleng wikang Ingles, kung saan ang bilang ng mga ponema ay mas mababa kaysa sa Russian, ang katumpakan ng pagkilala ay mababa.

Ang pag-unawa sa pananalita batay sa mga ekspresyon ng mukha ng tao ay isang mahirap na gawain. Sinusubukan ng mga taong nakabisado ang kasanayang ito na kilalanin ang dose-dosenang mga ponemang katinig, na marami sa mga ito ay halos magkapareho sa hitsura. Ito ay lalong mahirap para sa isang hindi sanay na tao na makilala sa pagitan ng limang kategorya ng visual phonemes (iyon ay, visemes) ng wikang Ingles. Sa madaling salita, halos imposible na makilala ang pagbigkas ng ilang mga katinig sa pamamagitan ng mga labi. Hindi nakakagulat na ang mga tao ay napakasama sa tumpak na pagbabasa ng labi. Kahit na ang pinakamagaling sa mahirap na pandinig ay nagpapakita ng katumpakan na 17 ± 12% lamang ng 30 monosyllabic na salita o 21 ± 11% ng polysyllabic na salita (simula dito, ang mga resulta para sa English).

Ang awtomatikong pagbabasa ng labi ay isa sa mga gawain ng machine vision, na binabawasan sa frame-by-frame na pagproseso ng isang video sequence. Ang gawain ay lubhang kumplikado sa pamamagitan ng mababang kalidad ng karamihan sa mga praktikal na materyales sa video, na hindi pinapayagan ang tumpak na pagbabasa ng spatiotemporal, iyon ay, ang mga spatiotemporal na katangian ng mukha sa panahon ng isang pag-uusap. Ang mga mukha ay gumagalaw at lumiliko sa iba't ibang direksyon. Ang mga kamakailang pag-unlad sa machine vision ay sinusubukang subaybayan ang paggalaw ng isang mukha sa isang frame upang malutas ang problemang ito. Sa kabila ng mga pagsulong, hanggang kamakailan lamang ay nakikilala nila ang mga iisang salita, hindi mga pangungusap.

Ang isang makabuluhang tagumpay sa lugar na ito ay nakamit ng mga developer mula sa University of Oxford. Ang LipNet neural network na sinanay nila ay naging una sa mundo na matagumpay na nakikilala ang pagsasalita sa pamamagitan ng mga labi sa antas ng buong mga pangungusap, na pinoproseso ang pagkakasunud-sunod ng video.


Frame-by-frame na salience na mga mapa para sa mga salitang English na "please" (itaas) at "lay" (ibaba) kapag pinoproseso ng isang neural network na nagbabasa ng mga labi, na nagha-highlight sa mga pinaka nakakaakit ng pansin (nakakapansin) na mga feature

Ang LipNet ay isang paulit-ulit na neural network ng uri ng LSTM (mahabang panandaliang memorya). Ang arkitektura ay ipinapakita sa ilustrasyon. Ang neural network ay sinanay gamit ang Connectionist Temporal Classification (CTC) na pamamaraan, na malawakang ginagamit sa modernong speech recognition system, dahil inaalis nito ang pangangailangan para sa pagsasanay sa isang input data set na naka-synchronize sa tamang resulta.


Ang arkitektura ng neural network LipNet. Ang input ay isang sequence ng mga frame T, na pagkatapos ay pinoproseso ng tatlong layer ng isang spatiotemporal (spathiotemporal) convolutional neural network (STCNN), na ang bawat isa ay sinamahan ng isang layer ng spatial sampling. Ang mga na-extract na feature ay na-upsample sa sukat ng oras (upsampling), at pagkatapos ay pinoproseso ang mga ito ng dobleng LTSM. Ang bawat hakbang sa output ng LTSM ay pinoproseso ng isang two-layer feed-forward network at ang huling SoftMax layer

Sa isang espesyal na corpus ng mga GRID na pangungusap, ang neural network ay nagpapakita ng katumpakan ng pagkilala na 93.4%. Ito ay hindi lamang lumalampas sa katumpakan ng pagkilala ng iba pang mga pag-unlad ng software (na nakalista sa talahanayan sa ibaba), ngunit lumampas din sa kahusayan ng pagbabasa ng labi ng mga espesyal na sinanay na tao.

Ang espesyal na GRID case ay binubuo ayon sa sumusunod na template:

command(4) + color(4) + preposition(4) + letter(25) + digit(10) + adverb(4),

Kung saan ang numero ay tumutugma sa bilang ng mga pagpipilian sa salita para sa bawat isa sa anim na kategorya ng salita.

Sa madaling salita, ang katumpakan ng 93.4% ay ang resulta pa rin na nakuha sa mga kondisyon ng laboratoryo ng greenhouse. Siyempre, kapag kinikilala ang di-makatwirang pananalita ng tao, ang resulta ay magiging mas masahol pa. Hindi pa banggitin ang pagsusuri ng data mula sa totoong video shooting, kung saan ang mukha ng isang tao ay hindi kinunan nang malapitan sa mahusay na pag-iilaw at mataas na resolution.

Ang operasyon ng LipNet neural network ay ipinapakita sa demo na video.

Bawat tao ay may mga nakatagong kakayahan at talento na hindi niya ginagamit. Kaya, halimbawa, ang kakayahang maunawaan ang pagsasalita sa pamamagitan ng mga labi ay isa sa mga nakatagong katangian ng tao. Ang mga taong may problema sa pandinig o mga bingi ay may ganitong talento mula pa sa kapanganakan, o sinisikap nilang paunlarin ang kasanayang ito hangga't maaari, dahil ito ay mahalaga para sa kanila.

Kung susubukan din nating makabisado ang kakayahang ito at matutong magbasa ng mga labi, kung gayon ang komunikasyon sa isang maingay na lugar o sa isang pagsusulit ay hindi magpapakita ng anumang kahirapan.

Kung wala kang pagkakataong mag-sign up para sa isang guro ng mga bingi, kung gayon ang pag-aaral na magbasa ng mga labi ay maaaring ayusin sa bahay.

  1. Una kailangan mong pumunta sa salamin at malinaw at malinaw na bigkasin ang buong alpabeto. Dapat mong tandaan at isulat ang mga titik na ang tunog ay maaaring malinaw na tinutukoy ng paggalaw ng mga labi (sa partikular, tulad ng B, P, M), at ang tunog nito ay halos hindi matukoy.
  2. Pagkatapos nito, dapat kang magpatuloy sa pagbigkas at pagsasaulo ng mga pantig sa harap ng salamin. Ang mga pantig tulad ng FO, FU, FY, FA, PA, PY, PU, ​​​​PO, SHA, SHO, SHU, SHI ay malinaw na nakikilala sa mga labi, ang paggalaw ng mga labi sa pagbigkas ng mga pantig na ito ay dapat na pag-aralan nang mabuti. at naalala.
  3. Kapag natutunan nating basahin ang lahat ng mga titik nang hiwalay at karamihan sa mga pantig sa ating sariling mga labi, maaari tayong magpatuloy sa susunod na aralin sa pagbabasa ng labi sa bahay. Dapat kang makahanap ng recording ng isang pelikula o programa na alam mo nang husto. Panoorin ang pelikula o programang ito nang walang tunog, binibigyang pansin ang galaw ng mga labi ng mga taong kinukunan. Sa una, maaari mong i-on ang mga subtitle para pasimplehin ang aralin.
  4. Subukang basahin hindi lamang "sa labi", kundi pati na rin "sa mukha." Dahil ang mukha ay nagpapakita rin ng maraming impormasyon, nakakatulong ito upang maunawaan ang konteksto ng sinabi. Panoorin ang paggalaw ng mga kilay, panoorin silang nagpapakita ng horror o sorpresa. Panoorin kung paano gumagalaw ang mga kalamnan sa pisngi kapag nagpahayag ng pagkasuklam ang nagsasalita, atbp.

Ang pagsunod sa lahat ng mga tagubiling ito, mapapansin mo sa lalong madaling panahon na ang pagbabasa ng labi ay hindi nagbibigay sa iyo ng anumang problema.

Paano mo pa matutulungan ang iyong sarili na makabisado ang kasanayang ito?

Alam mo ba na ang malalapit na tao at kaibigan ay makakatulong din sa iyo na matutong magbasa ng mga labi? Hilingin sa ibang tao na sabihin sa iyo ang mga nagpapahayag na nagpapahayag na mga parirala at pangungusap araw-araw nang walang tunog, at sinusubukan mong maunawaan ang kahulugan ng mga salitang ito. Sa pangkalahatan, maaari kang matutong magbasa ng mga labi anumang oras at saanman - sa isang cafe, sa subway, sa kalye, sa trabaho, sa bakasyon - panoorin lamang ang mga taong hindi mo kilala mula sa malayo, sa likod ng kanilang mga labi, subukang maunawaan kung ano pinag-uusapan nila.

Sa konklusyon, maaari ring mapansin na maaari mo ring subukan ang paggamit ng computer lip reader ReadmyQuips, na isang sistema ng mga aralin sa video at audio. Ang ReadmyQuips lip reader ay kasalukuyang nasa ilalim ng pag-unlad, ngunit bakit hindi mo ito subukan?

Ang pag-aaral na magbasa ng mga labi ay magagawa lamang kung magsasanay araw-araw sa mahabang panahon, dahil napakahirap na gawain na makilala ang kahulugan ng mga salita na walang tunog mula sa iba't ibang tao. Ang pangunahing bagay ay ang unang matutong magbasa ng mga labi sa iyong paligid - mga kaibigan, kamag-anak, kasamahan, kakilala, at pagkatapos nito ay mauunawaan mo ang mga estranghero. Ngunit tandaan, tulad ng anumang iba pang pag-unlad ng kaalaman, may mga tao na mahusay sa isang bagay, at may iba pang hindi gaanong mahusay. Ang iyong pag-aaral sa pagbabasa ng labi ay nakasalalay sa iyong indibidwal na kakayahan. Gaya nga ng kasabihan, hindi ka maaaring tumalon sa itaas ng iyong ulo.

Good luck sa iyong pag-unlad sa sarili!

Sa artikulong ito, pag-uusapan natin ang tungkol sa mga paraan upang matuto ng pagbabasa ng labi. Aalisin namin ang mga kasong iyon kapag ang kasanayang ito ay isang napakahalagang pangangailangan dahil sa mahinang pandinig o kawalan nito, dahil ginagawa ito ng mga bingi na guro, at hihipuin namin ang mga nais lamang na makabisado ang kasanayang ito upang makakuha ng karagdagang impormasyon, dahil sa simpleng interes. , atbp.

Paano matutong magbasa ng mga labi?

Ang bawat tao'y maaaring matutong magbasa ng mga labi, kung may pagnanais. Kung ang isang taong gustong makabisado ang kasanayang ito ay may sapat na pasensya, pagkatapos ay sa paglipas ng panahon matututuhan mo ito at, bukod dito, dalhin ang kakayahang magbasa ng mga labi sa kamangha-manghang taas.

Ang pinaka-naa-access at karaniwang mga pamamaraan ng pagtuturo:

  1. Ang unang bagay na maaari mong gawin ay ang mga klase sa salamin. Kailangan mong maingat na pag-aralan ang artikulasyon ng mga titik na iyong binibigkas. Mahalagang tandaan ang lahat: ang posisyon ng mga labi at dila sa simula ng pagbigkas, sa mismong pagbigkas ng titik at ang posisyon sa dulo. Pagkatapos pag-aralan ang artikulasyon ng lahat ng mga titik, maaari kang magpatuloy sa mga pantig, at pagkatapos ay mga salita.
  2. Ang tulong upang makabisado ang pamamaraan ng pagbabasa ng labi ay makakatulong. I-on ang isang pelikulang alam mong mabuti at bigyang-pansin kung ano ang sinasabi ng mga character, ngunit sa parehong oras patayin ang tunog nang lubusan. Pagkatapos ng mga pamilyar na pelikula, gawing kumplikado ang gawain at magpatuloy sa mga larawang iyon na nakita mo sa unang pagkakataon.
  3. Ang mga kakaibang aralin sa pagbabasa ng labi ay maaaring ayusin sa iyong mga kamag-anak. Hilingin sa kanila na makipag-usap sa iyo nang tahimik, sa una ay dahan-dahan at malinaw, at pagkatapos ay sa isang normal na bilis. Kailangan mong hulaan ang mga salita, parirala at pangungusap na sinasabi nila.
  4. Kapag mas marami o hindi gaanong nakikitang mga resulta ang nakamit, maaari kang magpatuloy sa pagmamasid sa mga tao sa mga pampublikong lugar: mga parke, cafe, o sa simpleng pampublikong sasakyan papunta sa trabaho.

Tandaan, lahat ay makakamit kung magsusumikap ka