Apabila kita bercakap secara tatap muka, kita menukar lebih banyak isyarat daripada hanya kata-kata. Kami berkomunikasi menggunakan postur badan, ekspresi muka dan pergerakan kepala dan mata; tetapi juga melalui irama yang dihasilkan apabila seseorang bercakap. Satu contoh yang baik adalah kadar di mana kita menghasilkan suku kata dalam ucapan berterusan - tentang tiga hingga tujuh kali sesaat. Dalam perbualan, pendengar lagu dalam untuk irama ini dan menggunakannya untuk meramalkan masa suku kata yang akan digunakan oleh penceramah seterusnya. Ini menjadikan mereka lebih mudah untuk mengikuti apa yang dikatakan.

Banyak perkara lain juga berlaku. Menggunakan teknik pengimejan otak kita tahu misalnya bahawa walaupun tiada siapa yang bercakap, bahagian otak kita bertanggungjawab untuk pendengaran menghasilkan aktiviti berirama pada kadar yang sama dengan suku kata dalam ucapan. Apabila kita mendengar seseorang bercakap, ini irama otak sejajar kepada struktur suku kata. Akibatnya, rentak otak memadankan dan menjejaki kekerapan dan masa isyarat ucapan akustik yang masuk.

Apabila seseorang bercakap, kita tahu pergerakan bibir mereka juga membantu pendengarnya. Seringkali pergerakan ini mendahului ucapan - membuka mulut anda, contohnya - dan memberikan isyarat penting mengenai apa yang akan dikatakan oleh orang itu. Walau bagaimanapun, pergerakan bibir mengandungi maklumat yang cukup untuk membolehkan pemerhati terlatih memahami ucapan tanpa mendengar apa-apa perkataan - oleh itu sesetengah orang boleh membaca bibir, sudah tentu.

Apa yang tidak jelas sehingga kini adalah bagaimana gerakan-gerakan ini diproses di dalam otak pendengar.

Lip-synching

Ini adalah subjek kami kajian terbaru. Kami sudah tahu itu ia bukan hanya lagu vokal pembicara yang menghasilkan irama suku kata, tetapi juga pergerakan bibir mereka. Kami ingin melihat sama ada gelombang otak pendengar menyelaraskan pergerakan bibir pembesar semasa ucapan berterusan dengan cara yang setanding dengan cara mereka menyelaraskan ucapan akustik itu sendiri - dan sama ada ini penting untuk memahami ucapan.

Kajian kami telah mendedahkan untuk pertama kalinya bahawa ini memang berlaku. Kami merekodkan aktiviti otak sukarelawan 44 yang sihat ketika mereka menonton filem seseorang menceritakan kisah. Sama seperti bahagian pendengaran otak, kami mendapati bahawa bahagian visual juga menghasilkan irama. Ini menyesuaikan diri dengan irama suku kata yang dihasilkan oleh bibir pembicara semasa ucapan berterusan. Dan apabila kami membuat keadaan mendengar lebih sukar dengan menambah perbualan yang mengganggu, yang bermaksud bahawa pergerakan bibir penjaga cerita menjadi lebih penting untuk memahami apa yang mereka katakan, penyelarasan antara dua irama menjadi lebih tepat.

Di samping itu, kami mendapati bahawa bahagian otak pendengar yang mengawal pergerakan bibir juga menghasilkan gelombang otak yang selari dengan pergerakan bibir pembesar suara. Dan apabila gelombang ini lebih baik diselaraskan kepada gelombang dari bahagian motor otak pembesar suara, pendengar memahami ucapan yang lebih baik.

Ini menyokong idea itu Kawasan otak yang digunakan untuk menghasilkan ucapan juga penting untuk memahami ucapan, dan mungkin mempunyai implikasi untuk mempelajari bibir bacaan antara orang yang mengalami masalah pendengaran. Setelah menunjukkan ini berhubung dengan penceramah dan pendengar, langkah seterusnya adalah untuk melihat sama ada perkara yang sama berlaku dengan irama otak semasa perbualan dua hala.

Kenapa pandangan ini menarik? Sekiranya betul bahawa ucapan biasanya berfungsi dengan menubuhkan saluran komunikasi dengan menjajarkan irama otak kepada irama ucapan - sama dengan menyetel radio ke frekuensi tertentu untuk mendengar stesen tertentu - hasil kami menunjukkan bahawa terdapat saluran pelengkap yang lain yang boleh diambil apabila perlu. Bukan sahaja kita boleh menyesuaikan diri dengan irama dari aksi vokal seseorang, kita boleh menyesuaikan irama bersamaan dengan pergerakan bibir mereka. Daripada melakukan ini dengan bahagian pendengaran otak kita, kita melakukannya melalui bahagian-bahagian yang berkaitan dengan melihat dan pergerakan.

Dan tidak juga anda perlu menjadi pembaca bibir terlatih untuk mendapat manfaat - inilah sebabnya walaupun dalam persekitaran yang bising seperti pub atau pesta, kebanyakan orang masih boleh berkomunikasi dengan satu sama lain.

Mengenai Pengarang

Joachim Gross, Profesor dalam Psikologi, Universiti Glasgow. Kumpulannya menyiasat peranan fungsi osilasi otak menggunakan kaedah Neuroimaging dan pengiraan. Matlamat utamanya ialah memahami bagaimana ayunan otak menyokong persepsi dan tindakan.

Hyojin Park, Associate Research, University of Glasgow. Penyelidikan semasa beliau adalah untuk memahami pengekodan dan penyahkodan osilasi neural dalam konteks pemprosesan ucapan menggunakan teknik pengimejan otak yang direka secara optimum untuk menangkap dinamik temporal dalam otak manusia.

Artikel ini pada asalnya diterbitkan pada Perbualan. Membaca artikel asal.

Buku-buku yang berkaitan

at InnerSelf Market dan Amazon