McGurk hiệu lực: tại sao mắt của bạn có thể ảnh hưởng đến những gì bạn nghe?

Khi bạn nhìn xấu mệnh danh là phim nước ngoài, nó là rất dễ dàng để thấy rằng các âm thanh được phát ra từ miệng của các diễn viên không trùng khớp với cử động môi của họ.

Nói cách khác, ngay cả khi đôi mắt và đôi tai của chúng tôi được kích thích cùng lúc trong bộ phim, não của chúng ta phải thực hiện một công việc thực sự tốt, chú ý đến phù hợp với phong trào môi và âm thanh.

hiệu ứng McGurk là gì

Nhưng não cũng có thể bị nhầm lẫn. Trong một ảo ảnh hấp dẫn gọi là hiệu ứng McGurk, quan sát các cử động môi của con người có thể đánh lừa bộ não để nghe thấy âm thanh sai.

McGurk hiệu ứng xảy ra khi có sự mâu thuẫn giữa lời nói thị giác, có nghĩa là, sự chuyển động của miệng và môi của ai đó, và bài phát biểu nghe đại diện âm thanh mà một người nghe. Và nó có thể dẫn đến nhận thức của một thông điệp hoàn toàn khác nhau.

Một nghiên cứu sử dụng một mô hình máy tính

Trong nghiên cứu mới này, nhà thần kinh học từ "Baylor" College of Medicine ở Houston đã cố gắng đưa ra một lời giải thích định lượng trong những lý do McGurk hiệu lực. Họ đã phát triển một mô hình máy tính đã có thể dự đoán chính xác khi hiệu ứng McGurk nên hay không nên xảy ra ở người, theo kết quả công bố trên ngày 16 tháng 2 trên tạp chí PLoS Computational Biology.

Hiệu quả trình diễn McGurk được sử dụng trong nghiên cứu này, người tham gia được yêu cầu rời khỏi đôi mắt nhắm lại trong khi nghe một đoạn video cho thấy một người, khiến ông trở thành âm thanh "ba-ba-ba". Sau đó, người tham gia được yêu cầu mở mắt ra và nhìn kỹ vào miệng của một người trong đoạn video, nhưng không có âm thanh. Tham gia hiệu ứng hình ảnh trông như thể người đàn ông nói "ha-ha-ha." Ở giai đoạn cuối cùng của thí nghiệm được sao chép video tương tự, nhưng lần này âm thanh đã được bật và bên cung cấp cho anh ta một cái nhìn. Nhạy cảm với những người ảnh hưởng McGurk đã thông báo rằng lần thứ ba họ đã nghe thấy âm thanh "da-da-da", mà không tương ứng với bất kỳ tín hiệu thính giác hoặc thị giác, nhìn thấy trước đó.

Điều này xảy ra bởi vì não đang cố gắng để quyết định những gì, theo ý kiến của ông, những âm thanh gần gũi hơn với những gì ông nhìn thấy bằng mắt thường. Khi người tham gia nhắm mắt lại, và các nhà khoa học đã tái tạo âm thanh của video, ông lại nghe thấy âm thanh gốc "ba-ba-ba".

Hiệu quả đã được mô tả đầu tiên trong một thí nghiệm được tiến hành vào năm 1976 bởi nhà tâm lý học Harry Mc Gurk và John MacDonald. Ông chỉ ra rằng các thông tin hình ảnh được cung cấp bởi các chuyển động của miệng, có thể ảnh hưởng và xác định lại cách một người nghĩ rằng ông nghe.

dự đoán ảo tưởng

"McGurk hiệu lực - là một mạnh mẽ, ảo giác đa giác quan - cho biết nghiên cứu đồng tác giả John Magnotti, một nghiên cứu sinh tại khoa phẫu thuật thần kinh trong" Baylor ". - Bộ não nhận thức bài phát biểu thính giác và thị giác và kết hợp chúng để tạo ra những điều mới mẻ ".

Khi mọi người giao tiếp mặt đối mặt, não là tham gia vào các hoạt động phức tạp, khi ông cố gắng để quyết định làm thế nào để kết hợp chuyển động môi với âm thanh bài phát biểu được nghe, Magnotti nói.

Trong nghiên cứu, các nhà nghiên cứu đã cố gắng để hiểu được lý do tại sao bộ não có khả năng tốt hơn để đặt một số âm tiết để giải thích âm thanh được nghe một cách chính xác, nhưng một số khác thì không.

kết luận nguyên nhân

Để hiểu điều này, họ dựa trên ý tưởng của mô hình, được gọi là kết luận nhân quả, hoặc quá trình mà bộ não con người quyết định liệu các bài phát biểu của âm thanh và hình ảnh âm thanh được tạo ra bởi cùng một nguồn. các nhà nghiên cứu khác đã phát triển một mô hình để giúp dự đoán khi nào có thể xảy ra hiệu ứng McGurk, nhưng nghiên cứu mới đây là người đầu tiên bao gồm mối quan hệ nhân quả trong tính toán của họ, Magnotti nói. Sacombank trong suy luận nhân quả có thể cải thiện tính chính xác của mô hình mới so với những lần trước, mà cũng là để dự đoán những ảo ảnh.

Để xác minh tính chính xác của các dự đoán mô hình của họ, các nhà nghiên cứu tuyển chọn 60 người tham gia và yêu cầu họ nghe một vài bài phát biểu thính giác và thị giác từ một loa duy nhất. Sau đó, người tham gia được yêu cầu để quyết định những loại âm thanh mà họ đã nghe :. "Ba", "da" và "ga"

Kết quả của họ cho thấy rằng mô hình phát triển đáng tin cậy có thể dự đoán khi hầu hết người tham gia thử nghiệm sẽ kiểm tra tác động McGurk. Nhưng, như mong đợi trong tính toán của họ, người ta xác định những người không dễ bị này chia sẻ Magnotti.

Điều thú vị là, khi thử nghiệm tương tự được tiến hành với các sinh viên ở Trung Quốc, chứ không phải Hoa Kỳ, nó đã được chứng minh rằng hiệu ứng McGurk làm việc trong các ngôn ngữ khác.

ứng dụng thực tế của các mô hình máy tính sử dụng

Magnotti nói rằng, theo ý kiến của mình, các mô hình máy tính phát triển cho nghiên cứu này cũng có thể được sử dụng thực tế. Ví dụ, mô hình này có thể hữu ích cho các công ty tạo ra các máy tính giúp xác định nó, chẳng hạn như chủ Google hay Amazon Echo.

Nếu các công nghệ này là camera, họ có thể tích hợp mọi người trong phong trào môi, họ nói, để cải thiện tính chính xác của hệ thống nhận dạng giọng nói của nó.

Mô hình này cũng có thể giúp trẻ em bị cấy ghép ốc tai điện tử, nâng cao sự hiểu biết về cơ chế của các nhà nghiên cứu như hình ảnh nó ảnh hưởng đến những gì người ta nghe, Magnotti nói.