我拖著你走！－警報器與警報音的互動

『嗶～嗶～嗶～』
警報器響了！你驚慌地看著閃爍的紅燈隨著警報器的嗶聲忽明忽暗，身旁重聽的外公卻沒有相同的感覺，只一勁拉著你想趕快離開現場……警報聲是否真的和警示燈串通好了呢？如果沒有，為什麼會有這樣的感受呢？幾個和多感官整合有關的理論或許能回答這個問題。
回答之前，先讓我們了解什麼是「多感官整合」(multisensory integration)。

顧名思義，多感官整合就是把不同感官，如眼耳鼻舌膚所輸入的視聽嗅味觸覺統合起來。用專業一點的說法，就是我們的大腦在接收二個以上的感官訊息後，會相互整合、決定我們對外界刺激的解釋。這個概念最早由von Helmholtz提出，他指出「無意識的推論是根據線索整合的結果」。

有的時候，多感官整合會構成和我們對於真實情況失真的判斷，文章一開頭提到的警報音以及閃爍的警示燈正是一個例子。

為什麼我們會覺得警示燈隨著警報音的聲音忽明忽暗？這個情況可以用Shams等人(2000)的經典實驗「雙閃爍錯覺(the double-flash illusion)」來說明。當實驗者呈現快速閃現一次的光點，並在同時發出兩個聲響，受試者會傾向認為看到的刺激閃了兩下；當實驗者呈現快速閃過二次的光點，同時卻只發出一個聲響，受試者則不會被雜音影響而回答看到兩個點。這顯示了聲音會幫助我們分離事件，卻無法幫助我們將事件融合。

實驗影片可以參考連結網頁最下面的兩段影片：https://shamslab.psych.ucla.edu/demos/

這個現象可以用「感官適切性假說」（The modality appropriateness hypothesis）解釋。Welch 和Warren(1980)認為，我們在處理不同種類刺激衝突的問題時，會選擇以最敏感的感官作為主導感官。怎麼樣叫做主導呢？簡單來說就是被這個感官所提供的資訊拖著走！

不管是警報音還是前面提到的實驗，它們產生的間斷聲音會提供時間線索，所以當發出『兩個』聲響，我們會認為時間上發生了『兩個』事件，同時，我們看不清楚這麼短的時間內光點或警報燈到底亮了幾下，因此在解決該視聽刺激衝突的時間問題時，就由聽覺、也就是聲音主導啦！聽覺的主導使觀看者不管在這極短的時間中，燈亮了一下、兩下還是三下，都依據聽到『兩個』聲響的資訊，傾向回答看到『兩個閃爍』。

不過，連續的聲音就沒有那麼鮮明的區辨效果，也就不會提供時間線索，因此發出一個聲響時，我們會把判斷閃爍次數的決定權交給視覺，而報告出只發出一次聲響。

至於是因為我們大腦的什麼部分動了手腳，才產生這樣的結果呢？由於這篇文章有點小長了，先說是和STS腦區有關，至於詳細機制就留待下次的知覺科普時間細細說明囉！