漫漫，愛上茶：動人音樂的廣告效應

• 文／陳品均｜雅文基金會聽語科學研究中心 助理研究員

星期一，聽起來是什麼顏色？

先別急著回答藍色，對某些人來說，這個答案可不是受到情緒經驗的影響，而是真實的色彩反應。

星期怎麼可能聽起來有顏色？事實上，根據研究大約有 4% 左右的人^[1]，在某個認知或感官接收資訊刺激後，另一種感覺或認知會同步自發的出現，並且具有特定規律，此反應與刺激本身並不一定相關，這些人被稱為聯覺者，擁有像是聽到聲音時，除了聲音的反應外，同時認知到了形狀或顏色等的特徵。

舉例而言，若一位聯覺者聽見 A，除了聲音 A 以外還自動產生了它是紅色的聯覺認知，則不論是在 Apple 或 Angel 中，A 對他而言都是紅色的，不會因為 Angel 比較常以白色的型態出現，便轉換成白色的 A。在學界，聯覺的發展和原因尚在探索中，有些研究指出可能與小時候接觸抽象觀念時的發展、遺傳以及大腦神經機制有關 ^[2、3] 。

隨著聯合反應的感官組成不同，聯覺者的異能經驗也五花八門

你能想像當單一感官接收某一訊息時，同時產生另一感官的不同認知是怎樣的經驗嗎？BBC 的科普節目《Horizon》其中一集< Derek Tastes of Earwax >記錄了數名聯覺者的跨感官連結經驗。其中，一名酒吧老闆兼有聽覺和味覺的聯覺，當他聽見各式各樣的詞彙時，宛如品嚐綜合風味豆，讓他飽嘗各種滋味^[4]。

另一名受訪者是聽覺及視覺的聯覺者，經實驗後科學家發現，若聽到數字或是月份日期時，這名受訪者的腦部除了聽覺區域外，視覺區域也會產生反應。特別的是，他本身是一名視覺障礙者。

感官認知上特別的連結，讓聯覺者所經驗的世界像是搭載了酷炫的特效般，使他們在藝術創作及記憶上屢有出色的表現，代表人物有：知名文學《蘿莉塔》作者 Nabokov^[5]、以引起聽眾共鳴聞名的音樂家 Olivier Messiaen、表現主義的經典畫家 Wassily Kandinsky 等。若想檢視自身是否為天選之人的聯覺者，除了自我覺察是否有異於常人的跨感官連結反應外，目前也有相關的測驗^[6]可以參考。

你我的「類聯覺」跨感官反應

若說聯覺是天生具有特別音感的人，那麼跨感官反應肯定就是音樂家們透過經驗累積產生的直覺判斷，兩者不盡相同、卻又有其類似之處。那麼，不具有聯覺的異能，我們難道只能認命當麻瓜了嗎？

別急，縱使不是聯覺者，普通人也多少會有類似聯覺的經驗，這樣的類聯覺稱作跨感官反應，往往在我們渾然不覺時，悄悄地舉辦同樂會，並影響人們的喜好、感知和行為等。

先來看看研究者們發現的有趣現象，請看這兩個形狀：

過去曾有研究者以 bouba 及 kiki 兩個虛構詞進行實驗，九成受訪者傾向認為雲朵狀的形狀是 bouba，尖銳的形狀則被認為是 kiki，即使這些受訪者其實並不認識兩個假詞，但基於聲音和形狀的特徵，卻讓多數人做出這樣的選擇^[7]。

後續研究者也繼續投入各式各樣以不同語言文化環境為背景、不同年齡階層為對象的研究，有趣的是，結果顯示此現象幾乎是跨語言、跨文化、跨地域存在的，甚至在少與外界互動的部落居民，或是尚未識字的幼兒身上，也有這類從聲音特徵影響其視覺形狀感知歸類的效應 ^[8、9、10]。除了虛構的詞彙以外，有些研究者使用真實存在的詞彙（如：Bob 及 Kirk），來對應圓潤及尖銳的剪影或人臉，最後也有相似的結果^[11、12]。

一般人的經驗和認知，往往加速催化感官間的互相影響

除了語言與形狀外，我們生活中還有許多感官互相影響的例子，來試試看下面這張圖，你聽見聲音了嗎？

瑞克搖（Rickrolled）的影片在 2019 年突破了 10 億次的 youtube 觀看次數^[13、14]，迷因化後大量的連結及有聲影片傳播，使得曾經的觀眾在看見這張圖時根據經驗，腦海中自然出現了＜Never Gonna Give You Up＞的旋律。

然而，不同於聯覺，若沒有經驗累積，跨感官的反應便無法被觸發，以上圖為例，即便觀看次數如此驚人，對於未曾接觸過此影片的人而言，由於缺乏經驗和認知的累積，在看見該張圖片時，理所當然也無法產生相對的聲音反應。

將跨感官反應置入在行銷中的策略，現正流行中！

在大量接收資訊的生活中，我們不自覺地累積了許多感官經驗，成為由單一感官啟動與其他感官同步作用的引線。行銷高手們從中嗅出了商機，精明的將消費者們不由自主產生的跨感官反應也算進了商業行銷的一環。如：某知名咖啡品牌在過去曾進行一項實驗，將兩杯一樣的咖啡配以不同的音效提供給不知情的消費者。前一杯搭配液體沖入便宜咖啡杯、攪拌，模仿沖泡即溶咖啡的聲音，另一杯則在播放磨豆聲、蒸氣聲以及倒進陶瓷杯的聲響後，再次提供給消費者，結果發現在不同的聲音所營造的環境氛圍下，同樣的兩杯咖啡，人們覺得後一杯更加濃醇香，並願意為之付出更高的金額^[15]。

近年熱門的 ASMR 亦是味覺和聽覺的跨感官應用，若想了解更多，別錯過之前的專欄文章﹤加點「聲音調味料」，享受聽覺與味覺的極致饗宴吧！﹥。

下次若覺得某張圖片有聲音、光看某部電影的宣傳海報就起雞皮疙瘩，或是外帶的咖啡沒有內用的美味，也許就是跨感官反應悄悄影響了你的感覺。最後，讓我們回到一開始的問題，星期一聽起來是什麼顏色的？不論是不是藍色的，何不試試透過 GIF 圖和親朋好友無聲地分享你震耳欲聾的情感吧！ 

參考資料

1. Simner, J., Mulvenna, C., Sagiv, N., Tsakanikos, E., Witherby, S. A., Fraser, C., Scott, K., & Ward, J. (2006). Synaesthesia: The prevalence of atypical cross-modal experiences. Perception, 35(8), 1024–1033. https://doi.org/10.1068/p5469 
2. Bankieris, K., & Simner, J. (2015). What is the link between synaesthesia and sound symbolism? Cognition, 136, 186–195. https://doi.org/10.1016/j.cognition.2014.11.013
3. Freeman, E. D. (2020). Hearing what you see: Distinct excitatory and disinhibitory mechanisms contribute to visually-evoked auditory sensations. Cortex, 131, 66–78. https://doi.org/10.1016/j.cortex.2020.06.014
4. BBC. (2014, September 17). Science & Nature – Horizon. BBC.
5. Eagleman, D. (2023, September 6). Wednesday is Indigo Blue. David Eagleman. https://eagleman.com/books/wednesday-is-indigo-blue/
6. Eagleman, D. M., Kagan, A. D., Nelson, S. S., Sagaram, D., & Sarma, A. K. (2007). A standardized test battery for the study of Synesthesia. Journal of Neuroscience Methods, 159(1), 139–145. https://doi.org/10.1016/j.jneumeth.2006.07.012
7. Ramachandran, V. S., & Hubbard, E. M. (2001). Synaesthesia–a window into perception, thought and language. Journal of consciousness studies, 8(12), 3-34.
8. Ozturk, O., Krehm, M., & Vouloumanos, A. (2013). Sound symbolism in infancy: Evidence for sound–shape cross-modal correspondences in 4-month-olds. Journal of Experimental Child Psychology, 114(2), 173–186. https://doi.org/10.1016/j.jecp.2012.05.004
9. Styles, S. J., & Gawne, L. (2017). When does Maluma/takete fail? Two key failures and a meta-analysis suggest that phonology and phonotactics matter. I-Perception, 8(4), 204166951772480. https://doi.org/10.1177/2041669517724807
10. Ćwiek, A., Fuchs, S., Draxler, C., Asu, E. L., Dediu, D., Hiovain, K., Kawahara, S., Koutalidis, S., Krifka, M., Lippus, P., Lupyan, G., Oh, G. E., Paul, J., Petrone, C., Ridouane, R., Reiter, S., Schümchen, N., Szalontai, Á., Ünal-Logacev, Ö., Winter, B. (2021). The bouba/kiki effect is robust across cultures and writing systems. Philosophical Transactions of the Royal Society B: Biological Sciences, 377(1841). https://doi.org/10.1098/rstb.2020.0390
11. Barton, D. N., & Halberstadt, J. (2017). A Social Bouba/Kiki Effect: A bias for people whose names match their faces. Psychonomic Bulletin &amp; Review, 25(3), 1013–1020. https://doi.org/10.3758/s13423-017-1304-x 
12. Sidhu, D. M., Pexman, P. M., & Saint-Aubin, J. (2016). From the bob/kirk effect to the Benoit/éric effect: Testing the mechanism of name sound symbolism in two languages. Acta Psychologica, 169, 88–99. https://doi.org/10.1016/j.actpsy.2016.05.011
13. BBC. (2021, July 29). Rick Astley rolls into a billion YouTube views. BBC News. https://www.bbc.com/news/technology-58011677
14. BBC. (2018, September 10). Rick Astley on the Rickroll meme that made him an online legend. BBC Scotland. https://www.bbc.co.uk/programmes/articles/5D3ZmWf1hJmCxCc5Vn0sS64/rick-astley-on-the-rickroll-meme-that-made-him-an-online-legend
15. Jones, R. (2021)。跨感官心理學：解鎖行為背後的知覺密碼，改變他人、提升表現的生活處方箋 (陳松筠譯)。商周出版。

在元宇宙的世界裡，比較容易和價值觀相近的對象，談一場少摩擦的戀愛。

所謂的「談戀愛」，其實就是彼此價值觀的碰撞。

在價值觀日趨多元、細分的現代社會，實體世界裡的戀愛，情侶之間免不了會發生一些摩擦。

越來越多人在實體社會的戀愛關係中感受不到舒適，大眾認為「談戀愛風險很高」的傾向，更是一年比一年更鮮明。

可見「談戀愛」的魅力，正逐步下降。不論是在元宇宙內或外，都有一套很現代的方法可以解決這個問題，那就是配對服務。

迴避戀愛和元宇宙

當我們對戀愛的價值觀細分化之後，在生活周遭便很難找到滿足條件的人選；但只要像在社群網站上找興趣相近的同好那樣，從一個規模龐大的母群體當中找出伴侶的話，發生摩擦的狀況，會比不假思索就交往的對象減少許多。

若想找更根本的解決之道，那麼元宇宙上還有一個獨門絕招，就是乾脆把伴侶化為虛擬實境的一部分——因為情侶在元宇宙上會隔著虛擬替身，建立起隔一道防火牆的溝通方式。

有些人會覺得「虛擬替身碰不到、摸不著」，不過，時下認為談戀愛不見得一定要有實體互動或性接觸的人已越來越多，或有些原本潛伏噤聲的族群浮上檯面。

要是這些虛擬替身由 AI 操控的話，還能與另一半建立更舒適的戀愛關係——如果對象是 AI，不論是再怎麼極端的戀愛觀，或是任何性傾向，它應該都會接受吧！

想必今後會有越來越多人願意相信這不是逃避實體戀愛，而是元宇宙上的愛情，比實體更美好。

——本文摘自《元宇宙超圖解：從刀劍神域到寶可夢，一小時讀懂78個概念，掌握本世紀最大商機》，2023 年 9 月，漫遊者文化出版，未經同意請勿轉載。

• 文／樊家欣｜雅文基金會聽語科學研究中心　助理研究員 

P. LEAGUE 最大咖球星林書豪加盟鋼鐵人隊，帶領鋼鐵人打出新氣象，並獲選為籃球單月最有價值球員「三連霸」，堪稱史上第一人！你，也愛打籃球嗎？當你在體育館時，是否有察覺到周圍的聲音跟平常不太一樣呢？ 

迴響，能讓聲音隔空變魔術！

體育館一般有挑高的設計以及較大的室內容積，當其中有聲音產生，傳遞到周圍較硬的介質表面「反射」回來，而產生延遲和失真的現象，稱為「迴響（Reverberation）」。由於空間容積與迴響時間成正比，空間越大，迴響時間隨之延長。沒有進行吸音處理的體育館，運球聲、腳步聲、群眾吆喝聲等人造聲音將迴盪在空間中，聲音必須經過更長的時間才會完全消失，使人在體育館倍感喧騰。

善用設計，打造餘音繞樑的迴響聲學空間 

迴響在不同的空間，會因周圍反射的材質，展現不同的聲景樣貌，例如：音樂廳就是利用各種不同的「形狀」和「材質」來平衡聲音，再將之導向聽眾。

早期音樂廳的「形狀」只有鞋盒式，台北國家音樂廳就是歐洲數百年經典傳統鞋盒式音樂廳，平面觀眾席的聲響很好，但是後面的眺望台座位，由於天花板空間被擋住，與前面造成相異聲場，聲音就顯得不夠飽滿；而高雄衛武營音樂廳，其內部設計柏林愛樂廳一樣，採用的是葡萄園式音響設計，所有觀眾皆處在同一個屋簷下，觀眾席如同葡萄園般由舞台四周錯落展開，享受相同的音場，因此聲響均等優美。

從細部來看，「材質」平坦而堅硬的表面能反彈聲音、柔軟的表面可吸收聲音，粗糙的表面則會將入射的聲波散射。在牆壁和天花板上裝設經特別設計的嵌板，就能使聲音在抵達你的耳朵之前，先被調整並優化^[3]。藉由空間整體的設計，能讓迴響成為小精靈，締造優美的聲學空間。

迴響時間過長，對聆聽語音是個壞消息⋯⋯

美國國家標準協會（American National Standards Institutes, ANSI）於 2002 年建議迴響時間（Reverberation Time）少於 600 毫秒（= 0.6 秒）有最佳的語音理解和學習。在安靜的情境中，如果反射回來的語音較早抵達聽者的耳朵，則原聲和迴響會在聽覺系統裡整合，可能提升語音辨識度（Speech Recognition）；而較晚抵達的迴響，則不會與原聲有加成的作用，反而會遮蔽或模糊原本的聲音，而使語音辨識表現下降。除了語音辨識度之外，也可能因聲音的失真，而使聆聽變得費力。

聆聽費力度（Listening Effort）為一更敏感的指標，在一些迴響時間過長的情境中，即使語音辨識度沒有下降，但聆聽者可能因著迴響，而使聆聽造成負擔，或進一步使記憶或理解力下降^[5]，相關文章可以參考連結。因此，迴響時間過長，會提高語音辨識的難度和增加聆聽費力度。

善用科技，讓聽損者輕鬆聽清楚

一般人在有迴響的地方聽講可能會覺得比較不清楚或費力，而對於有聽力損失的人來說，會更容易受到迴響的不利影響^{[4] [6]}。因此，許多配戴助聽器或人工電子耳的聽損者，在聽講或聲音環境較為複雜的地方會搭配使用輔助聆聽裝置（Assistive Listening Device），如Ｔ線圈（Telecoil，又稱 T-coil）、藍芽及數位遠端麥克風等。此類裝置可將聲音訊號轉換，以無線的方式傳輸至助聽器／人工電子耳，來克服環境中迴響的干擾或距離因素，幫助聽損者聽得更清楚也更輕鬆^{[1] [2]}，相關文章也可參考連結。

綜言之，迴響在不同的聲學空間會產生不同的效應：在設計不良的空間會產生聽覺上的干擾，而在好的聲學空間則能使聆聽成為一種享受；另外，藉著輔助聆聽裝置也能幫助我們克服迴響等外部因素而有好的聆聽！

參考文獻

1. 吳彥玢（2019）。助聽器使用者使用數位遠端無線麥克風系統與動態調頻系統之比較〔未出版之碩士論文〕。國立台北護理健康大學語言治療與聽力研究所。
2. 林郡儀、張秀雯（2016）。校園聽覺環境及聽覺輔具之應用發展。輔具之友，39，29-34。
3. 凌美雪（2018年08月14日）。鞋盒式或葡萄園式、柏林愛樂黃金之音怎麼聽？自由時報。ltn.com.tw。
4. Brennan, M. A., McCreery, R. W., Massey, J. (2021). Influence of Audibility and Distortion on Recognition of Reverberant Speech for Children and Adults with Hearing Aid Amplification. Journal of the American Academy of Audiology, 33, 170-180. Doi: 10.1055/a-1678-3381.
5. Picou, E. M., Gordon, J., Ricketts, T. A. (2016). The Effects of Noise and Reverberation on Listening Effort in Adults With Normal Hearing. Ear and Hearing,37(1), 1-13. Doi: 10.1097/AUD.0000000000000222.
6. Xu, L., Luo, J., Xie, D., Chao, X., Wang, R., Zahorik, P., Luo, X. (2022). Reverberation Degrades Pitch Perception but Not Mandarin Tone and Vowel Recognition of Cochlear Implant Users. Ear and Hearing, 43(4), 1139-1150. Doi: 10.1097/AUD.0000000000001173.