【Gene 思書齋】用漫畫走入人體感官的世界

本文由策展人紀柏豪提供

想享受一場同時兼具科技與藝術的饗宴嗎？來《匯聚：從自然到社會的藝術探索》國際交流展看看吧！

在當代社會中，藝術的角色正持續演進——它創造了一種新的美學，與社會、科學以及技術變革緊密相連。當社會面臨的挑戰因其複雜性而難以僅靠單一學科解決時，藝術研究因其跨越、融合不同知識領域的能力而具有新的意義。今日，許多創作者和機構採用跨學科方法，將藝術與自然、科學與感性、想像力與現實結合，創造嶄新的經驗、知識和美學。

在藝術與科學這兩個看似迥異的領域中，存在著一個共通的追求——深入理解我們所處的世界。這一追求不僅體現了人類對知識渴望的本能，也反映了我們對於更高層次的自我認知和宇宙認識的探索。藝術家透過創作，探索人類經驗的多樣性和情感的複雜性，用畫筆、雕塑、數位媒介來表達對世界的主觀理解。這種理解可能源於個人感受，也可能反映了廣泛的社會和文化現象。

藝術提供了一種通過感知和情感來接觸和理解世界的方式，使我們能夠透過個別經驗來抵達普遍的真理。科學則通過觀察、實驗和分析來探究自然界的法則和現象，尋求對世界的客觀理解。科學方法使我們能夠系統地收集資料、建立理論並驗證假設，從而深化對物理世界的認識。不僅解答了關於自然界的問題，也幫助我們理解了人類自身在這個宇宙中的位置和作用。

儘管藝術和科學在方法和目的上有所不同，但它們都反映了人類對於更加全面和深刻理解世界的共同願望。藝術讓我們透過感受和想像來擴展對世界的認識，而科學則通過理性和證據來揭示秩序和結構。由國科會指導、國家實驗研究院主辦的《匯聚：從自然到社會的藝術探索》國際交流展，邀請觀眾一同探索藝術與科學的交會，體驗它們如何共同塑造我們對世界的認識和感知，並反思這一過程如何豐富我們的文化與知識視野。

展覽單元介紹

宇宙共生 —— 科技與宇宙的多維依存

當你仰望星空，有沒有想過我們與宇宙的關係？「宇宙共生」單元展示了科技如何將人類感性延伸至浩瀚的宇宙空間。麻省理工學院媒體實驗室的太空探索倡議小組（MIT Media Lab Space Exploration Initiative）帶來了在極端環境下的實地太空模擬，研究生存策略和科技應用。與之並置的《與細菌混了三千年》（3000 Years Among Microbes）則從微生物的角度重新審視太空探索中的殖民語言，帶來全新的太空想像。藝術家利用極端地貌與顯微影像並置，模糊人與微生物的分野，探討共生體概念在星際生態系中的應用。

感官賦能 ——透過科技重塑環境感知

「感官賦能」單元探索藝術家如何通過科技媒介重塑我們對環境的感知。兩位智利藝術家妮可·拉希利耶（Nicole L’Huillier）與派翠西亞·多明格斯（Patricia Domínguez）的《全像乳糜》（Leche Holográfica）是一場冥想式祈願，透過與不同元素的共鳴和諧，讓我們得以在螺旋時空中構想未來。

值得一提的是，藝術家妮可·拉希利耶與派翠西亞·多明格斯曾透過智利與歐盟的合作，在歐洲核子研究組織（CERN）進行藝術駐村計畫，並在那裡發展她們的作品。CERN 以其在粒子物理學上的重大科研成果而聞名，但即使是最前沿的科學研究，也需要藝術家的啟發。這樣的跨域合作不僅揭示了科學現象的美麗與複雜，更為科學研究注入了新的靈感和視角。藝術家的創意與想像力，能夠以不同於科學的方法來詮釋數據與實驗結果，從而開拓更廣泛的理解和應用。

拉脫維亞藝術家羅莎‧史密特（Rasa Smite）和萊提斯‧史密茨（Raitis Smits）的《深度感知》（Deep Sensing），通過拉脫維亞伊爾本（Irbene） RT-32電波望遠鏡的歷史敘事，象徵性地橋接了技術的過去與現在，探問「為何擁有地球還不足以滿足人類？」該望遠鏡被前蘇聯遺棄，而藝術家們重返此地，探索這個巨大天線在當代的價值。虛擬點雲天線追蹤從太陽到地球的宇宙粒子流動，創造出沉浸式的視覺和聲音景觀，讓觀眾更易於理解氣候變遷的影響。

羅莎‧史密特和萊提斯‧史密茨是里加RIXC新媒體文化中心的共同創辦人，他們的作品結合科學數據、聲音化和視覺化、人工智慧和擴增實境技術，創造出前瞻性的網絡藝術。他們的作品曾在威尼斯建築雙年展、拉脫維亞國家藝術博物館等地展出，並獲得多項國際獎項。

網絡交織 —— 科技與社會的複雜關係

「網絡交織」單元深入探討科技如何影響我們的社會結構和人際關係。瑪麗莎·莫蘭·賈恩（Marisa Morán Jahn）的《銅色景觀》（Copperscapes）展示了銅在全球化勞動中的角色，揭示了這一自然元素如何影響我們的日常生活。她的作品以銅色眼睛作為見證，表現出礦區社區所承受的「身體負擔」，並在影片《銅的私處史》中探討礦物經濟的複雜性，突顯採礦活動對身體及地球主權的影響。

瑪麗莎·莫蘭·賈恩是具有厄瓜多和中國血統的藝術家，其作品致力於重新分配權力，展示藝術作為社會實踐的可能性。她的作品曾在歐巴馬時期的白宮、威尼斯建築雙年展、古根漢美術館等地展出，並獲得聖丹斯電影節和創意資本等獎項。

李紫彤與孫詠怡的《岔經濟》（Forkonomy）利用區塊鏈技術，重新構想財產與國家之間的連結，探討擁有權背後的政治意義。這個藝術與社會運動計畫，通過工作坊和數位契約，探討如何購買或擁有一毫升的南海，並質疑現有的性別勞動分工和所有權制度。

李紫彤是台灣的藝術家兼策展人，作品結合人類學研究與政治行動，曾在國內外多個知名展覽中展出。孫詠怡是出生於香港的藝術家和程式撰寫者，專注於數位基礎設施的文化意義及廣泛權力的不對等問題，作品曾獲得林茲電子藝術節金尼卡獎等多項國際獎項。

印度藝術家艾蒂·桑德爾（Aarti Sunder）的《深海節點故事》（Nodal Narratives of the Deep Sea）將海底電纜這一隱藏基礎設施帶入視野，探討其與現代化項目、資本主義擴張及殖民主義的關聯。她的作品通過繪畫、物件和影片，展示了數據傳輸的路徑及其對生態系統的影響。

艾蒂·桑德爾的創作涉及影像、寫作與繪畫，專注於探討科技政治和基礎設施相關議題。她的作品曾在柏林藝術學院、新加坡雙年展、世界文化之家等國際場所展出。

科藝匯聚 —— 跨學科的創新邊界

「科藝匯聚」單元彰顯了藝術與科學共同探索未知領域的力量。國家太空中心的《來自遙遠的訊息》管絃樂曲選粹、麻省理工學院前衛視覺研究中心（CAVS）的歷史檔案，以及臺灣共演化研究隊的「邊界測繪學」年度計畫成果，展示了藝術家與科學家跨域合作的豐富成果和未來潛能。

跨域交流與活動

在展覽期間，策展團隊與台灣致力於促進科學家與藝術家合作的「共演化研究隊」規劃了一系列精彩的跨域交流活動，讓大家能近距離與藝術家、科學家們交流，體驗科技與藝術如何共同作用於當代社會。

活動包括圓桌論壇、藝術家講座和放映會，涵蓋了多個有趣且深入的主題。例如，在「宇宙共生」週末，觀眾可以參與討論極地科學與藝術實踐的圓桌論壇，聆聽來自麻省理工學院媒體實驗室「太空探索倡議」的成員分享他們在極端地貌探索的經驗。另一活動是國家太空中心委託製作的管弦樂曲《來自遙遠的訊息》放映會，由作曲家趙菁文進行演前導聆，帶領觀眾進入一場視覺與聽覺的雙重盛宴。

在「網絡交織」週末，藝術家李紫彤與孫詠怡將帶來一場關於區塊鏈技術應用於南海議題的討論，這場圓桌論壇將探討技術如何影響社會結構和資源分配。印度藝術家艾蒂·桑德爾則會在線上分享她對於海洋及網路基礎設施的研究與創作，揭示隱藏在我們日常生活背後的複雜科技網絡。

「感官賦能」週末將邀請拉脫維亞藝術家羅莎‧史密特和萊提斯‧史密茨現場分享他們的作品《深度感知》，並探討電波望遠鏡的技術敘事，展示如何通過藝術手段使抽象的科學數據變得可以感知。這不僅讓觀眾更易於理解氣候變遷的影響，也體現了藝術在科學溝通中的重要角色。他們將分享長期研究「自然廣播」的概念，以及每年舉辦「藝術科學節」的經驗。

在「科藝匯聚」週末，觀眾可以參與科學家與藝術家的提案室，直接感受跨領域合作的火花。這些活動將展示跨學科合作如何激發創新，促進我們對世界更深層次的理解。此外，拍攝麻省理工學院前衛視覺研究中心創始人故事的紀錄片將在台灣首映，導演並將與觀眾進行映後座談，分享創作背後的故事和啟發。

藝術與科學的相互啟發，不僅僅是知識和美學的結合，更是對創新與理解的共同追求。在這個亟需跨學科解決方案的時代，這樣的合作顯得尤為重要，為我們探索未知領域提供了無限可能。這次展覽通過多樣的跨域交流活動，讓觀眾能夠親身體驗並參與其中，進一步體會到藝術與科學融合所帶來的豐富成果和未來潛力。

展覽資訊

• 展覽名稱：《匯聚：從自然到社會的藝術探索 ｜ 國際交流展》
• 日期：2024/5/10 至 2024/8/10
• 時間：週一至週五 09:00-18:00（國定假日休）
• 地點：科技大樓一樓大廳（臺北市大安區和平東路二段106號）
• 指導單位：國家科學及技術委員會
• 主辦單位：國家實驗研究院
• 策展人：紀柏豪
• 執行單位：融聲創意
• 協力單位：共演化研究隊

• 文／陳品均｜雅文基金會聽語科學研究中心 助理研究員

星期一，聽起來是什麼顏色？

先別急著回答藍色，對某些人來說，這個答案可不是受到情緒經驗的影響，而是真實的色彩反應。

星期怎麼可能聽起來有顏色？事實上，根據研究大約有 4% 左右的人^[1]，在某個認知或感官接收資訊刺激後，另一種感覺或認知會同步自發的出現，並且具有特定規律，此反應與刺激本身並不一定相關，這些人被稱為聯覺者，擁有像是聽到聲音時，除了聲音的反應外，同時認知到了形狀或顏色等的特徵。

舉例而言，若一位聯覺者聽見 A，除了聲音 A 以外還自動產生了它是紅色的聯覺認知，則不論是在 Apple 或 Angel 中，A 對他而言都是紅色的，不會因為 Angel 比較常以白色的型態出現，便轉換成白色的 A。在學界，聯覺的發展和原因尚在探索中，有些研究指出可能與小時候接觸抽象觀念時的發展、遺傳以及大腦神經機制有關 ^[2、3] 。

隨著聯合反應的感官組成不同，聯覺者的異能經驗也五花八門

你能想像當單一感官接收某一訊息時，同時產生另一感官的不同認知是怎樣的經驗嗎？BBC 的科普節目《Horizon》其中一集< Derek Tastes of Earwax >記錄了數名聯覺者的跨感官連結經驗。其中，一名酒吧老闆兼有聽覺和味覺的聯覺，當他聽見各式各樣的詞彙時，宛如品嚐綜合風味豆，讓他飽嘗各種滋味^[4]。

另一名受訪者是聽覺及視覺的聯覺者，經實驗後科學家發現，若聽到數字或是月份日期時，這名受訪者的腦部除了聽覺區域外，視覺區域也會產生反應。特別的是，他本身是一名視覺障礙者。

感官認知上特別的連結，讓聯覺者所經驗的世界像是搭載了酷炫的特效般，使他們在藝術創作及記憶上屢有出色的表現，代表人物有：知名文學《蘿莉塔》作者 Nabokov^[5]、以引起聽眾共鳴聞名的音樂家 Olivier Messiaen、表現主義的經典畫家 Wassily Kandinsky 等。若想檢視自身是否為天選之人的聯覺者，除了自我覺察是否有異於常人的跨感官連結反應外，目前也有相關的測驗^[6]可以參考。

你我的「類聯覺」跨感官反應

若說聯覺是天生具有特別音感的人，那麼跨感官反應肯定就是音樂家們透過經驗累積產生的直覺判斷，兩者不盡相同、卻又有其類似之處。那麼，不具有聯覺的異能，我們難道只能認命當麻瓜了嗎？

別急，縱使不是聯覺者，普通人也多少會有類似聯覺的經驗，這樣的類聯覺稱作跨感官反應，往往在我們渾然不覺時，悄悄地舉辦同樂會，並影響人們的喜好、感知和行為等。

先來看看研究者們發現的有趣現象，請看這兩個形狀：

過去曾有研究者以 bouba 及 kiki 兩個虛構詞進行實驗，九成受訪者傾向認為雲朵狀的形狀是 bouba，尖銳的形狀則被認為是 kiki，即使這些受訪者其實並不認識兩個假詞，但基於聲音和形狀的特徵，卻讓多數人做出這樣的選擇^[7]。

後續研究者也繼續投入各式各樣以不同語言文化環境為背景、不同年齡階層為對象的研究，有趣的是，結果顯示此現象幾乎是跨語言、跨文化、跨地域存在的，甚至在少與外界互動的部落居民，或是尚未識字的幼兒身上，也有這類從聲音特徵影響其視覺形狀感知歸類的效應 ^[8、9、10]。除了虛構的詞彙以外，有些研究者使用真實存在的詞彙（如：Bob 及 Kirk），來對應圓潤及尖銳的剪影或人臉，最後也有相似的結果^[11、12]。

一般人的經驗和認知，往往加速催化感官間的互相影響

除了語言與形狀外，我們生活中還有許多感官互相影響的例子，來試試看下面這張圖，你聽見聲音了嗎？

瑞克搖（Rickrolled）的影片在 2019 年突破了 10 億次的 youtube 觀看次數^[13、14]，迷因化後大量的連結及有聲影片傳播，使得曾經的觀眾在看見這張圖時根據經驗，腦海中自然出現了＜Never Gonna Give You Up＞的旋律。

然而，不同於聯覺，若沒有經驗累積，跨感官的反應便無法被觸發，以上圖為例，即便觀看次數如此驚人，對於未曾接觸過此影片的人而言，由於缺乏經驗和認知的累積，在看見該張圖片時，理所當然也無法產生相對的聲音反應。

將跨感官反應置入在行銷中的策略，現正流行中！

在大量接收資訊的生活中，我們不自覺地累積了許多感官經驗，成為由單一感官啟動與其他感官同步作用的引線。行銷高手們從中嗅出了商機，精明的將消費者們不由自主產生的跨感官反應也算進了商業行銷的一環。如：某知名咖啡品牌在過去曾進行一項實驗，將兩杯一樣的咖啡配以不同的音效提供給不知情的消費者。前一杯搭配液體沖入便宜咖啡杯、攪拌，模仿沖泡即溶咖啡的聲音，另一杯則在播放磨豆聲、蒸氣聲以及倒進陶瓷杯的聲響後，再次提供給消費者，結果發現在不同的聲音所營造的環境氛圍下，同樣的兩杯咖啡，人們覺得後一杯更加濃醇香，並願意為之付出更高的金額^[15]。

近年熱門的 ASMR 亦是味覺和聽覺的跨感官應用，若想了解更多，別錯過之前的專欄文章﹤加點「聲音調味料」，享受聽覺與味覺的極致饗宴吧！﹥。

下次若覺得某張圖片有聲音、光看某部電影的宣傳海報就起雞皮疙瘩，或是外帶的咖啡沒有內用的美味，也許就是跨感官反應悄悄影響了你的感覺。最後，讓我們回到一開始的問題，星期一聽起來是什麼顏色的？不論是不是藍色的，何不試試透過 GIF 圖和親朋好友無聲地分享你震耳欲聾的情感吧！ 

參考資料

1. Simner, J., Mulvenna, C., Sagiv, N., Tsakanikos, E., Witherby, S. A., Fraser, C., Scott, K., & Ward, J. (2006). Synaesthesia: The prevalence of atypical cross-modal experiences. Perception, 35(8), 1024–1033. https://doi.org/10.1068/p5469 
2. Bankieris, K., & Simner, J. (2015). What is the link between synaesthesia and sound symbolism? Cognition, 136, 186–195. https://doi.org/10.1016/j.cognition.2014.11.013
3. Freeman, E. D. (2020). Hearing what you see: Distinct excitatory and disinhibitory mechanisms contribute to visually-evoked auditory sensations. Cortex, 131, 66–78. https://doi.org/10.1016/j.cortex.2020.06.014
4. BBC. (2014, September 17). Science & Nature – Horizon. BBC.
5. Eagleman, D. (2023, September 6). Wednesday is Indigo Blue. David Eagleman. https://eagleman.com/books/wednesday-is-indigo-blue/
6. Eagleman, D. M., Kagan, A. D., Nelson, S. S., Sagaram, D., & Sarma, A. K. (2007). A standardized test battery for the study of Synesthesia. Journal of Neuroscience Methods, 159(1), 139–145. https://doi.org/10.1016/j.jneumeth.2006.07.012
7. Ramachandran, V. S., & Hubbard, E. M. (2001). Synaesthesia–a window into perception, thought and language. Journal of consciousness studies, 8(12), 3-34.
8. Ozturk, O., Krehm, M., & Vouloumanos, A. (2013). Sound symbolism in infancy: Evidence for sound–shape cross-modal correspondences in 4-month-olds. Journal of Experimental Child Psychology, 114(2), 173–186. https://doi.org/10.1016/j.jecp.2012.05.004
9. Styles, S. J., & Gawne, L. (2017). When does Maluma/takete fail? Two key failures and a meta-analysis suggest that phonology and phonotactics matter. I-Perception, 8(4), 204166951772480. https://doi.org/10.1177/2041669517724807
10. Ćwiek, A., Fuchs, S., Draxler, C., Asu, E. L., Dediu, D., Hiovain, K., Kawahara, S., Koutalidis, S., Krifka, M., Lippus, P., Lupyan, G., Oh, G. E., Paul, J., Petrone, C., Ridouane, R., Reiter, S., Schümchen, N., Szalontai, Á., Ünal-Logacev, Ö., Winter, B. (2021). The bouba/kiki effect is robust across cultures and writing systems. Philosophical Transactions of the Royal Society B: Biological Sciences, 377(1841). https://doi.org/10.1098/rstb.2020.0390
11. Barton, D. N., & Halberstadt, J. (2017). A Social Bouba/Kiki Effect: A bias for people whose names match their faces. Psychonomic Bulletin &amp; Review, 25(3), 1013–1020. https://doi.org/10.3758/s13423-017-1304-x 
12. Sidhu, D. M., Pexman, P. M., & Saint-Aubin, J. (2016). From the bob/kirk effect to the Benoit/éric effect: Testing the mechanism of name sound symbolism in two languages. Acta Psychologica, 169, 88–99. https://doi.org/10.1016/j.actpsy.2016.05.011
13. BBC. (2021, July 29). Rick Astley rolls into a billion YouTube views. BBC News. https://www.bbc.com/news/technology-58011677
14. BBC. (2018, September 10). Rick Astley on the Rickroll meme that made him an online legend. BBC Scotland. https://www.bbc.co.uk/programmes/articles/5D3ZmWf1hJmCxCc5Vn0sS64/rick-astley-on-the-rickroll-meme-that-made-him-an-online-legend
15. Jones, R. (2021)。跨感官心理學：解鎖行為背後的知覺密碼，改變他人、提升表現的生活處方箋 (陳松筠譯)。商周出版。

本文由 財政部國庫署 委託，泛科學企劃執行。

你注意到了嗎？在品酒時，品酒師不會一口乾，而是充分觀察、品嚐後才會下肚。這些動作可不是單純裝模作樣，而是有科學根據的。品酒有五個基本動作：觀察、搖晃、聞、啜飲與漱口、吞嚥，究竟我們的感官跟大腦是怎麼接收酒的訊號呢？

從最簡單的「嗅覺」開始，酒杯湊近口鼻、進入口腔，我們可以聞到「外部」和「內部」的香氣。外部指的就是用鼻子聞到的香氣，是先穿越鼻孔到達嗅上皮組織，形成我們所熟悉的正鼻嗅覺。而內部呢？那些已經在我們嘴巴裡的酒液，會走鼻咽和後鼻孔這條路，最終到達嗅覺粘膜。即使這口酒已經被喝下去，只要輕輕呼口氣，也依然能「聞」到酒味。

另外，口鼻之間的通道，也就是鼻咽，在吞嚥的過程中會關閉，所以在吞嚥時會有一種「味道好像弱掉了」的錯覺，但其實只是你暫時無法靠鼻間的任何通道呼吸而已。這也是為什麼品酒師會要把酒液含在嘴巴裡漱口，甚至還會打開嘴巴吸一口氣。

緊接在嗅覺之後的「味覺」，則是重頭戲！食物進到嘴巴，溶解在唾液中，啟動了味覺受器。人類可以透過味蕾的受器感受到「鹹、酸、苦、甜、鮮」五種味道。不過，也有部分的人不喜歡酒的原因，正是因為味覺。美國賓州大學農學院過去研究發現，人體中的苦味受體來自基因 TAS2R13 和 TAS2R38，辣椒素受體則來自基因 TRPV1。因此不同的基因表現，影響著人們對這兩種味道的感受，也決定了他們的攝取喜好。

講完了嗅覺和味覺，別忘了品酒前的「觀察」。事實上，人們對風味的知覺基礎，來自多重感官的整合。當我們在觀看一杯酒的色澤和濁度時，大腦已經在默默「品嚐」它了。就像是望梅止渴、看到好吃的大餐肚子就先餓了起來。

除上述提到的「身體」感官，其實喝酒的時段、溫度、聲音、順序也會影響我們「心裡」的感受。但話說回來，在品酒前，最重要的應是選擇安全以及衛生的酒品來源，就是要慎選合法的販售業者，並挑選標示內容清晰、完整的酒品。

財政部自 2003 年起委託專業執行機構共同推動「優質酒類認證」制度，從原料、製程、品管、後續追蹤等層層把關，最後通過優質酒類認證技術委員會審查的酒品，才能被授予使用 Ｗ 字型認證標誌。因此，選購有 W 認證標誌的優質酒品，可以讓我們在品飲時更加安心！

 資料來源：財政部國庫署 廣告