福斯曼深信這是一個安全有效的方法,可以直接對心臟投藥,或是注入 X 光的顯影劑。他志願當第一隻白老鼠,但主管認為危險性太高而駁回,要他先提動物的實驗計畫。福斯曼知道如此一來勢必曠日廢時,而且就算實驗成功也不見得就能獲准用在病人身上;他想私下試驗又拿不到所需的器材,因此他才特意接近掌管手術室的狄森護士。狄森最後也相當認可他的構想,同意助他一臂之力,但前提是由她來當白老鼠。
福斯曼請她趕快打電話給 X 光室做好準備,接著狄森陪他快步走去照 X 光。此時福斯曼的同事聞訊也趕了過來,想要幫他把導管拉出來,福斯曼好不容易才勸阻了他。X 光照片洗出來後,福斯曼估算還能再推進 30 公分,於是在導管上做好記號後,在身旁三人驚惶的目光下,繼續將導管推往心臟。就定位後,再照一次 X 光,照片清楚顯示導管末端就在右心房內。福斯曼在自己身上成功完成史上首次的心導管手術,證明了心導管的可行性。
福斯曼的主管原本大為震怒,但看了 X 光照片後還是信服了。他允許福斯曼在病人身上使用心導管,果然得到不錯的成效。然而,福斯曼發表論文後,得到的噓聲卻遠大於掌聲,原本預備前往任職的醫院也通知他已被解雇。在整個德國心臟科醫界的負評壓力下,福斯曼只好轉往泌尿科發展。
你有沒有想過,當 AI 根據病歷與 X 光片就能幫你診斷病症,或者決定是否批准貸款,甚至從無人機發射飛彈時,它的每一步「決策」是怎麼來的?如果我們不能知道 AI 的每一個想法步驟,對於那些 AI 輔助的診斷和判斷,要我們如何放心呢?
馬斯克與 OpenAI 的奧特曼鬧翻後,創立了新 AI 公司 xAI,並推出名為 Grok 的產品。他宣稱目標是以開源和可解釋性 AI 挑戰其他模型,而 xAI 另一個意思是 Explainable AI 也就是「可解釋性 AI」。
如今,AI 已滲透生活各處,而我們對待它的方式卻像求神問卜,缺乏科學精神。如何讓 AI 具備可解釋性,成為當前關鍵問題?
-----廣告,請繼續往下閱讀-----
黑盒子模型背後的隱藏秘密
無法解釋的 AI 究竟會帶來多少問題?試想,現在許多銀行和貸款機構已經使用 AI 評估借貸申請者的信用風險,但這些模型往往如同黑箱操作。有人貸款被拒,卻完全不知原因,感覺就像被分手卻不告訴理由。更嚴重的是,AI 可能擅自根據你的住所位置或社會經濟背景給出負面評價,這些與信用風險真的相關嗎?這種不透明性只會讓弱勢群體更難融入金融體系,加劇貧富差距。這種不透明性,會讓原本就已經很難融入金融體系的弱勢群體,更加難以取得貸款,讓貧富差距越來越大,雪上加霜。
AI 不僅影響貸款,還可能影響司法公正性。美國部分法院自 2016 年起使用「替代性制裁犯罪矯正管理剖析軟體」 COMPAS 這款 AI 工具來協助量刑,試圖預測嫌犯再犯風險。然而,這些工具被發現對有色人種特別不友好,往往給出偏高的再犯風險評估,導致更重的刑罰和更嚴苛的保釋條件。更令人擔憂的是,這些決策缺乏透明度,AI 做出的決策根本沒法解釋,這讓嫌犯和律師無法查明問題根源,結果司法公正性就這麼被悄悄削弱了。
此外,AI 在醫療、社交媒體、自駕車等領域的應用,也充滿類似挑戰。例如,AI 協助診斷疾病,但若原因報告無法被解釋,醫生和患者又怎能放心?同樣地,社群媒體或是 YouTube 已經大量使用 AI 自動審查,以及智慧家居或工廠中的黑盒子問題,都像是一場越來越複雜的魔術秀——我們只看到結果,卻無法理解過程。這樣的情況下,對 AI 的信任感就成為了一個巨大的挑戰。
其次,深度學習模型會會從資料中學習某些「特徵」,你可以當作 AI 是用畫重點的方式在學習,人類劃重點目的是幫助我們加速理解。AI 的特徵雖然也能幫助 AI 學習,但這些特徵往往對人類來說過於抽象。例如在影像辨識中,人類習慣用眼睛、嘴巴的相對位置,或是手指數量等特徵來解讀一張圖。深度學習模型卻可能會學習到一些抽象的形狀或紋理特徵,而這些特徵難以用人類語言描述。
深度學習模型通常採用分佈式表示(Distributed Representation)來編碼特徵,意思是將一個特徵表示為一個高維向量,每個維度代表特徵的不同方面。假設你有一個特徵是「顏色」,在傳統的方式下,你可能用一個簡單的詞來表示這個特徵,例如「紅色」或「藍色」。但是在深度學習中,這個「顏色」特徵可能被表示為一個包含許多數字的高維向量,向量中的每個數字表示顏色的不同屬性,比如亮度、色調等多個數值。對 AI 而言,這是理解世界的方式,但對人類來說,卻如同墨跡測驗般難以解讀。
首先,可以利用熱圖(heatmap)或注意力圖這類可視化技術,讓 AI 的「思維」有跡可循。這就像行銷中分析消費者的視線停留在哪裡,來推測他們的興趣一樣。在卷積神經網絡和 Diffusion Models 中 ,當 AI 判斷這張照片裡是「貓」還是「狗」時,我需要它向我們展示在哪些地方「盯得最緊」,像是耳朵的形狀還是毛色的分布。
以實際的情景來說,SHAP 可以讓 AI 診斷出你有某種疾病風險時,指出年齡、體重等各個特徵的影響。
LIME 的運作方式則有些不同,會針對單一個案建立一個簡單的模型,來近似原始複雜模型的行為,目的是為了快速了解「局部」範圍內的操作。比如當 AI 拒絕你的貸款申請時,LIME 可以解釋是「收入不穩定」還是「信用紀錄有問題」導致拒絕。這種解釋在 Transformer 和 NLP 應用中廣泛使用,一大優勢是靈活且計算速度快,適合臨時分析不同情境下的 AI 判斷。比方說在醫療場景,LIME 可以幫助醫生理解 AI 為何推薦某種治療方案,並說明幾個主要原因,這樣醫生不僅能更快做出決策,也能增加患者的信任感。
-----廣告,請繼續往下閱讀-----
第三是反事實解釋:如果改變一點點,會怎麼樣?
如果 AI 告訴你:「這家銀行不會貸款給你」,這時你可能會想知道:是收入不夠,還是年齡因素?這時你就可以問 AI:「如果我年輕五歲,或者多一份工作,結果會怎樣?」反事實解釋會模擬這些變化對結果的影響,讓我們可以了解模型究竟是如何「權衡利弊」。
Yoshiko Nakayama, Akira Horiuchi (2006) Colonoscopy in the sitting position: lessons learned from self-colonoscopy by using a small-caliber, variable-stiffness colonoscope. Gastrointestinal Endoscopy. 63, 119-120
Horiuchi A, Nakayama Y, Kajiyama M, Fujii H, Tanaka N. (2004) Usefulness of a small-caliber, variable-stiffness colonoscope as a backup in patients with difficult or incomplete colonoscopy. The American Journal of Gastroenterology. 99, 1936-1940
Yoshiko Nakayama, Akira Horiuchi (2003) Small-diameter endoscope enabled endoscopist to detect his own duodenal erosion. The American Journal of Gastroenterology. 98, 2576. DOI: 10.1111/j.1572-0241.2003.08683.x
Chi-Tan Hu (2010) Nasal anesthesia and body position changes: lessons learned from self-performed, transnasal EGD. Gastrointestinal Endoscopy. 71. 1277-1279. DOI: 10.1016/j.gie.2010.01.062.