內(nèi)容一覽：多巴胺是神經(jīng)系統(tǒng)中重要的神經(jīng)遞質(zhì)，與運(yùn)動、記憶和獎賞系統(tǒng)息息相關(guān)，它是快樂的信使，當(dāng)我們看到令人愉悅的東西時，體內(nèi)就會分泌多巴胺，誘導(dǎo)我們向它追尋。然而，多巴胺的準(zhǔn)確定量分析目前仍難以實(shí)現(xiàn)。借助機(jī)器學(xué)習(xí)，美國加利福尼亞大學(xué)伯克利分校 (UCB) 的 Markita P. Landry 研究組對多巴胺的釋放量和釋放位置，進(jìn)行了量化分析，讓我們距離快樂密碼更進(jìn)一步。
關(guān)鍵詞：機(jī)器學(xué)習(xí) 強(qiáng)化學(xué)習(xí) 多巴胺

本文首發(fā)于 HyperAI 超神經(jīng)微信公眾平臺。

我們時常會被問到這樣一個問題「你快樂嗎」。在對自己最近的生活狀況進(jìn)行回顧之后，我們也許可以做出一個相對令人滿意的回答。然而，要回答有關(guān)快樂的另一個問題「你有多快樂」，就沒那么容易了。

我們可以對快樂進(jìn)行一個相對準(zhǔn)確的是非判斷，卻很難對快樂進(jìn)行一個量化的分析，只能用一些程度副詞進(jìn)行大致的評估。

但從生理學(xué)角度上看，快樂的程度可以用人體內(nèi)的激素水平進(jìn)行判斷，其中一種重要激素就是多巴胺。

多巴胺是神經(jīng)系統(tǒng)中一種重要的神經(jīng)遞質(zhì)，負(fù)責(zé)在細(xì)胞之間傳遞訊息。多巴胺是快樂的信使，當(dāng)我們看到令人愉悅的事物時，大腦便會釋放多巴胺，促使我們?nèi)プ穼た鞓返氖挛?。因此，多巴胺能神?jīng)元 (dopaminergic neuron) 控制的一條神經(jīng)環(huán)路也被稱為獎賞回路，這一回路與學(xué)習(xí)、記憶、成癮行為息息相關(guān)。

雖然人們對多巴胺的化學(xué)結(jié)構(gòu)，分布區(qū)域及生理作用已經(jīng)有了比較清晰的認(rèn)識，但對多巴胺在細(xì)胞層面及分子層面的作用機(jī)制還不甚了解，更無法對多巴胺的在神經(jīng)環(huán)路中的作用進(jìn)行準(zhǔn)確的量化分析。

「量化」快樂：AI 破譯多巴胺密碼

1997 年，Schultz 等人提出了獎賞回路的可能運(yùn)行機(jī)制——獎賞預(yù)測誤差假說。這一假說認(rèn)為，多巴胺能神經(jīng)元會根據(jù)預(yù)期獎賞與實(shí)際獎賞的誤差，調(diào)整多巴胺的釋放量，進(jìn)而調(diào)整人們追尋某項(xiàng)事物的動機(jī)。

2020 年，DeepMind 在大腦中發(fā)現(xiàn)不同的神經(jīng)元對于同一刺激有著不同的獎勵預(yù)期。也就是說，在大腦當(dāng)中存在著相對樂觀的神經(jīng)元和比較悲觀的神經(jīng)元。面對同樣的半杯水，樂觀的神經(jīng)元會認(rèn)為，還有半杯水，我們前途光明。而悲觀的神經(jīng)元則會覺得，只剩半杯水了，我們要渴死了。而且進(jìn)一步研究表明，神經(jīng)元對獎勵預(yù)期的分布與實(shí)際獎勵的分布基本一致。

在 AI 的幫助下，對于獎賞回路神經(jīng)機(jī)制的解析正在加速推進(jìn)。

2021 年，美國范德堡大學(xué) (Vandy) 的 Erin S. Calipar 研究組通過監(jiān)測生物體內(nèi)多巴胺含量的變化，利用支持向量機(jī) (SVM) 實(shí)現(xiàn)了對生物體行為的預(yù)測，同時基于實(shí)驗(yàn)結(jié)果，研究組提出了多巴胺調(diào)控生理活動的新模型。

近期，AI 對于多巴胺的解讀更上一層樓。借助機(jī)器學(xué)習(xí)， 美國加利福尼亞大學(xué)伯克利分校 (UCB) 的 Markita P. Landry 研究組，對多巴胺的釋放量和釋放腦區(qū)進(jìn)行了量化分析，為神經(jīng)成像和神經(jīng)環(huán)路的研究提供了新思路。

相關(guān)研究已發(fā)表在《ACS Chemical Neuroscience》上，標(biāo)題為「 Identifying Neural Signatures of Dopamine Signaling with Machine Learning」。

論文地址：https://pubs.acs.org/doi/full/10.1021/acschemneuro.3c00001

該研究主要解決了兩個問題：

1、分辨不同刺激下的多巴胺釋放量（0.1 mA 及 0.3 mA 電流刺激）；

2、判斷多巴胺的釋放腦區(qū)（背外側(cè)紋狀體 DLS 及背內(nèi)側(cè)紋狀體 DMS）。

首先，他們用近紅外兒茶酚胺納米傳感器 (nIRCat，near infrared catecholamine nanosensors) 對多巴胺進(jìn)行標(biāo)記。標(biāo)記后，在紅外顯微鏡下，多巴胺會發(fā)出熒光，熒光強(qiáng)度與多巴胺濃度正相關(guān)。對大腦施加電流刺激后，大腦會釋放出多巴胺，隨后將其回收。這一過程會在紅外顯微鏡下留下一條熒光強(qiáng)度曲線，對熒光曲線進(jìn)行量化處理，可以得到 8 個統(tǒng)計(jì)特征，如平均熒光強(qiáng)度，多巴胺釋放位點(diǎn)數(shù) (ROI, regions of interests) 等，還有 2 個時間特征，包括熒光強(qiáng)度高于及低于 2 倍標(biāo)準(zhǔn)差的時長。這些特征值可用于機(jī)器學(xué)習(xí)模型的訓(xùn)練。

A：電流刺激前后觀察到的熒光結(jié)果

B：電流刺激前后的熒光強(qiáng)度曲線圖

研究者們用支持向量機(jī) (SVM) 和隨機(jī)森林模型 (RF) 兩個模型分別進(jìn)行了訓(xùn)練和分析。

SVM 模型可以基于復(fù)雜非線性的特征將結(jié)果分為兩類，并將訓(xùn)練得到的邊界條件運(yùn)用到測試數(shù)據(jù)中。RF 模型由多個決策樹組成，每個決策樹做出的決策最終被整理在一起，得到最終的輸出結(jié)果。

RF 模型可以對結(jié)果中的變量進(jìn)行全面解讀，保證準(zhǔn)確的預(yù)測，通過隨機(jī)選擇數(shù)據(jù)和特征，降低了決策樹模型對于原始訓(xùn)練數(shù)據(jù)的敏感性，同時提高了決策樹之間的差異性。

兩種模型所需的訓(xùn)練數(shù)據(jù)量較小，而且可以將結(jié)果分別兩類，與本研究的目的相匹配。

Data Set A 及 Data Set B：分別代表不同電流刺激或是不同腦區(qū)的多巴胺釋放濃度

兩種模型訓(xùn)練完畢后，將不同電流刺激下得到的熒光強(qiáng)度曲線作為輸入量，模型就可以對受到的刺激強(qiáng)度和多巴胺釋放的腦區(qū)進(jìn)行判斷。

圖 A：對 4 周齡小鼠的判斷結(jié)果

圖 B：對 8.5 周齡小鼠的判斷結(jié)果

圖 C：對 12 周齡小鼠的判斷結(jié)果

結(jié)果中可以看到，隨著小鼠周齡的增加，兩種模型對于刺激強(qiáng)度的判斷準(zhǔn)確率不斷增加。這主要是因?yàn)?，隨著小鼠周齡增加，其體內(nèi)激素水平逐漸穩(wěn)定，易于預(yù)測。在 12 周齡的小鼠上，RF 模型對刺激強(qiáng)度的判斷準(zhǔn)確率可達(dá)0.832。

A&B：對 4 周齡小鼠的判斷結(jié)果

C&D：對 8.5 周齡小鼠的判斷結(jié)果

E&F：對 12 周齡小鼠的判斷結(jié)果

圖中可以看出，與刺激強(qiáng)度的結(jié)果類似，機(jī)器學(xué)習(xí)在 12 周齡的小鼠上有著最高的判斷準(zhǔn)確率，最高可達(dá) 0.708。同時，不同的輸入特征也會對模型的判斷準(zhǔn)確率產(chǎn)生影響。不同特征參數(shù)當(dāng)中，ROI 對于模型的判斷準(zhǔn)確率最為重要。

通過機(jī)器學(xué)習(xí)，研究者打破了傳統(tǒng)數(shù)據(jù)分析的禁錮，選用了大量特征變量，并通過傳統(tǒng)數(shù)據(jù)分析所忽視的特征 ROI 提高了模型的判斷準(zhǔn)確率。此外，這一模型還可以推廣利用于多巴胺之外的神經(jīng)環(huán)路，為神經(jīng)成像與神經(jīng)機(jī)制的研究提供新思路。

多巴胺：快樂與失落的雙刃劍

多巴胺能為我們帶來愉悅的感受，并促使我們追尋快樂的事物。無論是可口的食物，絢麗的風(fēng)景，適當(dāng)?shù)倪\(yùn)動還是積極的社交，都有助于多巴胺的釋放，從而幫助我們保持好心情。正因?yàn)榇?，多巴胺也可以作為商家的一種營銷手段。從包裝精美的「多巴胺餐飲」到席卷社媒的「多巴胺穿搭」，亮麗的色彩不僅點(diǎn)綴了人們的生活，也點(diǎn)亮了人們的心情。

然而，快樂之后，體內(nèi)的多巴胺水平會暫時跌落至正常水平以下，反而會帶來沮喪感。多巴胺長期頻繁分泌后，人體對快樂的感知會變得遲鈍，使人難以體會到生活中點(diǎn)點(diǎn)滴滴的美好，更容易變得失落。因此，也有人提出了「多巴胺戒斷」的理念，通過調(diào)整作息，控制娛樂時間，遠(yuǎn)離社交媒體等方式，控制體內(nèi)多巴胺的釋放，從而回歸生活，體會到真正的快樂。

無論是「多巴胺穿搭」還是「多巴胺戒斷」，大家都在追尋生活中的美好，使自己快樂生活。兩種理論雖然有一定的生理學(xué)依據(jù)，但實(shí)際效果仍有待研究。在 AI 的幫助下，科研工作者們也在不斷地挖掘神經(jīng)活動背后的機(jī)制，探究多巴胺的奧秘。相信有一天，當(dāng)被問及「你有多快樂」的時候，人們能夠毫不猶豫地回答說，100%。

本文首發(fā)于 HyperAI 超神經(jīng)微信公眾平臺。

參考文章：

[1]https://www.nature.com/articles/s41586-019-1924-6#additional-information

[2]https://www.sciencedirect.com/science/article/pii/S096098222101188X

[3]https://www.science.org/doi/10.1126/science.275.5306.1593

[4]https://prezi.com/gxadjg6gz7li/nicotine-and-the-brain-reward-system/

[5]https://youtu.be/v6VJ2RO66Ag