beat365

動态新聞

通知公告 更多…
文獻薦讀 | 孫沛課題組在《Physical Review Research》發文:信息大腦如何從物理大腦中湧現?

2021-12-02

導語:我們的大腦是一個處理信息的動力學系統。數百億個神經元時刻接受内部和外部刺激,對這些信息進行編碼處理,進而形成我們對世界的認知。大腦的信息機能本質上從神經元集群活動的動力學中湧現,可是這種湧現到底是如何發生的?我們的信息大腦和物理大腦之間有什麼内在聯系?10月29日,beat365的研究團隊在 Physical Review Research 上發表的一項最新理論研究,揭示了大腦的神經動力學與信息加工屬性間的基本關系,或有助于我們理解大腦這個複雜系統中各類信息加工特性的湧現。

研究領域:神經科學,統計物理,大腦信息加工,神經動力學,集體運動,湧現

1. 動力學和信息:大腦的雙重屬性

理解大腦中信息加工機能的基礎是現代物理學的前沿之一[1]。大量的研究證明大腦可以被視為一個加工信息的複雜動力學系統[2]。一方面,作為動力學系統的大腦常受外部刺激[3-5]或内部因素[6-7]驅動而遠離平衡态,産生複雜的動力學過程。另一方面,如果這些動力學過程是由刺激驅動的,刺激的信息即在一定程度上被大腦編碼[13]和存儲[14],進而支撐各類認知過程[15-17],賦予了大腦作為信息加工系統的身份[18]。對大腦的這種雙重屬性的探索具有悠久的曆史,研究者在大腦中發現了大量的動力學和信息屬性間的關系[4,19–21],證明大腦處理外界信息的認知機能(或稱為信息機能)本質上依賴于其神經動力學。雖然單獨對大腦的動力學[8–12]或信息屬性[13–18,25,26]的研究已經取得了諸多進展,我們依然不清楚為何大腦動力學與信息屬性具有如此基礎的聯系。受到費米的大象“的啟示[51],學界希望避免局限于唯像模拟,而探索出一個解析的(analytic)理論以解釋大腦中動力學和信息的聯系(例如,見文獻[20]的探索)。在探索可能的解析理論的過程中,研究者可能遇到以下困難。一方面,研究者缺乏一個對神經活動中動力學[27]和信息屬性[28]的進行統一分析的理論。另一方面,不同于以概率論為基礎的信息屬性度量(例如互信息和 Fisher 信息[13]),對動力學屬性的主流實驗[38–40]和理論[12,41–50]刻畫方法(例如 Lyapunov 譜[49,50])多基于非概率的框架,這阻礙了對動力學和信息屬性關系的探讨。

為了在一定程度上克服上述困難并為後續探索提供可能的方向,來自beat365心理學系&beat365腦與智能實驗室以及beat365類腦計算研究所的研究團隊進行了一項探索性研究。該研究的部分結果2021年10月29日發表于物理期刊 Physical Review Research。研究者将探讨範圍限定在了神經動力學、編碼和解碼三者之間(見圖1)。作為相對基本的信息加工視角,編碼和解碼能對神經信息加工屬性進行基礎的刻畫。

圖1. 理論分析框架

2. 神經活動的随機動力學

研究者首先展示了一個基于非齊次馬爾可夫鍊的随機動力學框架。在不借助其他假設或簡化的情況下,研究者隻使用(1)神經調諧特性(neural tuning properties,即神經元的選擇性響應特性)以及(2)神經元動作電位在随機結構的神經群中的傳輸時延這兩個基本的神經系統性質,構建了随機動力學框架描述受刺激驅動的神經元集群動力學(collective dynamics)。具體例子可見圖2。


Image圖2. 受刺激驅動的神經元集群動力學

在該框架的構建過程中,研究者通過将點估計等後驗統計方法融入數學推導,克服了使用概率方法描述強耦合的神經元動力學的困難,避免引入神經元獨立性的假設,并使得該随機動力學框架能直接基于真實實驗數據進行後驗估計。為了刻畫基于随機動力學框架描述的神經活動的動力學屬性,研究者引入了KS 熵(Kolmogorov-Sinai entropy)的概念,并基于馬爾科夫鍊的性質給出了KS熵的明确表達。KS 熵可以被粗略地理解為在有限次采樣(或觀測)的條件下,觀測一個連續時間的動力系統所面臨的不确定性。基于KS熵,研究者可以在任意時刻計算神經元集群動力學中任意一個神經元的動力學分量的不确定性(dynamic randomness)。圖3展示了一個示例。

圖3. 神經動力學的KS熵及其時空分布

将KS 熵引入動力學分析的另一個重要意義在于其對混沌現象的刻畫。KS熵與另一個更常見的動力學刻畫方法——Lyapunov譜(Lyapunov spectra)——之間存在着深刻的數學聯系。具體而言,KS熵是Lyapunov譜中所有非負的Lyapunov指數之和的下界。同時,Lyapunov譜刻畫了動力系統的相空間中相鄰軌道的收斂和發散性質。當存在非負的Lyapunov指數時,動力系統在該指數對應的相空間方向上是混沌的。這意味着,通過驗證KS熵是否非零,研究者能夠判定動力系統是否存在混沌現象。KS熵越大,則可以認為混沌的程度越大。

3. 随機動力學的信息屬性

同時,研究者刻畫了神經元集群動力學的信息編碼和解碼屬性(見圖4)。在一定程度上,可以将信息編碼理解為給定刺激後,基于神經活動來表征該刺激信息的過程;可以将信息解碼理解為給定神經活動後,逆推誘發神經活動的刺激信息的過程。一般情況下,信息編碼是所有神經信息加工的起點,而信息解碼則是研究者間接分析神經信息編碼的方法。

圖4. 基于信息編碼和解碼對信息加工的分析框架

在神經科學和物理學中,學界一般使用互信息(mutual information)等相關概念刻畫信息編碼,并使用Fisher信息(Fisher information)刻畫信息解碼。一般而言,互信息可以理解為對神經活動可以編碼的刺激信息量的度量,Fisher信息可以理解為對基于神經活動可以解碼的刺激信息量的度量。研究者基于随機動力學框架給出了上述概念的時變(time-dependent)度量方法。

4. 動力學和信息屬性的基本關系

基于上述工作,研究者實現了一個以随機動力學框架為橋梁,能夠對動力學(KS熵)和信息(編碼和解碼)屬性進行統一分析的理論。由于随機動力學本身支持對兩類屬性解析的計算,而無需進行數值模拟或逼近,研究者得以對兩類屬性間的聯系進行解析的探索。在該工作中,研究者展示了4個主要的發現。研究者首先分析了與信息加工相關的神經動力學自身的特性,得到了發現1和2。相關數據可見圖3和圖5。

  • 發現1

通過理論分析和數據分析,研究者發現了神經動力學的短期變化和長期變化的随機性存在穩定的差異。神經動力學的短期變化的變化幅度較小,但動力學随機性較大;長期變化的變化幅度較大,但動力學随機性較小;

  • 發現2

同時,研究者發現了混沌現象在神經群中空間分布的不均勻性。如果研究者不控制神經元活動強度的空間分布不均勻性,會發現神經元活動混沌程度随活動強度一樣,從“淺層“向“深層“的神經元遞減(此處,“層“僅是形象的說法,真實的微觀尺度的神經群中不存在嚴格的分層結構,讀者可以自行将“淺層“和“深層“替換為“上遊“和“下遊“進行理解)。當研究者對神經元活動強度進行标準化後(排除活動強度的空間分布不均對于混沌現象的影響),會發現相對“淺層“的神經元活動更具有規律性,而相對“深層“的神經元活動的混沌程度更高。

圖5. KS熵及混沌現象在神經群中的空間分布

而後,研究者對動力學屬性與信息編碼和解碼的關系進行了探索,得到了發現3和4。具體數據可見圖 6。

  • 發現3

研究者發現特定的神經動力學可能導緻信息編碼和解碼之間互相制約的關系。具體而言,當神經動力學的随機性(或混沌程度)較低時,信息編碼和解碼的效率以及質量會随着動力學随機性上升而上升。但是,當神經動力學的随機性超過特定阈值後,信息編碼和解碼的效率及質量就不再同向變化,前者依然随着動力學随機性上升而上升,後者則随動力學随機性的上升而下降。這意味着,對于動力學随機性相對大的神經元群,其編碼和解碼的性質之間存在權衡。研究者随後對這一現象給出了理論證明。

  • 發現4

研究者還發現了神經動力學與神經元對外界刺激的表征(neural representation)之間的關系。具體而言,相對“淺層“的神經元具備更穩定的動力學特性,它們更多負責對刺激分布的局部信息進行特異化編碼和表征,而相對“深層“的神經元的動力學随機性更大,它們更多負責對刺激分布的全局信息進行非特異化(non-specific)編碼和表征。

Image

圖6. 神經活動的動力學屬性對編碼、解碼及刺激表征的影響

5. 總結與讨論

在該研究中,研究者推導了刺激驅動的神經元集群動力學的随機動力學描述。基于随機動力學,研究者一方面借助KS熵和Lyapunov譜的數學關系對神經動力學的動力學不确定性和混沌進行刻畫,另一方面直接基于概率框架給出了信息編碼和解碼屬性的時變度量方法。結合理論推導和實驗數據,研究者解析地探索神經活動的動力學和信息屬性間的關系,并發現了4個基本性質。發現1或對神經信号記錄(neural signal recording)的研究具有一定啟示。研究者已經發現時間采樣率低的信号記錄技術(例如fMRI)不能直接反映潛在的刺激驅動的神經活動[53]。在被這些低時間采樣率的技術記錄之前,短期的神經活動變化需要累積至其變化足夠強烈和魯棒[53],這伴随着神經活動信息的大量丢失[53-56]。對于這個問題,一種傳統的解決思路是盡可能開發高時間分辨率的記錄技術(例如多光子顯微鏡[67–69])。雖然發現1部分地支持這一思路,該發現也指出了獲得魯棒的神經活動信号趨勢和對神經活動信息的保持是不可兼得的。一個高時間分辨率的記錄技術能夠盡可能降低對神經活動信息的丢失,但其記錄的神經活動短期變化相較于低時間分辨率的技術,具有極高的動力學随機性及較弱的魯棒性。所以,單純提高記錄技術的時間分辨率并不能徹底解決這個問題。在對發現2的分析中,如果研究者選擇不消除神經活動強度在空間分布上的不均勻性,會觀測到神經元活動的混沌程度與神經元活動強度一樣,随着神經元活動在神經群内的傳播過程而逐漸遞減。Diesmann曾經發現神經元活動在傳播過程中存在一個吸引子[59]。在新近研究中[60],該吸引子被證實為是一個線性吸引子(line attractor)。這些研究表明神經動力學可變性會在足夠長的傳播過程中逐漸消失。研究者在更廣義的随機圖結構中證實了該現象(參考發現2)。而當研究者選擇對神經活動強度進行标準化後,發現刺激驅動的神經動力學在越“淺層”的神經元上越穩定,在越“深層“的神經元上越混沌。這一現象與關于刺激驅動對混沌現象的抑制能力(stimulus drives suppress chaos)的著名發現[61]是一緻的。研究者發現輸入驅動和刺激誘發神經元協同的确能抑制混沌。随着神經元活動的傳播,這種刺激與神經元間的協同逐漸減弱,并逐漸被網絡動力學的混沌所掩蓋。當然,這并不意味着神經元對于刺激的響應徹底變成了混沌而不可靠的。在真實的神經元群中,由神經元調諧特性(neural tuning properties)主導的規律性與由網絡動力學主導的混沌是共存的。雖然神經元活動的規律性(regularity)經常被混沌打破,但神經元活動的混沌程度并不會持續地保持或上升[例如,見圖 3(b)]。這些觀測結果與已有研究對刺激驅動的神經活動的混沌程度與可靠性的關系的探索結果一緻[62,63]。發現3或許對認知功能的神經或皮層基礎定位的研究[15,64,65]有潛在的啟示。這些研究多側重分析特定神經群、神經環路或皮層的信息加工特性。其分析首先以特定信号記錄技術(例如,多光子顯微鏡[66,67]、多電極記錄[68,69]和fMRI)對神經活動進行記錄,再從信息編碼[13,70]或解碼[71–73]的角度對神經活動進行分析。研究者指出了這類研究存在的潛在風險——從編碼或解碼角度對信息加工效率進行直接或間接的度量可能會得到不一緻甚至相反的結果(參考發現3)。例如,一方面,如果研究者從解碼的角度進行間接分析,那在編碼過程中真正高效的神經元或皮層可能因其較低的解碼效率而被忽略。另一方面,在解碼過程中相對高效的神經元或皮層常有許多不能被刺激解釋的神經活動,這給分析帶來了極大的噪音。這些潛在的風險或許會導緻功能研究中的假陰性問題和可重複性問題[74]。此外,該研究揭示了(1)在神經信号記錄過程中得到魯棒的信号趨勢和保持神經活動信息間的矛盾以及(2)在記錄的神經信号中編碼和解碼屬性可能存在的制約關系(參考發現1和3)。雖然具有高時間分辨率的記錄技術能夠捕捉高頻的神經活動變化,短期神經活動變化的高動力學随機性通常會阻礙研究者得到魯棒的神經信号并且可能導緻編碼、解碼分析結果的不一緻。時間分辨率較低的記錄技術不能捕捉高頻的神經活動,但其能夠記錄動力學随機性相對較小的神經活動并在一定程度上避免編碼、解碼分析結果的分歧。所以,一個多時間分辨率的(multitemporal-resolution recording)神經信号記錄體系[75–77]或許能兼具高時間分辨率和低時間分辨率的記錄技術的優點,并在一定程度上克服兩者的缺陷。發現4或許對認知神經科學具有一定啟示。研究者指出了“淺層“的神經元活動與刺激分布的局部信息更相關,而“深層“的神經元活動與對刺激分布全局信息的加工更相關(參考發現2和4)。在某種程度上,對于刺激分布全局信息的加工可以被理解為神經元在刺激響應過程中所具備的泛化能力。這種自發湧現的差異性指出了“淺層“神經元負責編碼局部刺激信息,而“深層“神經元負責編碼全局刺激信息的可能。這種自發形成的神經元間的分工體系或許在自下而上的(bottom-up)信息加工過程中具有重要的意義。

論文鍊接:https://doi.org/10.1103/PhysRevResearch.3.043085

聯系我們

電話:010-62780592 

郵箱:skxy@tsinghua.edu.cn

地址:北京市海澱區清華園1号

郵編:100084

Copyright© beat·365(中国)唯一官方网站 版權所有