久久久91-久久久91精品国产一区二区-久久久91精品国产一区二区三区-久久久999国产精品-久久久999久久久精品

ABB
關(guān)注中國自動化產(chǎn)業(yè)發(fā)展的先行者!
CAIAC 2025
2025工業(yè)安全大會
OICT公益講堂
當(dāng)前位置:首頁 >> 資訊 >> 行業(yè)資訊

資訊頻道

自動化所聯(lián)合清華北大提出內(nèi)生復(fù)雜性類腦網(wǎng)絡(luò) 構(gòu)建AI和神經(jīng)科學(xué)的橋梁
  • 點(diǎn)擊數(shù):1015     發(fā)布時間:2024-08-16 21:00:28
  • 分享到:
構(gòu)建更加通用的人工智能,讓模型具有更加廣泛和通用的認(rèn)知能力,是當(dāng)前人工智能(AI)領(lǐng)域發(fā)展的重要目標(biāo)。目前流行的大模型路徑是基于Scaling Law(尺度定律)去構(gòu)建更大、更深和更寬的神經(jīng)網(wǎng)絡(luò),可稱之為“基于外生復(fù)雜性”的通用智能實(shí)現(xiàn)方法。

構(gòu)建更加通用的人工智能,讓模型具有更加廣泛和通用的認(rèn)知能力,是當(dāng)前人工智能(AI)領(lǐng)域發(fā)展的重要目標(biāo)。目前流行的大模型路徑是基于Scaling Law(尺度定律)去構(gòu)建更大、更深和更寬的神經(jīng)網(wǎng)絡(luò),可稱之為“基于外生復(fù)雜性”的通用智能實(shí)現(xiàn)方法。這一路徑面臨著計(jì)算資源及能源消耗難以為繼、可解釋性不足等問題。中國科學(xué)院自動化研究所李國齊、徐波研究團(tuán)隊(duì)聯(lián)合清華大學(xué)、北京大學(xué)等借鑒大腦神經(jīng)元復(fù)雜動力學(xué)特性,提出了“基于內(nèi)生復(fù)雜性”的類腦神經(jīng)元模型構(gòu)建方法,改善了傳統(tǒng)模型通過向外拓展規(guī)模帶來的計(jì)算資源消耗問題,為有效利用神經(jīng)科學(xué)發(fā)展人工智能提供了示例。

本研究首先展示了脈沖神經(jīng)網(wǎng)絡(luò)神經(jīng)元LIF(Leaky?Integrate and Fire)模型和HH(Hodgkin-Huxley)模型[1]在動力學(xué)特性上存在等效性,進(jìn)一步從理論上證明了HH神經(jīng)元可以和四個具有特定連接結(jié)構(gòu)的時變參數(shù)LIF神經(jīng)元(tv-LIF)動力學(xué)特性等效。基于這種等效性,團(tuán)隊(duì)通過設(shè)計(jì)微架構(gòu)提升計(jì)算單元的內(nèi)生復(fù)雜性,使HH網(wǎng)絡(luò)模型能夠模擬更大規(guī)模LIF網(wǎng)絡(luò)模型的動力學(xué)特性,在更小的網(wǎng)絡(luò)架構(gòu)上實(shí)現(xiàn)與之相似的計(jì)算功能。進(jìn)一步,團(tuán)隊(duì)將由四個tv-LIF神經(jīng)元構(gòu)建的“HH模型”(tv-LIF2HH)簡化為s-LIF2HH模型,通過仿真實(shí)驗(yàn)驗(yàn)證了這種簡化模型在捕捉復(fù)雜動力學(xué)行為方面的有效性。

實(shí)驗(yàn)結(jié)果表明HH網(wǎng)絡(luò)模型和s-LIF2HH網(wǎng)絡(luò)模型在表示能力和魯棒性上具有相似的性能,驗(yàn)證了內(nèi)生復(fù)雜性模型在處理復(fù)雜任務(wù)時的有效性和可靠性。同時,研究發(fā)現(xiàn)HH網(wǎng)絡(luò)模型在計(jì)算資源消耗上更為高效,顯著減少了內(nèi)存和計(jì)算時間的使用,從而提高了整體的運(yùn)算效率。研究團(tuán)隊(duì)通過信息瓶頸理論對上述研究結(jié)果進(jìn)行了解釋。

為將神經(jīng)科學(xué)的復(fù)雜動力學(xué)特性融入人工智能,為構(gòu)筑人工智能與神經(jīng)科學(xué)的橋梁提供了新的方法和理論支持,為實(shí)際應(yīng)用中的AI模型優(yōu)化和性能提升提供了可行的解決方案。目前,研究團(tuán)隊(duì)已開展對更大規(guī)模HH網(wǎng)絡(luò),以及具備更大內(nèi)生復(fù)雜性的多分支多房室神經(jīng)元的研究,有望進(jìn)一步提升大模型計(jì)算效率與任務(wù)處理能力,實(shí)現(xiàn)在實(shí)際應(yīng)用場景中的快速落地。

該工作發(fā)表在《Nature Computational Science》,共同通訊作者是中國科學(xué)院自動化所李國齊研究員、徐波研究員,北京大學(xué)田永鴻教授。共同一作是清華大學(xué)錢學(xué)森班的本科生何林軒(自動化所實(shí)習(xí)生),數(shù)理基科班本科生徐蘊(yùn)輝(自動化所實(shí)習(xí)生),清華大學(xué)精儀系博士生何煒華和林逸晗。


論文鏈接:https://www.nature.com/articles/s43588-024-00674-9

評論鏈接:https://www.nature.com/articles/s43588-024-00677-6


[1] HH神經(jīng)元模型,全稱為Hodgkin-Huxley模型,由英國生理學(xué)家Alan Hodgkin和Andrew Huxley在1952年基于魷魚巨型軸突的電生理實(shí)驗(yàn)數(shù)據(jù)提出,用以描述神經(jīng)脈沖的產(chǎn)生和傳導(dǎo),并因此獲得了1963年的諾貝爾醫(yī)學(xué)或生理學(xué)獎。該模型是一組描述神經(jīng)元細(xì)胞膜電生理現(xiàn)象的非線性微分方程,直接反映了細(xì)胞膜上離子通道的開閉情況及其與膜電位變化之間的關(guān)系。HH模型是神經(jīng)科學(xué)領(lǐng)域中的一個重要里程碑,它首次從分子水平上解釋了動作電位的產(chǎn)生機(jī)制,為后續(xù)神經(jīng)元電生理研究奠定了基礎(chǔ)。


來源:中國科學(xué)院自動化研究所

熱點(diǎn)新聞

推薦產(chǎn)品

x
  • 在線反饋
1.我有以下需求:



2.詳細(xì)的需求:
姓名:
單位:
電話:
郵件:
主站蜘蛛池模板: 中文字幕一区二区三区精彩视频 | 国产精品杨幂va在线观看 | 国产一级特黄高清免费大片 | 黄色一级片子 | 久久99视频精品 | 黄色一级在线视频 | 黄色片一区 | 免费区一级欧美毛片 | 国产乱淫a∨片免费视频 | 国产在线观看一区 | 成人人观看的免费毛片 | 在线视频一区二区三区 | 老司机成人精品视频lsj | 国产国产成人精品久久 | 看日本真人一一级特黄毛片 | 色婷婷久久综合中文久久一本 | 美女黄视频大全 | 欧美一级毛片兔费播放 | 99久久精品免费国产一区二区三区 | 亚洲视频 在线观看 | 黄色片免费 | 亚洲综合色丁香婷婷六月图片 | 高清性色生活片久久久 | 性做爰片免费视频毛片中文ilo | 亚洲黄色片视频 | 黄色一级视频在线观看 | 亚洲精品国产第一区第二区国 | 2018高清国产一道国产 | 国产成人h综合亚洲欧美在线 | 在线成年视频免费观看 | 亚洲国产一区二区在线 | 永久免费人成网ww555kkk手机 | 一级的黄色片 | 丝袜美腿视频一区二区三区 | 国产成人精品1沈娜娜 | xxxxx大片在线观看 | 久久久久一级片 | 久久久久久亚洲精品 | 亚洲国产成人久久综合一 | 中文精品久久久久国产网址 | 黄色一级国产 |