那曲檬骨新材料有限公司

0
  • 聊天消息
  • 系統消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發帖/加入社區
會員中心
創作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內不再提示

類腦計算芯片與應用、趨勢與展望

半導體產業縱橫 ? 來源:半導體產業縱橫 ? 作者:半導體產業縱橫 ? 2022-12-12 13:53 ? 次閱讀

類腦計算芯片結合微電子技術和新型神經形態器件,模仿人腦神經系統計算原理進行設計,旨在突破“馮·諾依曼瓶頸”,實現類似人腦的超低功耗和并行信息處理能力。

在今日舉辦的創新智能芯片,共筑未來航天學術會議當中,北京大學集成電路學院教授王源做了題為《類腦芯片與應用技術》的報告。王源教授主要介紹了類腦計算概述、類腦計算關鍵技術、類腦計算芯片與應用、趨勢與展望。

類腦計算概述

類腦計算(Brain-inspired Computing)又被稱為神經形態計算(Neuromorphic Computing)。是借鑒生物神經系統信息處理模式和結構的計算理論、體系結構、芯片設計以及應用模型與算法的總稱。王源教授表示人工神經網絡(ANN)是對神經網絡連接性的模擬而脈沖神經網絡(SNN)是對生物神經系統的仿生模擬,并展示了ANN與SNN的區別。

ANN的原理為計算機科學、數學;編碼方式為電平高低;神經元是非線性激活函數;學習規劃通過BP等全局學習算法;應用場景主要是圖像分類、語音識別、自然語言處理等。

SNN的原理為神經科學原理;編碼方式為脈沖時間或頻率;神經元包含內在動力學;學習規則主要是生物啟發學習算法;應用場景主要是物體追蹤等低延時應用,超低功耗應用以及類腦智能。

類腦計算關鍵技術

神經元:對從樹突接收到的時空信息進行整合,并在超過特定閾值時發放新的脈沖,通過軸突傳遞到其他神經元。準確但復雜度高的神經元模型:HH模型;較為簡化神經元模型:累積釋放(I&F)模型。

突觸:突觸是不同神經元之間的連接,支撐記憶、學習功能;記憶以突觸連接強度的形式存儲在神經網絡中。突觸連接強度能夠變化,體現為不同類型的可塑性包括短時程、長時程可塑性等,從而實現神經網絡的學習功能。

神經網絡:由神經元與突觸組成的高度互連網絡,包含約1011神經元,1015突觸。信息以脈沖形式(二值型)在生物神經網絡中傳遞,并以局域模擬的形式進行處理;支撐人腦復雜的感知、認知等功能。

7581f9a6-7950-11ed-8abf-dac502259ad0.png

發射率編碼:信息編碼在發射率r=N/T中,即在一定時間T內發放了N個脈沖。

時間編碼:信息編碼在發放脈沖的具體時間或時間間隔中。

群編碼:信息編碼在某一組神經元的行為模式中。

關鍵技術:片上網絡、片上網絡拓撲、片上網絡路由

片上網絡的四個基本組成部分:

路由節點:執行通訊任務的節點,其核心是交換開關,包括仲裁器、縱橫交換電路、輸入緩沖器等。

資源節點:執行計算任務的 IP 核,可以是同質的處理核,也可以是異質的處理器核、存儲器核、數字信號處理核等。

網絡接口:指路由節點與資源節點之間的接口,配置了網絡接口才能通過NOC與其他資源節點通訊。

通道:指路由節點與資源節點之間、路由節點與路由節點之間的連線,通道具有一定的方向性。

75a985f2-7950-11ed-8abf-dac502259ad0.png

按照路由節點的連接方式,NoC拓撲結構可分類如下:

一維結構:鏈式(Chain)、環形(Ring)等。

二維結構:網格 (Mesh)、環面 (Torus) 、多邊形、蜘蛛網形 (Spidergon) 、星形(Star)等。

高維及層次化結構:3D網格、3D環面、樹形 (Tree)、蝶形 (Butterfly) 等。

75e4ffb0-7950-11ed-8abf-dac502259ad0.png

路由設計的功能考量多種不利現象:

死鎖:數據包等待前級清空,前級又在等待更前級,依賴關系形成閉環,數據包無法路由。

活鎖:數據包持續進行路由,但就是無法到達目標地址。只出現在自適應的非最短路徑中。

饑餓:多個方向的數據包競爭輸入,優先級固定只處理一個方向,其他方向被完全堵死。

解決活鎖:僅使用最短路徑路由方案,限制錯誤路由操作數量。

解決饑餓:采用需求跟蹤的循環優先級,為低優先級適當保留帶寬。

解決死鎖:一般有死鎖預防、死鎖恢復和死鎖避免方案。

7644d12e-7950-11ed-8abf-dac502259ad0.png

關鍵技術:SNN學習算法

脈沖神經網絡學習算法分類:

ANN轉SNN離線學習:任何在ANN中能實現學習的算法,只要求能轉換到SNN。

無監督在線學習:主要包含Hebb、STDP、BCM等與突觸可塑性相關的仿生學習算法。

監督在線學習:依賴于梯度下降、突觸可塑性、脈沖卷積序列、時空反向傳播的淺層/深層學習算法。

其他在線學習:基于SNN的強化學習、半監督學習、液體狀態機學習、深度信念網絡學習等。

其中,無監督在線學習的實現方式包括:

突觸可塑性:無監督學習的理論基礎,生物可信,表征為突觸連接強度增強或抑制。

長時程增強 (LTP):NMDA受體強烈興奮,Ca2+大量內流,形成新的AMPA受體。(海馬體)

長時程抑制(LTD):NMDA受體活動處于低水平,Ca2+流量低下,AMPA受體消亡。(紋狀體)

STDP學習規則:對Hebb學習在突觸前后脈沖時間依賴可塑性上的拓展。

766d4442-7950-11ed-8abf-dac502259ad0.png

類腦計算芯片與應用

IBM TrueNorth芯片

規格指標:4096核眾核架構(64x64),每核256神經元、64K突觸(256x256)。

NoC拓撲:片內及片間擴展均為2D Mesh結構,片間傳輸速度顯著慢于片內。

路由算法:片內外均為X-Y維序路由,片內采用異步雙軌四相、片間采用異步單軌兩相協議。

近存計算:非馮·諾依曼架構,存儲與計算單元鄰近分布在各處理核,高度并行,事件驅動。路由節點:需要處理東/西/南/北/本地五個方向的數據出入,首先處理東西向,再處理南北向。路由節點內置FIFO緩存緩解擁堵饑餓,最短路徑算法避免活鎖,支持一對一發射(同時避免死鎖)

Intel Loihi芯片

規格指標:128核眾核架構 (16x8),每核含1K神經元,1M突觸,此外有3(6)個x86嵌入式處理核心。

NoC拓撲:四個核與一個路由節點構成四叉樹,路由節點之間構成2D Mesh結構,片間也是2D Mesh。

路由算法:片內及片間X-Y維序算法,純異步路由握手設計。

框架本身僅支持一對一發射,但可在源神經元處,通過復制多個一對一實現一對多發射。

Loihi芯片每個核都包含一個基于微碼操作的學習引擎,可以編程在線學習算法。

神經元模型:采用基于電流的LIF模型。

片上學習:學習引擎針對過濾的脈沖軌跡進行操作,根據歷史脈沖活動情況,隨著時間的推移改變突觸狀態變量。為適配包括STDP在內的高級學習規則,Loihi定義了多種微碼操作來滿足不同算法需求。

清華大學:Tianjic芯片

規格指標:156核眾核架構 (12x13),每核256神經元、64K突觸 (256x256)。

NoC拓撲:片內及片間擴展均為2D Mesh結構,片間采用LVDS協議進行高速傳輸 (1.05Gb/s)。

路由算法:片內外均為X-Y維序路由,片內采用異步握手協議。

可使用額外的廣播神經元和復制神經元來實現一對多發射,也可在核內執行多播判斷

北京大學:PAICore芯片

規格指標:64核眾核架構 (8x8),每核1K神經元、1M突觸 (1024x1024)。

NoC拓撲:片內及片間擴展均為2D Mesh結構,片間采用8:1Merge/Split合并或分流8個核心的數據。

路由算法:片內外均為Y-X維序路由,采用基于異步FIFO的異步握手協議。

路由地址采用絕對地址表示,比對目標地址與當前核地址是否一致。

智能芯片的發展趨勢

人腦的優勢:

超低功耗

在處理同樣復雜任務時,沒有任何人工系統能夠媲美人腦的高能效性。

學習能力

沒有任何自然/人工系統能夠像人腦一樣,具有對新環境的自適應能力、對新信息與新技能的自動獲取能力。

存算融合

神經元實現信息整合,突觸完成存儲和學習,每個神經元通過上萬突觸與其他神經元互聯,高度并行、存算一體。

高魯棒性

沒有任何系統能夠像人腦一樣,在復雜環境下有效決策并穩定工作、能夠在多處損傷情況下依然具有很好魯棒性。

智能芯片的未來發展:

計算驅動:算力和能效的持續提升推進軍事智能應用。

ANN深度學習處理器:高性能計算稠密性數據、高算力。

SNN類腦計算芯片:事件驅動型稀疏性數據、低功耗。

生物啟發:持續提升規模、復雜度探索通用智能實現方法。

審核編輯:郭婷

聲明:本文內容及配圖由入駐作者撰寫或者入駐合作網站授權轉載。文章觀點僅代表作者本人,不代表電子發燒友網立場。文章及其配圖僅供工程師學習之用,如有內容侵權或者其他違規問題,請聯系本站處理。 舉報投訴
  • 芯片
    +關注

    關注

    456

    文章

    51183

    瀏覽量

    427281
  • 計算機
    +關注

    關注

    19

    文章

    7536

    瀏覽量

    88643
  • 微電子
    +關注

    關注

    18

    文章

    388

    瀏覽量

    41283

原文標題:類腦芯片應用如何?

文章出處:【微信號:ICViews,微信公眾號:半導體產業縱橫】歡迎添加關注!文章轉載請注明出處。

收藏 人收藏

    評論

    相關推薦

    SynSense時識科技亮相CES,展現智能“芯”實力

    了一系列前沿的芯片產品,包括感存算一體動態視覺智能SoC Speck?系列、感知DVS事件相機系列以及
    的頭像 發表于 01-13 15:37 ?159次閱讀

    第三名患者成功植入馬斯克Neualink芯片

    ,該公司宣布了第二位人患者成功植入Neualink芯片的喜訊,這一消息在當時引起了廣泛的關注和討論。如今,隨著第三名患者的成功植入,Neualink在機接口領域的探索步伐進一步
    的頭像 發表于 01-13 10:14 ?133次閱讀

    risc-v芯片在電機領域的應用展望

    電機芯片以較低制程的成本實現高性能的控制,從而滿足電機控制對高精度、高穩定性和高可靠性的要求。 展望未來,RISC-V芯片在電機領域的應用將更加廣泛。隨著電動汽車、智能家居和工業自動化等領域的快速發展
    發表于 12-28 17:20

    超云與中科簽署戰略合作協議 共促AIDC建設與發展

    11月11日,超云數字技術集團有限公司(簡稱“超云”)與合肥中科智能技術有限公司(簡稱“中科”)在安徽合肥正式簽署了戰略合作協議。本次合作標志著雙方將共同致力于算力平臺建設和人
    的頭像 發表于 11-13 11:26 ?3252次閱讀
    超云與中科<b class='flag-5'>類</b><b class='flag-5'>腦</b>簽署戰略合作協議 共促AIDC建設與發展

    使用ADS1299進行電信號采集時采集不到電信號,怎么解決?

    您好!我這邊在使用ADS1299進行電信號采集時采集不到電信號,用信號發生器進行測試,能采集到0.5uV左右的正弦波,文檔中是該芯片的原理圖和電極連接方式說明,請問是否有問題?還麻煩指教,謝謝!
    發表于 11-13 06:52

    SynSense時識科技收購瑞士視覺傳感器公司iniVation 100%股權

    SynSense時識科技今日宣布成功收購瑞士視覺傳感器公司iniVation 100%股權。隨著交割完成,SynSense時識科技成為全球首個同時擁有智能領域感知與
    的頭像 發表于 07-19 18:09 ?1682次閱讀

    SynSense時識科技成功收購瑞士視覺傳感器公司iniVation,智能航母蓄勢待發

    SynSense時識科技今日宣布 成功收購瑞士視覺傳感器公司iniVation 100%股權 。隨著交割完成,SynSense時識科技成為全球首個同時擁有智能領域感知與
    發表于 07-19 18:00 ?558次閱讀
    SynSense時識科技成功收購瑞士<b class='flag-5'>類</b><b class='flag-5'>腦</b>視覺傳感器公司iniVation,<b class='flag-5'>類</b><b class='flag-5'>腦</b>智能航母蓄勢待發

    基于FPGA的計算平臺 —PYNQ 集群的無監督圖像識別計算系統

    硬件平臺 第一部分 設計概述 基金項目:國家自然科學基金“基于工作負載表征的體系結構基準測試模型與自動映射方法研究”(61972180);數學工程與先進計算國家重點實驗室開放基金
    發表于 06-25 18:35

    世界首款!又是清華:互補視覺芯片“天眸芯”

    近日,清華大學在視覺感知芯片領域取得重要突破:清華大學依托精密儀器系的計算研究中心施路平
    的頭像 發表于 06-04 08:36 ?481次閱讀
    世界首款!又是清華:<b class='flag-5'>類</b><b class='flag-5'>腦</b>互補視覺<b class='flag-5'>芯片</b>“天眸芯”

    清華視覺芯片取得重大突破,“天眸芯”登上Nature封面

    電子發燒友網報道(文/李寧遠)5月30日,來自清華大學計算研究中心團隊的互補視覺芯片“天
    的頭像 發表于 06-01 00:54 ?4871次閱讀
    清華<b class='flag-5'>類</b><b class='flag-5'>腦</b>視覺<b class='flag-5'>芯片</b>取得重大突破,“天眸芯”登上Nature封面

    基于1024通道柔性微絲電極的“北二號”智能機接口系統正式發布

    4月25日上午,2024中關村論壇正式開幕,北京腦科學與研究所(“北京所”)通過論壇發布機接口、基因治療、研究技術等一系列最新研究成果。其中,“北
    的頭像 發表于 04-29 11:10 ?927次閱讀

    DC電源模塊的發展趨勢和前景展望

    BOSHIDA ?DC電源模塊的發展趨勢和前景展望 隨著電子產品的普及和多樣化,對電源模塊的需求也越來越大。其中,DC電源模塊作為一種重要的電源供應方式,在各個領域有著廣泛的應用。在過去的幾十年
    的頭像 發表于 04-18 13:37 ?593次閱讀
    DC電源模塊的發展<b class='flag-5'>趨勢</b>和前景<b class='flag-5'>展望</b>

    黑芝麻智能展望智能汽車計算芯片趨勢

    近日,中國電動汽車百人會論壇(2024)在北京盛大召開,吸引了眾多行業內外人士的目光。在這場科技盛宴中,黑芝麻智能首席市場營銷官楊宇欣發表了主題演講,深入探討了智能汽車計算芯片發展的新趨勢,并分享了黑芝麻智能如何以“芯”力量推動
    的頭像 發表于 03-18 10:07 ?871次閱讀

    IBM芯片NorthPole實現快速高效的人工智能

    來源:《半導體芯科技》雜志文章 美國IBM公司最新推出一款芯片-NorthPole,將220億個晶體管封裝在僅800平方毫米的面積內。這款芯片將其
    的頭像 發表于 03-05 16:58 ?550次閱讀

    機接口,帶火傳感器

    來源:芯傳感,謝謝 編輯:感知芯視界 此前,馬斯克在社交媒體平臺X上宣布,人類首次實現機接口(Neuralink)芯片植入,植入者恢復良好,引發了媒體重點關注。2月2日,科技部官方網站公布我國首部
    的頭像 發表于 02-21 09:54 ?504次閱讀
    有关百家乐玩家论坛| 永利高平台网址| 百家乐官网体育直播| 百家乐园千术大全| 大发足球| 在线百家乐官网下| 516棋牌游戏加速器| 刀把状的房子做生意| 娱乐城在线| 线上百家乐官网平玩法| 六合彩| 赌百家乐的体会| 乌恰县| 海立方百家乐海立方| 五指山市| 百家乐打闲赢机会多| 申扎县| 百家乐决战推筒子| 百家乐官网傻瓜式投注法| 百家乐庄闲庄庄闲| 视频百家乐官网攻略| 老虎机小游戏| 百家乐官网群的微博| 易胜博投注| 波音百家乐网上娱乐| 百家乐官网试玩平台| 百家乐打印机破解| 百家乐官网桌手机套| 大发888加盟合作| 24山风水水口| 大发888安装需要多久| 百家乐有破解的吗| 百家乐官网是多少个庄闲| 威尼斯人娱乐城网上赌博| 广发百家乐官网的玩法技巧和规则| 百家乐官网| 南宁百家乐赌| 免费百家乐官网的玩法技巧和规则 | 二代百家乐官网破解| 财众平台| 百家乐游戏模拟|