首頁 -> 電訊
中國科研人員研發出類腦脈衝大模型分享到：
      香港中通社9月8日電 據中國科學院自動化研究所9月8日消息，近日，該研究所李國齊、徐波團隊與相關單位合作，成功研發出類腦脈衝大模型“瞬悉1.0”（SpikingBrain-1.0）。
該模型基於團隊原創的“內生複雜性”理論構建，在國產GPU平台上完成了全流程訓練與推理，顯著提升了大模型高效處理極長文本或數據序列的效率和速度，展示了構建國產自主可控的新型（非Transformer）大模型架構生態的可行性。 當前主流的Transformer模型，在處理超長文章或對話時速度會非常慢且成本極高，造成了巨大的資源消耗。可以說，當前大模型的飛速發展，背後是由巨大的資源消耗驅動的。因此，亟需發展一條低功耗高效率的新型大模型路線。 與當前主流大模型架構（Transformer架構）不同，“瞬悉1.0”借鑒大腦神經元內部工作機制，清晰地展示了一條不斷提升模型複雜度和性能的新型可行路徑。該模型僅需約主流模型2%的數據量，就能在多項語言理解和推理任務中達到眾多主流模型的性能。 團隊表示，這是中國首次提出大規模類腦線性基礎模型架構，並首次在國產GPU算力集群上構建類腦脈衝大模型框架。 SpikingBrain-1.0在法律、醫學文檔分析、複雜多智能體模擬、高能粒子物理實驗、DNA序列分析、分子動力學軌跡等超長序列任務中具有顯著效率優勢，為新一代人工智能發展提供了非Transformer架構的新技術路線，並將推動低功耗神經形態計算理論和芯片設計發展。（完） 相關新聞
|
視頻更 多
中國著名指揮家任寶平香港“開課”：香港有發展合唱的潛力和先天優勢
“家鄉市集”最後一天 香港市民湧入維園瘋搶“家鄉味”
“我感到嫉妒！” 中東小哥深度遊覽大灣區後“破防了”
“阿嬤熱”來襲！這屆香港潮州節星光熠熠 現場火爆 有攤位半天賣出了百隻鹵鵝
香港特首李家超的哈薩克斯坦之行，取得這些成果
定了！《給阿嬤的情書》6月18日香港上映 市民：會二刷三刷 帶上小朋友去看
【通說環球】“鉛筆芯靠我賣”神曲背後：一座非洲百年礦山的“重生”歷程
來論更 多評論更 多
論壇更 多閱讀排行
|
