张旭:智能时代的脑科学与类脑智能研究
2024.05.30

本文为中国科学院院士、广东省智能科学与技术研究院院长张旭受邀撰写并刊发在《中国科学院院刊》2024年第39卷第5期上的文章。全文转载如下:



智能时代的脑科学与类脑智能研究


20世纪90年代末,随着互联网的出现,人类社会步入智能时代,其标志是计算机科学和信息技术迅速 发展、互联网普及、大数据兴起、人工智能 (AI) 技术进步。智能时代是以智能科技为核心技术、智能计 算力①为代表性生产力的时代。近年来,随着计算机 算力的增加,AI技术得到了快速发展和应用,人们推 测当计算机的智能算力超过人脑的算力时,可能引发 智能科技的变革。理解人脑如何能够低能耗地进行大 规模智能计算的原理是开发下一代智能算力的源泉。 脑科学(brain science)是研究人、动物和机器的认知与智能的本质和规律的科学。人类大脑是最为复杂的 信息和智能系统,对脑感知、认知功能神经网络的解析会启迪类脑智能理论和类脑智能技术②。脑科学研 究将如何贡献于智能时代的社会发展?在智能时代, 脑科学研究正凸显它的多学科交叉研究的特征,以及学术研究与工程技术并举的特征,脑科学由此新纳入了脑机接口、类脑智能计算等研究领域[1,2] 。解析脑认知功能网络是发展类脑智能的基础。2023年,研究者 绘制了小鼠大脑的完整细胞图谱,以及较为全面的人脑和非人灵长类动物大脑图谱,脑机接口进入人体临床试验。类脑智能研究与开发是脑科学新的前沿领域。新近出现的类脑处理器单元③使构建大规模类脑智能计算系统成为可能,未来类脑超级算力极可能超过人类大脑算力,促进智能科技变革和影响人类社会发展。

1 智能时代脑科学的新领域类脑智能 

1.1 智能时代的科技内涵 

智能时代的内涵是通过机器智能的发展和应用, 推动一场以大数据为基础的技术革命,智能计算系统 能够模拟和扩展人类的智能,具备感知、理解、学习 和决策等能力。目前,计算机机器智能在语音识别、 机器翻译、文本摘要或创作及自动回答问题等领域逐 渐超越人类智能,能够处理原本只有人类才能处理的 复杂问题。人机环境系统之间的紧密协作和优势互 补,人机交互不仅仅依赖于计算机知识和数学算法, 还融合了哲学、神经科学、心理学、语言学、社会学 等学科,实现全面和综合性智能化应用,通过物联 网、大数据分析和AI等技术的融合,设备、系统和环 境更加智能互联和协同。智能技术帮助人类创新和创 造,模拟、延伸和扩展人类智能,拓展人类认知的疆 界,深刻地改变人类社会结构、生活方式和社交 模式。 智能时代的核心科技是智能科技。智能时代生产 力的特征是智能算力,超级智能计算系统 (super  intelligent computer)、智能芯片 (intelligent chip) 等 智能计算设施和器件是制造智能算力的关键技术。脑 科学及神经科学 (neuroscience)、计算机科学、数学、 普适智能计算系统、无线传感器网络、智能物联网和 区块链等智能技术,推动着新的科技革命与产业变 革。智能化设备和系统的大规模、综合性运用,构建 大型综合性智能互联和智能化管理系统,形成智能经 济和智能社会,使人类的生产和生活方式发生根本性 的改变,推动人类社会的高效和可持续发展。

1.2 类脑智能科技的内涵 

脑科学已经成为世界科技战略制高点,人类开始 描绘“智力蓝图”(intelligence blueprint),其目的是 理解认知等大脑高级功能的物质及结构基础,在防治 认知障碍性疾病的同时,建立一套脑科学的智能理论 和类脑智能科技。

狭义的类脑智能(brain-inspired intelligence)是借 鉴生物脑的感知认知行为机制和信息传递机制,构建相关类脑智能算法、模型和系统,并通过软硬件协同 实现的机器智能。狭义的类脑智能与传统的AI有较大 的区别,后者是一门结合了数学、计算机科学、心理 学等多学科理论发展起来的新技术。类脑智能计算的计算速度快、能耗少、逻辑分析和推理能力更强, 类脑智能计算机体积小。类脑智能有望对计算系统架 构、智能芯片、智能计算机、智能机器人进行颠覆性 创新,在智能时代有着广泛的应用前景。

广义的类脑智能包括类脑血管系统等生物脑的非 神经元及神经网络系统。大脑是能量消耗和热量产生 最显著的器官,大脑消耗人体20%25%的能量,安 静时大脑产热为人体产热量的16%,大脑思考时消耗 人体30%50%的能量,产热也增加。大脑血管丰富、 血流量大,思考时脑血流加快、散热增加,人体皮肤 血液循环是主要散热途径。类脑血管散热系统有助于 设计更加节能、更小体积、更为安静、更快速度和更 加智慧的类脑智能计算机系统。广义的类脑智能还包 括 正 在 兴 起 的 类 脑 组 织 工 程 (brain-like tissue  engineering),其应用多能干细胞诱导分化的方法,获 取具有大脑细胞类型及结构的类脑器官,模拟和重现 大脑的结构和功能及疾病发生过程,并探索类脑器官 的潜在医学应用,以期恢复、维持或改善损伤大脑的 功能。 因此,类脑智能的科技目标是分别在硅基和碳基 上构造类似生物脑的结构和功能/智能,并在智能芯 片、计算机、机器人、脑医学等方面加以应用。类脑 智能研究领域已成为脑科学的一部分[1] ,使传统的脑 科学研究成为从发现步入创造的一门学科,其科研成 果也呈现多种形式和类型。类脑智能也写入了《神经 科学》教科书[2] 。中国神经科学学会成立了脑机接口 与交互分会和类脑智能分会,发表了《类脑智能产业 与技术发展路线图》[3] 2022Nature发文,认为类 脑计算急需一幅宏大蓝图[4]

2 解析脑认知功能网络 

解析脑认知功能网络是最终阐明智力起源的必由 之路,同时可揭示人脑的工作原理,提升和扩展人的 智力和创造性,启发类脑智能理论和类脑智能技术。 人脑认知神经网络的功能依赖于860亿个神经元互相 联结的物理模式,大量神经元通过复杂的联结以模块 化的多层次结构来实现感知和认知功能。神经元在微 纳米尺度上通过突触连接的构架与信号传递,在百微 米尺度表现为大脑皮质功能柱等局域神经环路与信息 编码,而在宏观尺度上实现不同脑区的神经网络联结 与认知功能。值得注意的是长期以来缺乏对人脑左右 半球的推理、演绎、逻辑、数理、情感、语言、社会 认知、艺术、创造等高级功能的深入解析,以及其深 层次的信息处理机制。

对脑感知认知神经网络结构的研究主要通过对神 经元类型和神经结构连接进行系统性的普查,绘制多 尺度 (从突触到脑区到整个大脑)、多分辨率的脑图 谱 (brain atlas)。对人脑感知认知神经网络功能及机 理的研究主要通过脑形态和分子成像、脑机接口等技 术检测神经元及神经环路活动,记录大脑脑区一定时 期内较为完整的神经元动态活动,各类神经递质的存 储、释放、调制等活动过程,解析脑功能的编码与解 码机制。脑机接口正在发展生物相容性好的柔性脑机 接口系统,以及高集成度和高分辨率的脑电、脑磁信 号采集和智能化分析技术平台。通过对神经系统结构 和功能联结规律进行全面解析将最终绘制成脑功能联 结图谱(brain connectivity map)。

2023年,在美国“脑计划”和中国“脑计划”分 别支持下,小鼠大脑的完整细胞图谱,以及迄今最全 面的人脑和非人灵长类动物大脑的遗传、细胞和结构组成图谱得以绘制[5,6] 。中国科学院脑科学与智能技术 卓越创新中心及合作者开发了高精度大视场时空组学 测序技术,绘制了猕猴皮层的细胞类型、分子特征及 其空间分布图谱[7] 。北京大学开发了一系列神经肽荧 光探针,实现了对特定神经肽生物活性的实时、在 体、高效和特异性的检测,为研究神经肽在生理和病 理状态下的释放过程、调控和功能提供了重要工具[8] Musall [9] 发现了大脑皮层锥体细胞类型在决策过程 中驱动不同功能的皮质活动模式,揭示了神经元类型 特异性的皮层动力学塑造了感知决策。Stine[10] 报道 了上丘在终止积累证据、进行选择决策中起着重要作 用。Gordon [11] 在大脑运动皮层发现了“躯体感觉- 认知活动网络”。广东省智能科学与技术研究院 (以 下简称“广东省智能院”) 揭示了一条新的且不通过 丘脑的脊髓-皮层直接通路 (图1),并阐明了此通路 在痛觉调控中起重要作用,突破了躯体感觉信息必须 经由丘脑传递至大脑皮层的传统观点,建立了皮层神 经元直接接受脊髓投射神经元调控的新概念[12]

1717050190988.png

近期脑机接口技术取得了重要的进展。美国加州 大学旧金山分校通过语言脑机接口使一位18年前因脑 干中风造成的失语症患者重获语言沟通能力,实时文 本合成速率在 78 个词/分钟,错误率 25%[13] 。中国科 学院微系统与信息技术研究所、复旦大学附属华山医 院和上海脑虎科技有限公司以蚕丝蛋白材料、微机电系统 (MEMS) 等技术研制出的高通量、高密度、超 柔性的记录电极,针对柔性脑机接口植入过程中的创 伤问题,开发了一种类蚊口器仿生柔性神经探针 (图 2),能够穿透硬脑膜实现多脑区微创植入,可感知植 入过程中颅内血管的存在并提供损伤预警,并可实现 大脑神经信号的术后即时采集和长期稳定跟踪[14] 。他 们开展了单神经元记录、运动功能重建和汉语合成相 关的柔性脑机接口人体临床试验34例,在国际上率先 通过柔性脑机接口实现了癫痫患者实时多通道单神经 元放电脉冲信号记录,实现了患者实时运动解码通过 意念完成打乒乓球的电子游戏(延迟小于50毫秒,准 确率大于90%),实现了临床汉语语音语调解码与合成 (在无语言模型辅助下语音合成成功率高于90%)。

1717050312260.png

解析认知功能神经网络,将为基于神经环路的干 预措施、中枢神经系统的功能调节、神经精神疾病的 治疗提供灵感与思路。应用遗传学、分子生物学、物 理化学技术、脑机接口与交互技术研究感知与认知神 经元的发育、病变和衰老过程,以及认知障碍性疾病 病因和治疗,将引领新的诊断和治疗技术的发展和应 用,提高人类的生活质量。2023年,浙江大学发现新 型抗抑郁药物氯胺酮与其靶点 N-甲基-D-天冬氨酸 NMDA) 受体相互作用中独特的生物物理特性可能 是其发挥长效作用的关键因素,为改造氯胺酮和开发 更安全有效的新型抗抑郁药物提供了方向[15] 。中国科 学院深圳先进技术研究院提出了一种用于治疗帕金森 病的新型神经调控技术,在不影响大脑其他神经环路 的情况下对帕金森病累及的关键神经环路进行精准靶 向干预,为临床治疗提供了新策略[16] 。厦门大学发现了游离的主要组织相容性复合体I组成亚基β2-微球蛋 白是介导淀粉样蛋白毒性的关键致病因子,修正和丰 富了阿尔茨海默病(AD)淀粉样蛋白学说[17] 。我国企 业界也开始从事脑疾病基础研究和药靶研究,上海魁 特迪生物科技有限公司在 2023 年报道了人类 DNA 伤诱导性转录物 4 样转录物 (DDIT4L) 内含子保留 DIR) 与 AD 样认知障碍和淀粉样斑块形成有关[18] 未来,可以期待我国更多的企业研发机构会投入脑疾 病机理研究和诊疗技术开发。

3 开发类脑智能 

人类大脑是最为复杂的信息和智能系统,对脑认 知功能网络的理解会启迪类脑智能理论和类脑智能技 术。类脑智能研究要发展类脑智能算法、感知认知模 型和技术,目前主要体现在借助人脑信息处理机制, 用脉冲信号表示时序信息的脉冲神经网络 (SNN计算,有效地处理大量的非结构化数据,如图像、声 音和文本等。类脑智能将从“脑结构启发”向“兼顾 脑结构启发和脑功能启发”迈进,“感知”和“认知” 智能协同发展,由“专用智能”向“通用智能”转 变。目前的研究方向有:借鉴人脑存储和计算合二 为一的特点,研发存算一体计算框架和算法模型,突 破“存算墙”的限制;实现类脑器件的三维高度集 成,研制出规模化、可扩展的通用存算一体芯片和包 含多种类脑器件的融合类脑芯片;发展适用于类脑 计算的编程语言、工具和编译器;借鉴人脑自主学 习、推理演绎、涌现等高级功能机制,逐步实现机器 的感知智能、自主记忆、推理与抉择、自然语言、多 模态协同感知与社会认知等功能。在智能传感器、便 携式智能信息工具、低能耗高速度和高存储的类脑智 能芯片和计算机等智能系统支撑下,构建类脑智能物 联网,实现智能交通、智能医疗、无疆界全方位个性 化服务、智能社会管理和决策体系等新社会形态和 模式。

3.1 绿色类脑智能计算 

国际上类脑智能算法及计算系统研究得到持续进 展。2023 年,Kim [19] 提出了一种将卷积神经网络 CNNSNN 相结合的互补深度神经网络 (CDNN) 处理器,通过异构的SNNCNN处理核,利 用各自优点实现高精度低功耗的推理和训练,实现了 超高能效的类脑异构融合计算。Frenkel[20] 比较了模 拟生物神经处理系统的自下而上设计方法和为解决实 AI应用问题而设计的自上而下方法,并提出了实现 类脑系统的竞争优势所需的方法和框架。Rathi[21] 讨了基于SNN的类脑计算,通过跨学科的方法,对设 备、电路和算法进行多层优化,提供了一种端到端的 实现方式,以实现高能效的类脑计算处理。美国IBM 报道了一种大规模并行、高效能的神经推理架构Northpole,具有存算一体、主动存储和空间计算的特 点,以及协同优化、高利用率的编程模型[22]

近年来,我国在类脑计算方面不仅在基础理论上 而且在产业技术上,都走在世界前列。2023年,清华 大学报道了类脑多模态混合神经网络及通用位置识别 系统[23] ,以及一种新型的基于忆阻器神经形态芯片的 边缘学习技术[24] 。广东省智能院发布了首个以 BPU “天琴芯”和类脑晶圆芯片“天琴芯·海”为技术支 撑的类脑智能计算系统(图3)。BPU是更接近生物脑 信息处理特性的智能处理器,采用类似神经脉冲发放 传递的通信机制,支持事件驱动的大规模异步并行计 算 。 相 对 于 同 样 擅 长 并 行 计 算 的 图 形 处 理 器 GPU、张量处理器(TPU)和和神经网络处理器 NPU),BPU对于非结构化、随机排布、稀疏的数据运算具有更高的处理效率。因此:① 在算力能效上, “天琴芯”通过借鉴人脑存算一体和脉冲传导的运作 模式,突破冯·诺依曼瓶颈,消除“内存墙”和“功 耗墙”的制约,实现类脑计算“速度更快、功耗更 低”的算力突破。② 在集成技术上,“天琴芯·海” 突破了晶圆级芯片互联、封装、供电、散热等多种关 键技术,单颗晶圆芯片可支持 2 亿神经元拟态计算。 ③ 在节能减噪上,“天琴芯”系统使用无源散热系统, 借鉴人脑血管散热模式,不需要电力支持可实现计算 热量的长距离传导,为数据中心减少40%的能耗。北 京大学和广东省智能院还推出了 BrainPy 脑动力学仿 真与类脑计算通用编程框架 (图 4[25] 。它是一个功 能强大、灵活且可扩展的通用编程框架,支持脑动力 学的模拟、训练、分析等多种应用场景,实现高效的 代码执行,为类脑智能计算领域提供了一个统一的编 程框架。

1717050711450.png

3.2 类脑智能超级计算系统 

类比于动物进化的规律,随着算力的增加,智能 会加速发展。在过去数十年,摩尔定律与并行计算使 计算能力提升了百万倍,现在可能到了智能飞跃的拐 点。2017年,美国微软公司向OpenAI公司投资10亿 美元,双方在Azure云计算服务平台上构建AI超级计 算机,拟使用强大的GPU算力以实现算法上的创新, 研发通用人工智能 (AGI),2022 年发布了著名的 ChatGPTAI技术驱动的自然语言处理工具。2023 年,AI 芯片公司美国 Cerebras Systems 和总部位于阿 联酋的技术控股集团G42宣布,将携手打造一个由9 台互联的超级计算机组成的网络,该网络上的第一台 超级计算机“Condor Galaxy 1”(CG-1) 已经上线, 算力高达4 exaFLOPSCG-1与已知的GPU集群不同, 64CS-2计算机组成,每台CS-2由一个WSE-2圆芯片驱动,是目前性能最强的 AI 超级计算机。然 而,传统计算机与AI超级计算机的信号-数据转换和 高精度计算在能源和时间上产生高成本,复杂的深度 学习模型耗费惊人的高训练成本。高能耗在很大程度 上是由于冯·诺依曼架构的数字计算系统处理数据和 储存数据是在不同的地方,处理器的大部分时间和精 力都消耗在数据传输上。高能耗的现有超算系统不是 可持续发展的AI应用平台。 

1717050569122.png

人脑有860亿个神经元形成神经环路和网络,能 耗约20瓦,而相同大小的人工神经网络数字模拟的能 耗约8兆瓦。类脑智能计算技术极有可能突破传统的 超级计算机和现在的AI超级计算机所遇到的智能演化 环境天花板和高能耗天花板。2024年,澳大利亚的国际神经形态系统中心联合英特尔公司和戴尔公司将制 造一台“深南”(DeepSouth) 神经形态超级计算机, 预计在投入使用。“深南”采用高度并行化的架构, 每秒能进行228万亿次突触操作,通过计算机软件程 序和硬件设备来全面模拟人脑突触,从而对突触处理 大脑信息的方式进行建模,研究大脑工作原理。 Nature发布的“2024九大科技变革预测”中包括了欧 洲第一台超过10亿次计算的超算Jupiter、美国国家实 验室的AuroraCapitan,用于创建人类心脏和大脑数 字孪生模型、地球气候高分辨率模拟等。2024年,广 东省智能院基于创制的天琴芯系列BPU,将构建类脑 异构融合智能计算机,类脑智能算力达到全人脑神经 元规模,将是智能算力高和能效顶尖的类脑计算科研 设备。

结论与展望 

脑科学是智能时代的科技前沿。在一系列研究技 术促进下,人类大脑功能联结图谱终将被成功绘制, 脑机接口、类脑智能理论和类脑智能技术在未来数年 内将成为脑科学和脑医学研究和拓展的重要方向。我 们还可以期待类脑智能超级计算机的算力超过人类大 脑算力,类脑智能算力作为智能时代的新生产力会给 智能科技乃至人类社会带来重大变革。

在这一具有时代特征的脑科技发展历程中,我们 需要更有效地强化跨学科合作。通过国家和地方设立 的脑科学和类脑智能研究计划,开展学科交叉研究, 促进学术机构的科研人员和产业界合作研究;建立以 任务为导向的类脑智能研究机构,以及国际合作研究 网络,汇集相关学科及研究领域优秀科技人员,整合 相关的各类技术方法,进行系统性设计和集成,让集 成电路、计算机科学家和工程师、数学家、物理学 家、材料学家、分子细胞生物学家等与神经科学家有 共同的语言,在整个研究和开发过程中通力合作,将 脑启发的科学原理应用于智能计算的软件硬件设计和 制造;建立跨机构的类脑智能人才培训体系,设立相 应的硕士和博士培训计划,与相关产业密切互动合作培训高技能的技术人员。

在这一征途中我们面临着系统性挑战和发展机 遇。目前,AI算法和应用技术研究与开发已经持续了 数十年,现在各AI赋能的行业依赖于传统的大规模数 字数据分析和处理,现有的AI算力的高能耗与低效率 将阻碍智能技术的广泛应用。类脑智能研究与开发可 以提供下一代颠覆性的低碳产业技术和一系列新的智 能产业,然而,类脑智能技术及产业提升和演变还需 要长期努力,建立其发展生态。为了实现类脑智能研 究的快速发展和社会价值,我们需要建立学术研究界 与产业界密切合作的有效机制,引入政府科研经费和 商业资金,以支持脑及类脑智能科学研究,支持初创 脑科技企业、新的衍生企业和转型企业的发展。我国 将会有更多的科研机构、大学、科技企业参与脑科学 及类脑智能研究,多学科交叉和产学研合作机制正促 成我国在脑医学、类脑智能研究和开发以及相关产业 走向世界前列。

致谢 

感谢鲍岚、时颖超、环宇翔、钟帅和蔡冰提供 论文素材、参与论文内容讨论;感谢蔡冰(图 1)、陶虎 (图 2)、环宇翔/马宁/林士峰(图 3)、吴思(图 4)提供 图片。


COPYRIGHT © 2021

广东省智能科学与技术研究院版权所有

粤ICP备2021109615号 全案策划:KCCN

公众号

公众号