像神经元一样工作,效率堪比大脑的新型超导神经网络长什么样?

2019-07-24信息快讯网

像神经元一样工作,效率堪比大脑的新型超导神经网络长什么样?-信息快讯网

虽然与以千兆赫速度运行的现代微处理器相比,人脑的运行速度只有几赫兹,简直就像蜗牛一样,但毋庸置疑的是,人类大脑是迄今为止已知的最伟大的计算设备。

人类大脑的强大之处在于,能够同时进行每秒十亿次的计算,这种并行性使得它能够轻松地解决传统计算机尚未解决的问题,比如驾驶、行走、交谈等等。而更不可思议的是,这每秒十亿次的计算背后,大脑所需要的能量来源可能仅为一碗稀饭。相比之下,一台超级计算机所需要的电力要超过一座大城市的电力消耗,远远多于大脑几个数量级。

这就是为什么计算机科学家,一心想要使用神经网络作为计算工具,以模拟人类大脑的计算性能。但说起来容易做起来难。

虽然通过普通芯片也可以编入类似于神经网络的程序,但这需要大量的计算和能量消耗。

像神经元一样工作,效率堪比大脑的新型超导神经网络长什么样?-信息快讯网

于是,计算机科学家尝试创建人工神经元,并将它们连接成类似大脑的网络。不过一直以来,并没有人提出一个设计能够接近大脑的计算性能和运行效率。

近日,麻省理工学院的 Emily Toomey 和他的同事设计了一个由纳米线组成的超导神经元,在很多方面都更加接近一个真实的神经元。研究成果以预印本的形式发表在 arxiv.org 网站上。研究人员表示,他们的设备与大脑的能量效率相匹配(至少在理论上是这样),并且是新一代超导神经网络的基石,该超导神经网络的效率将远远高于传统的计算设备。

首先,我们了解一些背景知识。神经元以电脉冲或动作电位的形式编码信息,这些电脉冲或动作电位沿着神经纤维传播,神经元之间通过突触的结构进行彼此分隔和信号传递。一个神经元可以通过突触影响其它神经元,传递的神经信号可以激活或抑制下游神经元。

事实上,突触的存在可以使神经元之间像逻辑门一样工作,对多个输入信号产生一个输出响应。在生物神经元中,的确有许多重要的特性,比如除非输入信号超过某个阈值水平,否则信号不会激活,而且在经过一段时间(称为不应期)之前,它们不能被再次激活;此外,突起沿轴突移动的时间也很重要,因为它编码了突起已经移动的距离。

因此,人工神经元必须能够尽可能多地复制这些生物特征,而这也需要一些更复杂的电路设计。Toomey 和他的同事指出,超导纳米线具有一种特殊的非线性特性,使得它们可以像神经元一样工作。

这种特性的产生是因为当流过纳米线的电流超过某个阈值时,纳米线的超导性就会崩溃,此时电阻突然增大,产生了一个类似于神经元动作电位的电压脉冲。用这种电压脉冲来调制另一根超导纳米线产生的另一个脉冲,使得对生物神经元的模拟更加真实,相当于创造了一个具有许多生物神经元特性的简单超导电路。

研究人员也已经证明超导神经元具有触发阈值、不应期,以及可以根据电路特性进行调整的传播时间等特性。

像神经元一样工作,效率堪比大脑的新型超导神经网络长什么样?-信息快讯网

▲ 超导纳米线中的松弛振荡,是纳米线神经元中脉冲形成的基础

至关重要的是,这种超导神经元还可以用来触发或抑制其它神经元。这种“分列”属性是创建神经网络的关键,也是其它超导神经元设计从未实现的。

Toomey 和同事的计算表明,由于超导电路耗电量很小,这种超导神经网络可以与生物神经网络的效率相媲美。神经网络中每秒使用 1 瓦特能量可以执行的突触运行数量,是衡量计算性能的指标。Toomey 表示,他们提出的神经网络应该能够达到每秒每瓦特 10^14 个突触运行,与人类大脑大致相当。

“从功率和速度的角度来看,纳米线神经元可能是一项极具竞争力的技术。”他们说。当然,纳米线神经元也存在一些局限。

与大脑相比,超导神经元最大的差距就是只能连接少数其它神经元,相比之下,人类大脑中的每个神经元都与成千上万的神经元相连。而且,目前 Toomey 等人的超导神经网络还只是一个设计。尽管如此,模拟结果还是很有希望的。研究人员表示,目前的分析表明,纳米线神经元是低功耗人工神经网络发展的一个有希望的候选对象,而且潜力是巨大的。研究人员认为,超导神经网络可能成为全新计算机硬件的基础,这些芯片可以通过超导互连连接在一起,也就没有散热的问题。

“其结果将是一个大规模的神经形态处理器,它可以被训练成一个脉冲神经网络(spiking neural network),执行模式识别之类的任务或用于模拟大型生物仿真网络的脉冲动力学。”

无论如何,这是一项有趣的工作,尽管在兴奋之前还需要进行概念验证演示。

作者:王新凯
编辑:李晨琰 陈曦(实习生)
责任编辑:许琦敏

来源:麻省理工科技评论APP、DeepTech深科技

鲍琳·范德梅尔莫:基于信任的社会是一个有效率的社会
​悠闲暑假里,仍有孩子像上班族一样“打卡”!大语文等学科培训班报名火热,提前的物理、英语精读也一个不落下
习近平:结合地方实际创造性做好立法监督等工作,更好助力经济社会发展和改革攻坚任务
走进上海“最美科技工作者”④丨上海交通大学常务副校长丁奎岭:这辈子与科技的情缘断不了
“模拟大脑”来了,含800万神经元的类脑芯片系统问世
消防官员:京都动画工作室大火致13人死亡、38人受伤
死伤惨重,日本知名动画工作室“京阿尼”遭人纵火!大量原画素材被烧毁
网络女主播讨薪记……
新华时评:推动援疆工作迈上新台阶
“无论如何要给患者最后一次机会!”上海胆道疾病会诊中心网络会诊平台启用,集全国医学顶级力量
最新研究:压力会影响乳腺癌病情进展,神经疗法或可成为新的癌症治疗方法
美媒:“网红”主宰的不仅是网络文化或娱乐产业,未来还有整个社会
争做中国好网民·上海网民在行动 | 网络举报志愿者招募倡议书
国家新闻出版署约谈12家存在低俗问题的网络文学企业
头部相连、大脑互缠的一对女婴成功分离!金钱+技术+运气…这一路太不容易!
周冬雨替身大火,与本尊几乎一模一样!
沪上名医丨复旦大学附属华山医院神经外科副主任赵曜:用光热点燃病人希望
难以理解的“战斗民族” :俄罗斯人像熊一样,有一时的耐心,但没有持久的忍耐
韩国将翻拍《七月与安生》,“怪物新人”金多美担任主演
沪首张生活垃圾分类实效“成绩单”是这样诞生的!
回家!任达华微笑出院,凶手“不追究”,工作“不退休”
网络惊现“军火商”,4500元可买一把手枪
促进政府监管规范化精准化智能化,应勇主持召开市政府常务会议,部署推进“互联网+监管”工作等
奋力开创新时代退役军人工作新局面 ——以习近平同志为核心的党中央关心退役军人工作纪实
奋力开创新时代退役军人工作新局面
进博会还没开始,第一批次暗访工作已经完成
看看你家的常备药,“藿香正气水”和“藿香正气液”,原来它们不一样!
比眼镜蛇还要猛,和河豚一样毒!夏日游泳、潜水,还是海边玩耍,千万别碰这种剧毒海洋生物
沪上名医 | 上海交通大学医学院附属仁济医院神经外科主任医师邱永明:扼住癌魔的“咽喉”
眼见未必为实?原来我们的大脑有时会“欺骗”视觉
2019中国网络媒体论坛 | 网络媒体如何实现新跨越?中央网信办主任庄荣文这样说
2019中国网络媒体论坛 | 2019中国网络媒体论坛在天津举行
地球上竟然有个人和你长得一模一样……你相信吗?!
看似没用的阑尾,还和帕金森病有关?大脑的异常蛋白,胃肠道中也有
“零等待”“不停航”,船舶登记办证背后的效率之秘
新世界纪录诞生!中国科研团队首次实现20个超导量子全局纠缠
因为发现神经元细胞,两位科学家分享诺贝尔奖,却在颁奖典礼上互怼了起来……
©2014-2024 dbsqp.com