范文健康探索娱乐情感热点
投稿投诉
热点动态
科技财经
情感日志
励志美文
娱乐时尚
游戏搞笑
探索旅游
历史星座
健康养生
美丽育儿
范文作文
教案论文

麻省理工学院可扩展光学神经网络,打破模拟计算的扩展限制

  随着机器学习模型变得越来越大、越来越复杂,它们需要更快、更节能的硬件来执行计算。传统的数字计算机正在努力跟上。
  模拟光学神经网络可以执行与数字神经网络相同的任务,例如图像分类或语音识别,但由于计算是使用光而不是电信号执行的,因此光学神经网络的运行速度可以快很多倍,同时消耗更少的能量。
  但是,这些模拟器件容易出现硬件错误,从而使计算精度降低。硬件组件中的微观缺陷是这些错误的原因之一。在具有许多连接组件的光学神经网络中,错误会迅速累积。
  即使使用纠错技术,由于构成光学神经网络的设备的基本特性,一定程度的误差也是不可避免的。一个足够大的网络可以在现实世界中实现,这将太不精确而无法有效。
  美国麻省理工学院的研究人员已经克服了这一障碍,并找到了一种有效扩展光学神经网络的方法。通过在构成网络架构的光开关中添加一个微小的硬件组件,它们甚至可以减少无法纠正的错误,否则这些错误会累积在设备中。
  他们的工作可以实现一个超快速、节能的模拟神经网络,该网络可以以与数字神经网络相同的精度运行。使用这种技术,随着光电路变大,其计算中的误差量实际上会减少。
  在模拟系统中,较大的电路应该有更高的误差,因此误差限制了可扩展性。在这里能够用明确的"是"来解决这些系统的可扩展性问题。
  光倍增
  光学神经网络由许多连接的组件组成,这些组件的功能类似于可重新编程的可调反射镜。这些可调谐镜被称为马赫-曾德尔推断仪(MZI)。神经网络数据被编码成光,光从激光发射到光学神经网络中。
  典型的MZI包含两个反射镜和两个分束器。光进入MZI的顶部,在那里它被分成两部分,在被第二个分束器重新组合之前相互干扰,然后从底部反射到阵列中的下一个MZI。研究人员可以利用这些光信号的干扰来执行复杂的线性代数运算,称为矩阵乘法,这是神经网络处理数据的方式。
  但是,随着光线从一个设备移动到下一个设备,每个MZI中可能发生的错误会迅速累积。可以通过提前识别它们并调整 MZI 来避免一些错误,以便阵列中以后的设备抵消早期的错误。
  由于MZI的基本性质,在某些情况下,无法调整设备,因此所有光都从底部端口流向下一个MZI。如果设备在每一步都损失了一小部分光,并且阵列非常大,那么到最后将只剩下一点点功率。
  即使有纠错,芯片的好坏也存在根本限制。MZI在物理上无法实现它们需要配置的某些设置。
  因此,该团队开发了一种新型MZI。研究人员在设备的末端增加了一个额外的分束器,称其为3-MZI,因为它有三个分束器而不是两个。由于这种额外的分束器混合光线的方式,MZI更容易达到通过其底部端口将所有光从外发送所需的设置。
  重要的是,额外的分束器的尺寸只有几微米,是一个无源元件,所以它不需要任何额外的布线。添加额外的分束器不会显著改变芯片的尺寸。
  更大的芯片,更少的错误
  当研究人员进行模拟以测试他们的架构时,他们发现它可以消除许多阻碍准确性的无法纠正的错误。随着光学神经网络变得越来越大,设备中的误差量实际上会下降——这与具有标准MZI的设备中发生的情况相反。
  使用3-MZI,他们有可能创造出一个足够大的设备用于商业用途,误差减少了20倍,Hamerly说。
  研究人员还开发了MZI设计的一种变体,专门用于相关误差。这些是由于制造缺陷而发生的——如果芯片的厚度略有错误,MZI 可能都偏离了大约相同的数量,因此错误都大致相同。他们找到了一种方法来更改MZI的配置,使其对这些类型的错误具有鲁棒性。这种技术还增加了光学神经网络的带宽,使其运行速度提高了三倍。
  现在他们已经使用模拟展示了这些技术,Hamerly和他的合作者计划在物理硬件上测试这些方法,并继续朝着他们可以在现实世界中有效部署的光学神经网络发展。

新疆跟团游避坑(二)第二个景点五彩滩的注意事项一五彩滩早晨或者傍晚是游览的最佳时间。在落日时分的阳光照射下,五彩滩岩石的色彩以红色为主,还有黄色紫色白色,绿色及过渡色彩,斑斓绚烂,分外妩媚。不愧为上帝东极岛旅游攻略这是第二次去东极岛了,第一次去还是六年前。东极岛其实是指三个岛,庙子湖岛,青浜岛,东福山岛。从朱家尖码头坐船直达庙子湖岛,庙子湖岛是最主要的一个岛,要出海钓鱼,看日出,环岛快艇游,十大不容错过的爱尔兰绝美景点爱尔兰是度假的好去处,也是世界上最好客的十个国家之一,在这里,你可以一边听着爱尔兰民间音乐,一边喝着当地的威士忌和啤酒,一边在古老的城堡和古老的城市绿色的土地和巨大的悬崖之间穿梭,难忘内蒙古大草原人们一提到内蒙古,眼前就会浮现天苍苍野茫茫风吹草地见牛羊的场面,其实并不是都是如此。内蒙古建设兵团有六个师团,西部14师在内蒙古的西部就看不见草原,而我们有幸下乡到内蒙古东部五师,博物馆夜间开放值得借鉴推广伏楠河南大学据光明日报报道,近期一些博物馆纷纷试行夜间开放延时开放。浙江自然博物院24小时博物馆试营业一个多月,前往体验的观众超2万人次。北京地区博物馆将开展延时开放等活动便利游客因为美,所以便盛开在心里作者杨舟1hr从永兴上高速一路急速向着康养之地穿过云华山隧道,法镜寺隧道,路过石峡当邻近茶马隧道时,我已是怦然心动沿途风景如画,领略神奇的钟神造化,突生出丹霞地貌的小华山,五台山上的法镜寺走进欧洲白鹳村德国吕赫施泰特来源环球时报环球时报驻德国特约记者王薇琪白鹳是候鸟,春夏季在温暖的欧洲生活和繁殖,秋冬季迁徙到热带地区躲避严寒。每年7月的最后一个星期六,位于德国勃兰登堡州普利尼茨地区临近易北河的露营新手常见6个问题解决干货对露营小白新手而言,遇上问题太伤脑筋。为了让大家的露营体验感直线上升,我们整理了露营新手常见的问题,全是干货,走心分享问题一露营必备哪些物品拎包入住式带上换洗衣服防蚊用品生活用品即98元的冰激淋你会买吗?有哈根达斯,你还会吃老冰棍吗?一口冰凉告别夏天98元一份的哈根达斯冰激凌你会买吗?夏末秋初,早晚已经微凉,但温度依然有点高,总想吃一口冰激淋告别夏天。最近,大家纷纷表示被雪糕刺客伤了心。网友们发出了心灵拷问,雪比吓人更恐怖的是,这些泰国恐怖片竟是真人真事说到恐怖片,日韩恐怖片是最为惊心动魄的而美国恐怖片则更多是以血腥为渲染手段。泰国也作为后起之秀,也有着众多经典恐怖电影,每一部泰国恐怖片都不是一个单纯的鬼故事,背后都有凄美的故事。花乡溜一圈,车商大哥一句兄弟,就你一人看车,今天能定吗?在花乡遛弯,看个迈腾旅行。之前帮粉丝看,后来粉丝不要了,可能是惯性思维,看到了迈腾旅行还会再多看一眼。帮忙选迈腾旅行,来怀柔看看粉丝的车,车不错绝对配得上这个价格。帮粉丝选10万元
黑色短发就一定显老吗?黑色短发为什么一定显老呢?不知题主说的是显年龄老,还是说发型老气?不管怎样,我们都可以从刘海和造型上去改变。A狗啃刘海波波头狗啃刘海,也就是如下图所示的锯齿状刘海,就好像是小孩子调无锡人早餐都爱吃什么?无锡人的一天,从一碗清鲜醇香的头汤面开始。到无锡,一定要去本地人推荐的面馆,这才是正宗的无锡味道。台港小镇面馆这家面馆坐落在南丰农贸市场旁,店面麻雀虽小,却五脏俱全。光面的品类,就每天为孩子的早餐发愁,你为孩子做了什么早餐呢?问题每天为孩子的早餐发愁,你为孩子做了什么早餐呢?孩子可以说最宝贵的财富无论是贫富贵贱均是如此。现在对还在的关注可以说前所未有的高,孩子的衣食住行健康,无论哪一样都牵动着每一个家庭皮蛋有什么利弊?皮蛋有什么利弊食用皮蛋的利弊如下1。皮蛋的优点皮蛋含有大量的蛋白质硫化物味道鲜美。食用皮蛋可以有效地促进食欲,增加肠道蠕动,也可以丰富菜肴种类。皮蛋是碱性食品,可以中和胃酸,并且有喝酒最寒酸的下酒菜是什么?据说有一老头爱喝酒,一天捉了一个蚂蚱,放火里烤烤,准备喝酒。小孙子跑过来,要吃蚂蚱,老头疼爱孙子,把蚂蚱留下一条腿作酒肴,其余的给孙子吃了。正好有事又忙起来,回来喝酒时,天都黑了。国内还有比亚洲第一滩(青岛金沙滩)更细腻更优质的沙滩吗?你好!很荣幸来回答这个问题其实有着亚洲第一滩这样美誉的海滨沙滩比比皆是,我最熟悉的就是珠海情侣路上的美丽湾。不仅它面朝大海,碧水蓝天,美丽湾在海边驿站旁边,环境好,卫生干净,沙多,从北上广深回到武汉是什么样的体验?从北上广深回到武汉是什么体验?啊!终于回武汉了,这是我去年从北京回到武汉时的第一感觉,释然。我跟你们不一样,不是户口上的武汉人,也不是什么漂,原来在武汉读书工作过几年,那时的武汉实湖南有哪些好玩的古镇?湖南省境内,有着许多独具特色的古镇旅游资源,能让游客走进历史长河,品味一段段不朽的传奇,下面就一起来探索一番吧。凤凰古城凤凰古城,位于湖南省湘西土家族苗族自治州的西南部,始建于清康移动电信联通,哪个更划算更便宜?在信号强度都很好的情况下测试!中国移动采用的是TDLET网络,实际测试速率理论峰值仅有110M。中国电信获得FDDLET(14年6月27日)和TDLET(13年12月4日)双制式网请问高人们,俄罗斯有没有芯片受制问题?是怎么解决的?俄罗斯肯定是感受到了芯片的受制的问题,也就大家常说的卡脖子的问题了。目前俄罗斯90的芯片要靠进口才能解决。可是有一个神奇的现象那就是好像从来没有听过俄罗斯人为了芯片卡脖子的问题而烦大一当兵,能考军校吗?本人曾在军队负责过士兵考学的相关工作,现在作为高校从事国防教育的老师非常高兴为你解答此问题,希望对你这个大一新生有所帮助。大学生参军入伍后具备报考军校的初步条件为什么说是初步条件呢