数据大爆炸?让人焦虑的内存计算怎么克服?

2019-03-07 19:16:31 来源:EEFOCUS
标签:

 

在过去的几十年中,计算性能的提高是通过更快、更精确地处理更大数量的数据来实现的。

 

内存和存储空间现在是以千兆字节和兆字节来衡量的,而不是以千字节和兆字节。处理器操作64位而不是8位数据块。然而,半导体行业创造和收集高质量数据的能力比分析数据的能力增长得更快。

 

 

一方面,互联网和物联网正在推动数据爆炸。惠普实验室(Hewlett-Packard Labs)的研究科学家约翰·保罗·斯特拉坎(John Paul Strachan)在Leti设备研讨会(12月的IEEE电子设备会议的一个附带活动)上的一次演讲中指出,仅Facebook用户每天就产生4千兆字节(1千兆字节=1015字节)的数据。

 

通过传感器、摄像头和其他所有设备对现实的数字捕捉产生了更大的效果。一辆独立的汽车每天可以收集4 TB的数据,将来一个大城市可能会有数百万的数据。仅仅捕获这些信息并将其上传到中央数据中心所需的能量和带宽就很惊人。

 

神经网络和冯诺依曼瓶颈
同时,对大型数据集的大部分分析都属于神经网络。

神经网络的工作原理是计算矩阵的积和。将数据矩阵加载到数组中,并将每个元素乘以预定权重。在大多数情况下,结果将传递到网络的下一层并乘以一组新的权重。经过几个这样的步骤,就能得出关于数据是什么的结论。这有点像猫,可疑的行为模式,或者某种特殊的电活动。

 

在训练阶段,将网络的结论与先前已知的“正确”答案进行比较。然后,一个称为反向传播的过程使用预测值和正确值之间的差异向上或向下调整网络每个层中的每个权重。

 

从概念上讲,这种方法非常简单。但实际上,数据集很大,计算步骤也很大。ImageNet图像分类基准测试中表现最佳的是使用具有6000万个参数的8层神经网络。一次通过算法获得一个图像需要200亿次操作。

 

对于网络的每一层,现有权重和每个训练示例的元素都被加载到处理器的寄存器中,然后相乘,并将结果写回到存储器中。性能瓶颈不是计算,而是处理器和存储器阵列之间的带宽。存储器和处理器之间的这种分离是冯·诺依曼架构的定义特征之一,并且存在于几乎所有现代计算系统中。

 

大数据集,带宽受限的机器学习工作负载以及Dennard扩展的结束正在将行业基准从原始计算性能转变为计算效率。对于给定的任务,硅片面积,功耗和计算精度之间的最佳平衡是什么?

 
关注与非网微信 ( ee-focus )
限量版产业观察、行业动态、技术大餐每日推荐
享受快时代的精品慢阅读
 

 

作者简介
与非网小编
与非网小编

电子行业垂直媒体--与非网小编一枚,愿从海量行业资讯中淘得几粒金沙,与你分享!

继续阅读
创新智能系统 驱动物联产业

随着物联网产业的不断发展,科技型创新和技术建设正趋于完善,物联网与人工智能的深度融合势必带来新一轮科技革命与产业升级,对于每一个企业来说这无疑蕴含着巨大的机遇。

联想集团营收创新高,主营业务营收首次双提高

联想集团全年营业额创历史新高,达510亿美元,折合人民币3422亿元,年比年增长12.5%。实现公司权益持有人应占溢利5.97亿美元,去年同期亏损1.89亿元。

以应用带动产业,中国半导体发展还需国际合作

此次华为事件再次给中国半导体产业敲响警钟,近年我国大力发展半导体产业,但“受制于人”的局面仍然困扰着中国的半导体以及整机企业。

一文走进旺宏电子发展史

现在半导体产业界都在谈论人工智能或智能制造4.0,其实台湾旺宏电子早在20几年前就已经起步。旺宏电子董事长吴敏求曾经表示,旺宏自行研发生产控制系统「Super Nova」,基本上就是AI的概念。

物联网爆发时代,蓝牙功能介入生活,信息安全问题该如何应对?

蓝牙就像胶水一样和我们的智能设备紧密的粘在一起,这意味着一旦出现BUG,可能会引发严重的后果。

更多资讯
郭台铭:受贸易战影响,各供应链厂商将更强、更弹性

鸿海董事长郭台铭表示,因为贸易战,全球供应链将重新架构,包括工业制造供应链将在不同区域重新建立。

华为遭遇各种“打压”,这是场迟早要打的阵地战?

从目前已知的消息来看,Google暂停与华为的商业合作(禁令延迟90天实施)、英国两大主流通讯运营商EE和Vodafone相继宣布“暂停”开售华为5G手机、微软在线商店下架华为MateBook X Pro。

华为遇制裁以来最大挑战,这次关乎未来创新
华为遇制裁以来最大挑战,这次关乎未来创新

美国的出手策略似乎是由浅入深的,从芯片到系统到架构,这一次真正到了产业最最核心的部分,那就是标准协议。

ARM 为何也对华为采取禁运措施?如此现状华为又将采取怎样的措施?

日前,BBC透露,英国芯片设计公司ARM已告知员工,必须暂停和华为的业务往来。ARM要员工停止和华为及其子公司的“所有有效合同、支持权利和任何待定合作”,以遵守最近的美国贸易禁令。在一份公司备忘录中,该公司称其设计包含“美国原产技术”,虽然ARM不是美国的公司,也会受到特朗普政府禁令的影响。

三星与高通和解协议被泄露,这些材料或将需要重新密封

手机制造商三星于美国当地时间周三提交了一份紧急动议,要求修改其与芯片制造商高通(Qualcomm)达成的和解协议中“高度敏感和机密细节”。此前,该和解协议内容被“无意中”泄露。

电路方案