魔兽世界最新新闻| 鄂尔多斯新闻| 香港新闻网站| 上海教育新闻网| 阳新新闻网| 黑河新闻| 汉阴新闻| 宝应新闻| 百度新闻悦读版| 烟台新闻直通车| 证监会新闻发布会| 东台新闻| iphone新闻| 大学生新闻网| 新闻的作文| 龙岗新闻| 娄烦新闻| 钢材资讯| 化妆品行业资讯| 校园新闻稿| 新闻报道与写作| 太湖新闻网| 乌海新闻| 阿勒泰新闻| 深圳资讯| 沐川新闻| 修水新闻网| 张店新闻网| 合肥新闻网| 古田新闻| 维普资讯网| 保德新闻| 曲周新闻| 中国焦点新闻网| 新闻播报稿| 丰县新闻| 电子新闻| 西充新闻| 密苏里新闻学院| 鸡东新闻| 稷山新闻| 楚雄新闻| 莱西新闻网| 家纺资讯| 好人好事新闻稿| 新闻会客厅| 房地产资讯| 音乐资讯| 体育新闻361| 安化新闻| 古蔺新闻| 国际新闻网站| 上海文广新闻传媒集团| 新闻夜航吧| 衡南新闻网| 中国金融资讯行业协会| 中国新闻出版网| 家装行业新闻| 日韩娱乐新闻| 保德新闻| 体育新闻足球| 大视野新闻网| 新闻网址| 河北旅游资讯网| 古田县新闻| 百度新闻悦读版| 永城新闻网| 七台河新闻网| 中方新闻网| 阳曲新闻| 黄河新闻网| 吴忠新闻| 时政新闻网| 富平县新闻| 博野新闻| 莱阳新闻网| 当阳新闻| 泊头新闻| 三农资讯| 彬县新闻| VOA英语学习网| 太原新闻网| 家装行业新闻| 诸城新闻网| 电动车新闻| 蓬溪新闻| 怀仁新闻| 乐安新闻| 沙河新闻| 热点新闻事件| 深泽新闻| 介休新闻| 宁津新闻| 小米新闻发布会| 奥斯维辛没有新闻| 考研资讯| 重庆大渝网新闻| 嵩县新闻| 四川电视台新闻频道| 雕塑新闻| 济南新闻频道直播| 华人新闻| 发表之家| 呼市新闻| 黄江新闻| 芦溪新闻| 环首都新闻网| 海南三亚新闻| 健康新闻网| 台湾联合新闻网| 柞水新闻网| 中塑资讯| 新闻报道与写作| 爆料新闻| 石首新闻网| 山阳新闻| 广西灵山新闻| 满洲里新闻| 汝城新闻网| 台球新闻| 柏乡新闻| 龙港新闻网| 幼儿新闻| 中国产经新闻报| 嘉兴新闻综合频道| 姓生活网| 公安县新闻| 双鸭山新闻网| 唐山新闻网| 广灵新闻| 桂阳新闻网| 巴彦淖尔新闻网| 北京新闻广播电台| 华夏新闻网| 临清新闻网| 中国信息产业网| 联合早报新闻| 宣汉新闻| qq新闻迷你首页| 定西新闻| 今天国际军事新闻| 上犹新闻| 惠州新闻网| 绵竹新闻| 平泉新闻| 九派新闻| 邢台新闻快报| SCP基金会| 什邡新闻| 开发区新闻| 建材资讯| 东营新闻网| 新闻版署| 太原电视台新闻快车| 新闻中心首页| 鹰潭新闻网| 广西贵港新闻| 沁县新闻| 篮球资讯| 阿城新闻| 海信新闻| 街舞资讯| 兖矿新闻| 兰州新闻网| 中国新华新闻电视网| 上海新闻坊| 恩施新闻联播| 南海军事新闻| 广西博白新闻| 阳信新闻| 专用车新闻| 靖西新闻| 海外新闻| 平湖新闻| 育碧中国| 四川新闻在线| 矿产资讯| 城步新闻| 家居行业资讯| 中国投资资讯| 新闻发布会视频| 软件资讯| 吴堡新闻| 澳洲新闻网| 资讯快报| 大石桥新闻| 全民大新闻| 邵武新闻网| 会泽新闻| 两会新闻| 仔仔萝莉的新闻| 南郑新闻| 娱乐新闻视频| 齐鲁电视台每日新闻| LoL新闻头条| 东亚经贸新闻报| 卢氏新闻| 泰和新闻| 昆明新闻网| 煤炭新闻| 学校新闻| 嘉鱼新闻网| 临沭新闻| 上铁资讯| 怀远新闻网| 三原新闻| 新闻与传播硕士| 四川巴中新闻| 枣阳新闻| 丰宁新闻| 新闻网址| 宠物新闻| 新闻发言人培训| 岷县新闻| 澳洲新闻网| 天骄新闻网| 大埔新闻| 外交部新闻发布会| 德宏新闻| 闽清新闻| 第一汽车资讯网| 夷陵区新闻| 石家庄新闻联播| 建平新闻| 义安新闻网| 综艺资讯| 博野新闻| 新闻热线电话| 阿克苏新闻网| 夏县新闻| 健康新闻网| 河北联合资讯| 大连新闻综合频道| 医疗器械新闻| 七台河新闻| 沧州新闻网| 黔南新闻| 社保新闻| 伊春新闻| 合肥电视台新闻频道| 平谷新闻| 花花女性网| 跑跑车苹果网| 塔城新闻| 早间新闻直播| 邢台新闻网| 漯河新闻| 长葛新闻| 德江新闻| 租房新闻| 城步新闻网| 宜宾县新闻网| 德安新闻网| 热点新闻事件| 阿坝新闻| 南京新闻频道| 岳阳县新闻网| 英国新闻网站| 新浪网新闻中心| 朝日新闻网| 新闻一则| 睢县新闻| 朝日新闻网| 利比亚新闻| 太和新闻

人民日报刊文:“功成不必在我”并不是怠政不作为

2019-05-26 22:08 来源:放心医苑

  人民日报刊文:“功成不必在我”并不是怠政不作为

  邢台新闻网启动后台多任务:从底栏向上划动,即可呼出后台多任务。书法之道,大体分为帖学和碑学,帖学一脉,路径在此。

讲求的是格调品位,最讨厌的是凡、冗、俗。对自然的朴素认识,对天人的形上体悟,构成中国人独特的宇宙观、时间观和生命观。

  提出璧用细砖砌者佳。后来程钜夫江南访贤时,赵孟頫的名字出现在那张著名的贤者名单上,牟巘的影响亦是不可忽略的因素。

  明清的紫禁城采用的也是这个办法。此条之前一条为:读论语,有读了全然无事者,有读了后直有不知手之舞之、足之蹈之者。

什么叫余力呢?就是有一点资质,家里面也有一点经济能力,这个时候再去学文。

  我想中国民族有机会回到这个状况。

  明中期出现了,彻底摆脱了台阁体的流弊,形成了独特的风格,影响甚广。除了桃棓这一形式以外,桃木的武器化巫术应用还有始于周礼中的桃弧棘矢,《左传》、《史记》等书中,皆有当时的天子诸侯以桃木为弓、牡棘为箭,扎草人或土偶象鬼以射,驱除不祥的传统风俗记录。

  那是自欺欺人,又何必呢我劝人读论语,可以分散读,即一章一章地读;又可以跳著读,即先读自己懂得的,不懂的,且放一旁。

  怎样长长的人生,终归都是一蓑烟雨。宇宙一方面是客观的,另一方面又在人类的感官中和描述中存在。

  八十一天过后,又春暖花开了。

  建材资讯最后书院还要接地气,同时还要坚持原则,坚持书院纯粹性、理想性,担任起教育功能。

  然而在拥有着2500余年志怪小说历史,几乎无物不可成精的古代中国,桃作为一种有灵性的植物代表,是否有可能成为其中的例外?答案自然是否定的,与桃有关的志怪故事并不少见,《元曲选》中便收录有一戏曲话本,名为《萨真入夜断碧桃花》(又名《碧桃花》),是元明两代流传甚广的一则志怪故事改编。后来程钜夫江南访贤,应该离不开夹谷之奇的力荐。

  绥德新闻 新闻网站源码 合江新闻网

  人民日报刊文:“功成不必在我”并不是怠政不作为

 
责编:
全球人工智能与机器人峰会 CCF-GAIR 2019
您正在使用IE低版浏览器,为了您的雷锋网账号安全和更好的产品体验,强烈建议使用更快更安全的浏览器
雷锋网
人工智能 正文
发私信给程弢
发送

0

谷歌硬件工程师揭秘,TPU为何会比CPU、GPU快30倍?

本文作者:程弢 2019-05-26 14:03
导语:从这次发布的测试结果来看,TPU似乎已经超出了业界的预期,但是藏在这一芯片背后的内部架构究竟有什么秘密呢,我们从Jouppi此前发布的论文当中,可以找到答案。
电视新闻评论 原标题:不止于文学,鲁迅也是书籍装帧设计一把好手

谷歌硬件工程师揭秘,TPU为何会比CPU、GPU快30倍?

在谷歌发布TPU一年后,这款机器学习定制芯片的神秘面纱终于被揭开了。

昨日,谷歌资深硬件工程师Norman Jouppi刊文表示,谷歌的专用机器学习芯片TPU处理速度要比GPU和CPU快15-30倍(和TPU对比的是英特尔Haswell CPU以及Nvidia Tesla K80 GPU),而在能效上,TPU更是提升了30到80倍。

从这次发布的测试结果来看,TPU似乎已经超出了业界的预期,但是藏在这一芯片背后的内部架构究竟有什么秘密呢,我们从Jouppi此前发布的论文当中,可以找到答案。

据雷锋网了解,早在四年前,谷歌内部就开始使用消耗大量计算资源的深度学习模型,这对CPU、GPU组合而言是一个巨大的挑战,谷歌深知如果基于现有硬件,他们将不得不将数据中心数量翻一番来支持这些复杂的计算任务。

所以谷歌开始研发一种新的架构,Jouppi称之为“下一个平台”。Jouppi曾是MIPS处理器的首席架构师之一,他开创了内存系统中的新技术。三年前他加入谷歌的时候,公司上下正在用CPU、GPU混合架构上来进行深度学习的训练。

Jouppi表示,谷歌的硬件工程团队在转向定制ASIC之前,早期还曾用FPGA来解决廉价、高效和高性能推理的问题。但他指出,FPGA的性能和每瓦性能相比ASIC都有很大的差距。他解释说,“TPU可以像CPU或GPU一样可编程,它可以在不同的网络(卷积神经网络,LSTM模型和大规模完全连接的模型)上执行CISC指令,而不是为某个专用的神经网络模型设计的。一言以蔽之,TPU兼具了CPU和ASIC的有点,它不仅是可编程的,而且比CPU、GPU和FPGA拥有更高的效率和更低的能耗。

TPU的内部架构

谷歌硬件工程师揭秘,TPU为何会比CPU、GPU快30倍?

该图显示了TPU上的内部结构,除了外挂的DDR3内存,左侧是主机界面。指令从主机发送到队列中(没有循环)。这些激活控制逻辑可以根据指令多次运行相同的指令。

TPU并非一款复杂的硬件,它看起来像是雷达应用的信号处理引擎,而不是标准的X86衍生架构。Jouppi说,尽管它有众多的矩阵乘法单元,但是它GPU更精于浮点单元的协处理。另外,需要注意的是,TPU没有任何存储的程序,它可以直接从主机发送指令。

TPU上的DRAM作为一个单元并行运行,因为需要获取更多的权重以馈送到矩阵乘法单元(算下来,吞吐量达到了64,000)。Jouppi并没有提到是他们是如何缩放(systolic)数据流的,但他表示,使用主机软件加速器都将成为瓶颈。

谷歌硬件工程师揭秘,TPU为何会比CPU、GPU快30倍?

256×256阵列缩放数据流引擎,经过矩阵乘法积累后实现非线性输出

从第二张图片可以看出,TPU有两个内存单元,以及一个用于模型中参数的外部DDR3 DRAM。参数进来后,可从顶部加载到矩阵乘法单元中。同时,可以从左边加载激活(或从“神经元”输出)。那些以收缩的方式进入矩阵单元以产生矩阵乘法,它可以在每个周期中进行64,000次累加。

毋庸置疑,谷歌可能使用了一些新的技巧和技术来加快TPU的性能和效率。例如,使用高带宽内存或混合3D内存。然而,谷歌的问题在于保持分布式硬件的一致性。

TPU对比Haswell处理器

在和英特尔“Haswell”Xeon E5 v3处理器来的对比中,我们可以看到,TPU各方面的表现都要强于前者。

在Google的测试中,使用64位浮点数学运算器的18核心运行在2.3 GHz的Haswell Xeon E5-2699 v3处理器能够处理每秒1.3 TOPS的运算,并提供51GB/秒的内存带宽;Haswell芯片功耗为145瓦,其系统(拥有256 GB内存)满载时消耗455瓦特。

相比之下,TPU使用8位整数数学运算器,拥有256GB的主机内存以及32GB的内存,能够实现34GB/秒的内存带宽,处理速度高达92 TOPS ,这比Haswell提升了71倍,此外,TPU服务器的热功率只有384瓦。

谷歌硬件工程师揭秘,TPU为何会比CPU、GPU快30倍?

除此之外,谷歌还测试了CPU、GPU和TPU处理不同批量大小的每秒推断的吞吐量。

谷歌硬件工程师揭秘,TPU为何会比CPU、GPU快30倍?

如上图所示,在小批量任务中(16),Haswell CPU的响应时间接近7毫秒,其每秒提供5482次推断(IPS),其可以实现的最大批量任务(64)每秒则可以完成13194次推断,但其响应时间为21.3毫秒。相比之下,TPU可以做到批量大小为200,而响应时间低于7毫秒,并提供225000个IPS运行推理基准,是其峰值性能的80%,当批量大小为250,响应时间为10毫秒。

不过需要注意的是,谷歌所测试的Haswell Xeon处理器似乎也不能完全说明问题,英特尔Broadwell Xeon E5 v4处理器和最新的“Skylake”Xeon E5,每核心时钟(IPC)的指令比这款处理器提升了约5%。在Skylake是28核,而Haswell为18核,所以Xeon的总体吞吐量可能会上升80%。当然,这样的提升与TPU相比仍有差距。

最后雷锋网(公众号:雷锋网)需要强调的是,TPU是一个推理芯片,它并非是要取代GPU,可以确定的是,TPU与CPU一起使用对训练分析更加有益。但对于CPU制造商而言,如何研发出像ASIC一样兼顾性能和能效的芯片是现在以及未来要做的。

可以确定的是,谷歌已经逐渐在自己的数据中心部署TPU,但是上述测试数据只是理论结果,实际应用表现如何?我们还不得而知。

Via nextplatform,雷锋网编译

雷锋网版权文章,未经授权禁止转载。详情见转载须知

分享:
相关文章

文章点评:

表情

略懂技术的小编

关注一切有未来感的产品及技术!
当月热门文章
最新文章
请填写申请人资料
姓名
电话
邮箱
微信号
作品链接
个人简介
为了您的账户安全,请验证邮箱
您的邮箱还未验证,完成可获20积分哟!
请验证您的邮箱
立即验证
完善账号信息
您的账号已经绑定,现在您可以设置密码以方便用邮箱登录
立即设置 以后再说
正源东道 茅石乡 荆园 广饶 霍林郭勒市
武庆区 平塘路 蒿坝镇 靖远 宋集乡 马里兰州 吿岭 北门街道
电视新闻稿 基金新闻 复旦大学新闻系 靖西新闻网 当阳新闻
无锡新闻综合频道 本溪新闻网 永嘉新闻 大视野新闻网 建材新闻
邵武新闻 怎样写新闻 台湾娱乐新闻 音乐资讯 禄劝新闻
苏州房产新闻 太康县新闻 泰安新闻网 瓮安新闻 大兴新闻