首页 炼丹房 帖子详情
为什么GPU比CPU快?
收藏
快速回复
炼丹房 文章新手上路 16302 106
为什么GPU比CPU快?
收藏
快速回复
炼丹房 文章新手上路 16302 106

作者:毛大闲

来源:https://mbb.eet-china.com/blog/3887969-407803.html

一、前言

  近几年深度学习在各领域大显神威,而”GPU加速"也得到了越来越多的篇幅,似乎任何程序只要放到GPU上运行那速度就是杠杠的。GPU代替CPU计算已成了大势所趋?我先告诉你结论”那是不可能滴“,然后咱们再来说说”GPU为什么比CPU快“。


二、图形处理,GPU的源起

  GPU是显卡的计算单元,就好比CPU是电脑的计算核心,有时我们直接就把GPU称为显卡。显而易见,GPU从诞生之初就是用来处理图像的。下面我们讲一个简单的例子来说明下为什么图像处理需要用到GPU,而CPU的缺点是什么。

  我们讲一个画面”立体“,其实讲的是画面中对于光影的运用,下图就是一个简单的”圆“。

  当我们给这个圆加上”光影“之后,它就变成了一个球。我们说球要比圆立体的多,这就是光影的作用。

  光影的原理很简单,你需要想象一个远处的”光“,然后在画面上模拟出光照在物体上的明暗变化,计算机中这些明暗变化都是通过”计算“得到的。编程人员只需要输入光源的距离、亮度、被照体的位置,然后通过逐步计算、光影叠加就能得到图像中每一个像素应该显示什么颜色、什么亮度,一个立体画面也就跃然纸上了。

  那么现在问题来了,假设屏幕分辨率为1920*1080,即2073600(207.36万)个像素,游戏中每个像素都需要根据光影参数来计算显示的颜色和明暗。假设一个常见的Intel I5 CPU主频为3.2GHz,即最多每秒可做32亿次运算。但这里的一次运算只是做了一次简单的二进制加减法或数据读取,一个像素的光影计算我们可以假设需要100次运算,即CPU一秒约处理3200万次像素运算,大概15张图片,用专业点的说法,这个游戏流畅度大概是每秒15帧的样子。

  可见使用CPU全力进行图形运算是有点吃力的,更何况CPU还要处理很多键盘指令、游戏后台计算等等。是CPU还不够快吗?假设现在速度翻倍,即每秒64亿次运算似乎也是不够的。其实CPU面临的主要问题是,虽然每一次光影计算都非常简单,但经不住像素太多啦,还都得排队一个一个做。然后工程师们想到“其实任何一个像素的计算与其他像素的计算结果关系不大”,那为啥不多整几个计算核心“并行”计算呢,于是GPU就出现了。

  一个典型的显卡GTX1060,主频是1.5GHz大概是Intel I5一半左右,但是它具备1280个计算核心。每个计算核心每秒可做15亿次运算,1280个核心每秒就是19200亿次运算,那一秒可以处理192亿次像素计算,大概925张图片,是CPU计算能力的61倍!但GPU的特性只能应用于图形计算这种可以并行的任务,若是做普通的串行任务其速度远远不如CPU。

 

三、核心越多越好?

  通过前面的叙述我们都知道了GPU速度“快于”CPU的奥秘在于它有很多的“核”,那能不能这样,我们给CPU也装上1000多个核,那速度岂不是快到飞起?答案是“不得行”。由于制造工艺的原因,CPU内核越多其频率也就越低。其实很容易想到,同步10个人的动作和同步1000个人的动作其难度肯定是不一样的。其次,电脑中大部分的运算都是串行的,即下一个运算要等到上一个运算完毕才能继续,这时候单次运算的速度才是最重要的。

  所以相当长时间以内,CPU+GPU的搭配才是最佳方案。

 

 四、GPU与并行计算

  深度学习与图形处理有一些相通的地方,它需要大量的数据来“训练”模型。比如一个猫图识别AI,你需要提供数以万计的猫图供其“学习”。而每一张猫图的学习又与其他猫图没有先后关系,即你可以同时并行100、1000张猫图的学习,所以GPU在深度学习领域大放异彩。

  实际上GPU编程一直是近年来的热点,作为高效程序员又怎么能不了解一二呢?CUDA是NVIDIA推出的并行计算框架,它囊括了GPU并行计算中所有你需要的组件,只需要简单安装(当然你电脑得是N卡)就可以在C代码中使用它提供的接口进行GPU编程了,当然对于非从业人员来说了解下相关知识也是极好的。

5
收藏
回复
全部评论(106)
时间顺序
thinc
#2 回复于2020-06

好久不发帖子,忘记标题带引号会被转义...

最近有在写关于图像生成的文章,大家多多关注呀!

来AI Studio互粉吧~等你哦~ https://aistudio.baidu.com/aistudio/personalcenter/thirdview/212554

0
回复
学习委员
#3 回复于2020-06

小白必备~

0
回复
w
wangwei8638
#4 回复于2020-06

GPU天生适合图像处理

0
回复
thinc
#5 回复于2020-06
小白必备~

这篇文章讲的太明白了!哈哈哈

0
回复
aaaaaa
#6 回复于2020-06

GPU的核心多,更适合并行处理图像,感觉可以再给大伙普及下目前常见的显卡

0
回复
AIStudio810258
#7 回复于2020-07
thinc #2
好久不发帖子,忘记标题带引号会被转义... 最近有在写关于图像生成的文章,大家多多关注呀! 来AI Studio互粉吧~等你哦~ https://aistudio.baidu.com/aistudio/personalcenter/thirdview/212554
展开

用 \" 会不会就不被转义了

0
回复
AIStudio810258
#8 回复于2020-07

以后AI应用普及了,GPU的主业不会就是AI算法推理了吧。当然也可能算力都在云上了。

0
回复
Fanas无敌
#9 回复于2020-07

好东西,马克了。

0
回复
Henry.coder
#10 回复于2020-07

讲的挺好的,赞一个

0
回复
尧景央月
#11 回复于2020-07

0
回复
thinc
#12 回复于2020-07

大家有什么好的资源也可以来社区分享哦~

0
回复
夜夜夜
#13 回复于2020-07

mark一下  学习

0
回复
LiuNick2000
#14 回复于2020-07

小白对于GPU和CPU的特性还是不太了解,或许有大佬再科普一下吗?

另外感觉像GPU或者CPU计算资源越来越多都会在云上,也就是云计算?将来的电脑将会是什么样子呢,有没有人愿意畅想一下hhh

0
回复
thinc
#15 回复于2020-07
小白对于GPU和CPU的特性还是不太了解,或许有大佬再科普一下吗? 另外感觉像GPU或者CPU计算资源越来越多都会在云上,也就是云计算?将来的电脑将会是什么样子呢,有没有人愿意畅想一下hhh

可以简单了解一下CPU内部构造,GPU可以看作“极端版”CPU

云计算我的理解是能够整合资源,提高利用率。就像你也有车我也有车,城市就会很堵,但大家都去坐公交车,可能高峰期排队久一点,但是路面肯定畅通不少

0
回复
何必固執丶
#16 回复于2020-07

学习到了

0
回复
夜夜夜
#17 回复于2020-07

学习一下,点赞。

0
回复
furoce
#19 回复于2020-07

马克一下

0
回复
没入门的研究生
#20 回复于2020-07

好文帮顶!!

0
回复
AIStudio810258
#21 回复于2020-07
小白对于GPU和CPU的特性还是不太了解,或许有大佬再科普一下吗? 另外感觉像GPU或者CPU计算资源越来越多都会在云上,也就是云计算?将来的电脑将会是什么样子呢,有没有人愿意畅想一下hhh

PC变成显示器,每年像交网费一样交云费

0
回复
AIStudio810258
#22 回复于2020-07
thinc #15
可以简单了解一下CPU内部构造,GPU可以看作“极端版”CPU 云计算我的理解是能够整合资源,提高利用率。就像你也有车我也有车,城市就会很堵,但大家都去坐公交车,可能高峰期排队久一点,但是路面肯定畅通不少
展开

全世界整合一下,白天我们用,晚上美国用,效率会更高

0
回复
在@后输入用户全名并按空格结束,可艾特全站任一用户