前往小程序,Get更优阅读体验!
立即前往
首页
学习
活动
专区
工具
TVP
发布
社区首页 >专栏 >大模型与AI底层技术揭秘 (3) 圆周率里的奥秘

大模型与AI底层技术揭秘 (3) 圆周率里的奥秘

作者头像
用户8289326
发布2023-10-08 09:14:21
2530
发布2023-10-08 09:14:21
举报
文章被收录于专栏:帅云霓的技术小屋

在上一期,我们了解到简单的GPU发展史,它实际上来自3D游戏的计算需求,具备三角形投影及像素填充能力。

三角形投影是将空间的三角形投影到平面上:

有中学数学基础的同学很容易可以看出,主要涉及到的运算是三角函数运算。在计算机中,三角函数运算是如何实现的呢?

小H一时想不出思路,向方老师请教。方老师告诉小H:去看《高等数学》里面第九章,关于泰勒展开的部分。

小H找来了同济大学出版的《高等数学》,刚翻开不久,书中就飞出了几只瞌睡虫,钻进小H的鼻子……

小H恍惚回到了公元450年左右的宋代。(不是赵匡胤建立的北宋,是南北朝时期,刘裕在南方建立的刘宋)

小H见到了一位官员模样的中年人,对着地上一个圆形在沉思。片刻,他开始在圆形中绘制一个正六边形:

随即,他又在六边形的基础上,画了一个十二边形:

再画出二十四边形、四十八边形……很快,多边形就越来越接近圆了。

中年人从布包中掏出算筹,在桌上开始演算。

小H突然想起了什么,走过去问道:“您可是祖冲之先生?”

“在下正是。请问有什么事情?”

“请问,您是在计算圆周率吗?”

“何谓圆周率?”

小H正打算告诉他答案,被一记大棒敲醒:“穿越不得干涉历史进程!”

小H醒来,发现口水流到了《高等数学》的封面上。

原来,古代对圆周率的算法,实际上是求一个极限:

而三角函数的计算,则需要运用泰勒展开的方法:

这样,就可以把三角函数转换成为加减乘除了。祖冲之就是使用这种方法,仅仅利用算筹作为计算工具,就将圆周率计算到了小数点后7位,并且用两个非常容易记忆的分数作为圆周率的近似值:

约率 = 22/7 ≈ 3.142857 ≈ 3.14

密率 = 355/113 ≈ 3.1415929

实际上,利用泰勒展开的方法,还可以计算出指数函数、对数函数、反三角函数、双曲函数和反双曲函数等非幂函数,也就是将这些非加减乘除算法能计算的数学公式简化为使用加减乘除能够解决的问题。

NVidia的Geforce256 这一代GPU,相对于以Voodoo、TNT为代表的专用图形GPU,最大的改进就是,使用具有通用计算(加减乘除)能力的计算单元,代替专用的三角形计算引擎,并在指令层级实现通用计算的能力,也就是所谓的GPGPU(General Purpose GPU)。

GPGPU的实现,我们可以理解为,首先将CPU极度简化,精简掉其中大部分内存管理、IO、中断与异常处理等控制指令,仅保留大大简化的ALU(Arithmetic and Logic Unit)及所必须的控制电路,并为其提供适合并发运算的寄存器,作为GPGPU的基本运算单元。然后,将成百上千个这样的基本运算单元集成起来,实现并发计算简单重复的算法,如我们在前两期提到的卷积算法等。

与图形GPU相比,GPGPU甚至有可能精简掉大部分图形专用的功能,如光影追踪计算单元和渲染单元,甚至把连接显示器的接口都精简到,使其成为纯粹的异构计算单元,用于提供算力。

小H感叹:如果能再穿越回去一次,把GPU送给祖冲之爷爷,祖冲之爷爷能不能把圆周率计算到小数点后1万位呢?

这个问题我们下期再进行解答。

本文参与 腾讯云自媒体同步曝光计划,分享自微信公众号。
原始发表:2023-09-30 15:55,如有侵权请联系 cloudcommunity@tencent.com 删除

本文分享自 帅云霓的技术小屋 微信公众号,前往查看

如有侵权,请联系 cloudcommunity@tencent.com 删除。

本文参与 腾讯云自媒体同步曝光计划  ,欢迎热爱写作的你一起参与!

评论
登录后参与评论
0 条评论
热度
最新
推荐阅读
相关产品与服务
GPU 云服务器
GPU 云服务器(Cloud GPU Service,GPU)是提供 GPU 算力的弹性计算服务,具有超强的并行计算能力,作为 IaaS 层的尖兵利器,服务于生成式AI,自动驾驶,深度学习训练、科学计算、图形图像处理、视频编解码等场景。腾讯云随时提供触手可得的算力,有效缓解您的计算压力,提升业务效率与竞争力。
领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档