黄仁勋:英伟达之芯
最新书摘:
-
水面初平2025-02-03英伟达之所以成功,并非因为它的电路更出众,而是因为它的软件更优秀。现如今,性能的提升中仅有一小部分来源于经典策略—在芯片中塞入更多的晶体管,毕竟摩尔定律已不再适用。而其余的性能提升,则归功于比尔•戴利、伊恩•巴克以及其他英伟达的科学家们,他们通过精妙的数值计算加速了矩阵乘法。英伟达的工程师们为GPU赋予了新的指令,这些指令犹如解开魔方的诀窍。他们采用简单却高效的数据类型取代了处理器的原生语言,这好比是从书法转变为了速记。此外,他们还从矩阵中剔除了“无效”的突触,这本质上是在神经网络中清除无用信息,类似于电影《暖暖内含光》(Eternal Sunshine of theSpotless Mind)中的记忆抹除机器。2012—2022年,英伟达在单芯片AI 推理性能上实现了惊人的千倍加速,这一成就远超摩尔定律以往的任何突破。其中,仅有2.5倍的加速来源于晶体管的增加,而高达400倍的加速则归功于英伟达的数学工具集。“说实话,AMD 也能制造出与我们相媲美的芯片,”阿尔琼•普拉布坦言,“但他们就是无法让计算速度达到这么快。”