黄仁勋最新2万字演讲实录:将打破摩尔定律发布新产品,机器人时代...
①黄仁勋展示了最新量产版Blackwell芯片,并称将在2025年推出BlackwellUltraAI芯片,下一代AI平台命名为Rubin,2027年推RubinUltra,更新节奏将是“一年一次”,打破“摩尔定律”。②黄仁勋宣称英伟达推动了大语言模型诞生,其在2012年后改变了GPU架构,并将所有新技术集成在单台计算机上。③英伟达的加速计算技术帮助...
黄仁勋打破摩尔定律,要像苹果造手机一样年更GPU!最新演讲实录来了
今天,我想与大家探讨几个关键议题:1)我们共同的工作正在取得哪些进展,以及这些进展的意义何在?2)生成式人工智能到底是什么?它将如何影响我们的行业,乃至每一个行业?3)一个关于我们如何前进的蓝图,我们将如何抓住这个令人难以置信的机遇?接下来会发生什么?生成式人工智能及其带来的深远影响,我们的战略蓝图,这些...
像造iPhone一样造芯片,老黄打破摩尔定律、解决耗电难题? |【经纬...
在8年里,每一代英伟达芯片的Flops,都增长了1000倍。与此同时,摩尔定律在这8年里,却似乎逐渐失效了。即使和摩尔定律最好的时刻相比,Blackwell算力的提升也是惊人的。这将直接导致的结果,就是成本的显著下降。比如,训练一个1.8万亿参数、8万亿token的GPT-4所用的能耗,直接降至1/350!Pascal需要消耗的,是100...
英伟达“抄”苹果还是“超”苹果?黄仁勋一场价值万亿的演讲
只是问题在于,业内普遍认为,GPT-4o,甚至GPT-5的参数级应该在数十万亿以上。因此,尽管黄仁勋表示,Blackwell使得生成每个Token只需消耗0.4焦耳的能量,可从绝对值上看,每台DGXH100服务器的平均功率在11千瓦左右,每台DGXB200耗能15千瓦,而MGX的功率是100千瓦。事实上,大多数现有的数据中心尚未准备好支持每...
大模型和深度学习的硬件设计:NVIDIA首席科学家Bill Dally精彩讲座
顺便提一下,总体而言,当你考虑黄氏定律并将其与摩尔定律相比较时,摩尔定律主要与工艺技术相关。在过去十年中性能提升了1000倍,我估计其中大约2.5倍的提升是由工艺技术带来的,因为实际上每一代工艺并没有带来更多的收益。这里的流程节点是用颜色编码的,例如Hopper的黑色代表28纳米,紫色代表5纳米。但是从28纳米到5...
1克铀-235完全裂变所产生的能量,相当于多少煤所产生的能量?
答案是:83126085757.9焦耳,也就是83126.0857579兆焦(www.e993.com)2024年11月15日。这个能量相当于19.86吨TNT炸药爆炸所产生的能量(一吨TNT当量=4.184×E9焦耳)。然而好玩的事情来了!煤这个东西结构成分复杂,不同的煤燃烧后所产生的热量不一样。既然题主说的是标准煤,那么咱们就说国家标准煤吧,1千克国家标准煤燃烧释放热量为7000大卡。1大卡的...
炸弹中的摩尔定律
1945年8月7日在日本广岛上空爆炸的核弹的威力相当于1.5万吨TNT(63太焦耳),其能量有一半是冲击波,约1/3是热辐射。两天后在长崎投放的核弹的威力相当于约2.5万吨TNT(105太焦尔)。但与后来的炸弹相比,最初的这两枚炸弹只不过是小巫见大巫。1954年试验的威力最大的美国氢弹(或称核聚变炮弹)的核爆当量为1500万...
十年千倍,英伟达是怎么做到的,黄氏定律的秘方是什么
(注:1皮焦耳等于一万亿分之一焦耳,或者可以表示为10的负12次方焦耳(1pJ=10^-12J)。摩尔定律:2.5倍维持摩尔定律的进展是数十亿美元的投资、一些非常复杂的工程和一些国际折腾的主题,但它仅占英伟达GPU增长的一小部分。公司一直在使用最先进的制造技术;H100是使用台积电的N5(5纳米)工艺制造的,而该芯片工厂...
混合固体比热容的计算方式以及应用
比热容是单位质量的某种物质升单位温度所需的热量。其际单位制中的单位是焦耳每千克摄氏度(J/(kg·K)或J/(kg·℃),J是焦耳,K是热力学温标,与摄氏度℃相等),即令1千克的物质的温度上升(或下降)1摄氏度所需的能量。根据此定理,基本便可得出以下公式:...