老黄自己卷自己!GPU要一年更新一代!预告新动作:AI工厂将吞噬一切

2024-06-03 20:52

本文主要是介绍老黄自己卷自己!GPU要一年更新一代!预告新动作:AI工厂将吞噬一切,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

站在 AI 时代风口浪尖的弄潮儿英伟达又为大家带来了一场科技饕餮盛宴

昨晚 7 点,坐标中国台湾大学体育场,英伟达 CEO 黄仁勋为世界带来了一场名为 The Dawn of a New Industrial Revolution (揭开新工业革命序幕)的演讲。

在整个演讲中,老黄重新理解了英伟达与人工智能浪潮的关系,重磅剧透了下一代的 GPU 架构,并且从英伟达一系列“新动作”出发,点明了演讲题目:“AI 时代将会驱动下一场工业革命”

  3.5研究测试:
hujiaoai.cn

4研究测试:
askmanyai.cn

Claude-3研究测试:
hiclaude3.com

从 CPU 到 GPU,老黄挑战摩尔定律

到底是 GPU 架构催生了深度学习革命,还是 AI 发展挖掘出了 GPU 的潜力?在这次演讲中,老黄丝毫不谦虚的给出了英伟达的答案:

如果没有我们精心打造的打造的各类特定领域的库,全球深度学习科学家们就无法充分利用潜力。CUDA就像OpenGL之于计算机图形学,SQL之于数据分析。

人工智能崛起之所以有可能,完全因为我们相信只要让强大的计算变得越来越便宜,总会有人找到巨大的用途。

将 AI 领域这十余年间的锋芒毕露做一个归纳,老黄将一切都归因于 GPU 的发展。伴随着需求计算量指数级的增长,CPU 性能的增长速度已经几乎被证明无法满足「计算通胀」,而真正使得目前我们可以张口闭口谈论天文级别数据量与模型规模的核心,正是来源于英伟达与它的 GPU

图片

老黄如此使用数据描述英伟达芯片过去的成绩:

过去 8 年,英伟达的芯片算力提升了 1000 倍,单位能耗降低至原来的 1/350

如果我们再贴上摩尔定律的内容:

集成电路上可以容纳的晶体管数目在大约每经过18个月到24个月便会增加一倍

图片

恐怕我们也不会惊讶于英伟达的自信:

正因为我们利用特定算法将计算边际成本降低了100万级别,今天使用互联网上的所有数据来训练大模型才成为了所有人默认合乎逻辑的选择,不再有人怀疑和质疑这个做法

One-Year-Rhythm,下一代 GPU 就在一年后?

这场发布会非常吸引人眼球的一点,来源于黄教主提出的「One-Year-Rhythm」的节奏,老黄在演讲中提到:

英伟达新的GPU架构将从两年一次迭代,加速到以一年为周期推出

这个速度非常夸张,要知道英伟达上次革新自己的 GPU 架构不是在三年前而是在三个月前的 GTC大会中推出的 Blackwell。而在仅仅三个月后,黄教主又马不停蹄的给出了新的规划:2025 年,Blackwell Ultra ——> 2026 年,Rubin ——> 2027 年,Rubin Ultra

图片

这种革新速度已经不能用「市场竞争」来形容了,作为 GPU 领域独孤求败的英伟达,现在只能和自己想象中的风车巨人进行搏斗。

而关于此,黄教主只能如是说:

我们的基本理念非常简单,我们要建立整个数据中心,再将它分解,并以一年的节奏部分卖给用户。我们将一切推向技术极限。无论是什么 TSMC 工艺,技术都会把它推向绝对极限,无论是什么封装技术,都将它推向绝对极限,无论是什么存储技术,都将它推向绝对极限,无论是网络技术,光学技术,一切都将被推向极限。

揭开新工业革命序幕

关注大模型的每一位估计都对 Token 这个词并不陌生,而在昨天,老黄给予了它一个中文翻译——词元。

图片

词元,是大模型处理一切“知识”的最小单位,Token 将不同模态的信息进行统一

当然有些词元它可能是影像,它可能是线图,可能是表格、歌曲、演讲、视讯、影片,有可能是任何形式,只要是有意义的,都算是,甚至包括蛋白质、化学分子等等。

而在这个 AI 时代,词元成为了一切的载体,老黄这样说:

几乎所有的事情都可以把它转换成Token,Token是非常有价值的。我们现在所处的不是AI时代,而是一个生成式AI时代。

黄教主将这样一个时代比喻为一个 AI 工厂,它正在生产一种「新形态的大宗商品」,这种产品每个产业都用得到,具有无与伦比的价值。这种工厂将会带来一场工业革命,为许多行业创造一种新的商品,而这种商品,正是「词元」

今年 3 月,英伟达就推出了他们的「推理即服务」产品——NVIDIA NIM,作为一个软件平台,英伟达希望通过 NIM 去简化定制和预先训练的 AI 模型在生产环境中的部署。

图片

整个 NIM 事实上是一个大的容器,这个容器里面打包优化好了各种“软件”,而这个容器可以将企业部署 AI 应用程序的时间,从几天压缩到几分钟:

这些容器,这些container里头有非常多很棒的软件。在这个容器里头有CUDA、cuDNN、TensorRT Triton,它是推理即服务,它是在云端上的一个堆叠。

图片

AI 工厂是一个基础概念,而向上,它几乎可以产生无限的可能,从数字人、物理世界到真正的 Physical AI,伴随着“AI 工厂化”转型,作为 Token 的真正意义上的“生产者”,也难怪于英伟达写出 The Dawn of a New Industrial Revolution 这样一个自负的标题了。

这篇关于老黄自己卷自己!GPU要一年更新一代!预告新动作:AI工厂将吞噬一切的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/1028088

相关文章

Ubuntu 24.04 LTS怎么关闭 Ubuntu Pro 更新提示弹窗?

《Ubuntu24.04LTS怎么关闭UbuntuPro更新提示弹窗?》Ubuntu每次开机都会弹窗提示安全更新,设置里最多只能取消自动下载,自动更新,但无法做到直接让自动更新的弹窗不出现,... 如果你正在使用 Ubuntu 24.04 LTS,可能会注意到——在使用「软件更新器」或运行 APT 命令时,

Ilya-AI分享的他在OpenAI学习到的15个提示工程技巧

Ilya(不是本人,claude AI)在社交媒体上分享了他在OpenAI学习到的15个Prompt撰写技巧。 以下是详细的内容: 提示精确化:在编写提示时,力求表达清晰准确。清楚地阐述任务需求和概念定义至关重要。例:不用"分析文本",而用"判断这段话的情感倾向:积极、消极还是中性"。 快速迭代:善于快速连续调整提示。熟练的提示工程师能够灵活地进行多轮优化。例:从"总结文章"到"用

AI绘图怎么变现?想做点副业的小白必看!

在科技飞速发展的今天,AI绘图作为一种新兴技术,不仅改变了艺术创作的方式,也为创作者提供了多种变现途径。本文将详细探讨几种常见的AI绘图变现方式,帮助创作者更好地利用这一技术实现经济收益。 更多实操教程和AI绘画工具,可以扫描下方,免费获取 定制服务:个性化的创意商机 个性化定制 AI绘图技术能够根据用户需求生成个性化的头像、壁纸、插画等作品。例如,姓氏头像在电商平台上非常受欢迎,

从去中心化到智能化:Web3如何与AI共同塑造数字生态

在数字时代的演进中,Web3和人工智能(AI)正成为塑造未来互联网的两大核心力量。Web3的去中心化理念与AI的智能化技术,正相互交织,共同推动数字生态的变革。本文将探讨Web3与AI的融合如何改变数字世界,并展望这一新兴组合如何重塑我们的在线体验。 Web3的去中心化愿景 Web3代表了互联网的第三代发展,它基于去中心化的区块链技术,旨在创建一个开放、透明且用户主导的数字生态。不同于传统

AI一键生成 PPT

AI一键生成 PPT 操作步骤 作为一名打工人,是不是经常需要制作各种PPT来分享我的生活和想法。但是,你们知道,有时候灵感来了,时间却不够用了!😩直到我发现了Kimi AI——一个能够自动生成PPT的神奇助手!🌟 什么是Kimi? 一款月之暗面科技有限公司开发的AI办公工具,帮助用户快速生成高质量的演示文稿。 无论你是职场人士、学生还是教师,Kimi都能够为你的办公文

Andrej Karpathy最新采访:认知核心模型10亿参数就够了,AI会打破教育不公的僵局

夕小瑶科技说 原创  作者 | 海野 AI圈子的红人,AI大神Andrej Karpathy,曾是OpenAI联合创始人之一,特斯拉AI总监。上一次的动态是官宣创办一家名为 Eureka Labs 的人工智能+教育公司 ,宣布将长期致力于AI原生教育。 近日,Andrej Karpathy接受了No Priors(投资博客)的采访,与硅谷知名投资人 Sara Guo 和 Elad G

poj3468(线段树成段更新模板题)

题意:包括两个操作:1、将[a.b]上的数字加上v;2、查询区间[a,b]上的和 下面的介绍是下解题思路: 首先介绍  lazy-tag思想:用一个变量记录每一个线段树节点的变化值,当这部分线段的一致性被破坏我们就将这个变化值传递给子区间,大大增加了线段树的效率。 比如现在需要对[a,b]区间值进行加c操作,那么就从根节点[1,n]开始调用update函数进行操作,如果刚好执行到一个子节点,

hdu1394(线段树点更新的应用)

题意:求一个序列经过一定的操作得到的序列的最小逆序数 这题会用到逆序数的一个性质,在0到n-1这些数字组成的乱序排列,将第一个数字A移到最后一位,得到的逆序数为res-a+(n-a-1) 知道上面的知识点后,可以用暴力来解 代码如下: #include<iostream>#include<algorithm>#include<cstring>#include<stack>#in

hdu1689(线段树成段更新)

两种操作:1、set区间[a,b]上数字为v;2、查询[ 1 , n ]上的sum 代码如下: #include<iostream>#include<algorithm>#include<cstring>#include<stack>#include<queue>#include<set>#include<map>#include<stdio.h>#include<stdl

hdu 1754 I Hate It(线段树,单点更新,区间最值)

题意是求一个线段中的最大数。 线段树的模板题,试用了一下交大的模板。效率有点略低。 代码: #include <stdio.h>#include <string.h>#define TREE_SIZE (1 << (20))//const int TREE_SIZE = 200000 + 10;int max(int a, int b){return a > b ? a :