【长期主义】第314期智能说:黄仁勋在英伟达日本峰会上主题演讲
2024年11月13日,英伟达创始人黄仁勋,在英伟达日本峰会上发表主题演讲,聚焦英伟达如何与日本生态系统合作,推动AI革命,塑造AI驱动的未来。黄仁勋演讲后,与软银集团创始人孙正义对话,共同展望AI对日本乃至全球产业未来发展影响,宣布英伟达将与软银合作,在日本建设AI基础设施,包括拥有25艾字节算力的日本最大AI工厂。
2024年12月5日,纽约时报Youtube频道发布亚马逊创始人贝索斯专访,深入讨论对亚马逊、蓝色起源、太空探索愿景、AI与未来科技等看法。贝索斯表示,未来可将污染产业转移到太空,保护地球环境,认为AI模型在某些方面已经比人类更聪明,更擅长多学科领域。
本期长期主义,选择黄仁勋在英伟达日本峰会上主题演讲、对话孙正义,贝索斯最新访谈,瓜哥AI新知发布,六合商业研选精校,分享给大家,Enjoy!
正文:
全文30,089字
预计阅读61分钟
黄仁勋日本峰会主题演讲&对话孙正义:孙正义痛悔英伟达股票卖早、与软银合作建设25艾字节AI超算
时间:2024年11月16日
来源:瓜哥AI新知
字数:16,955
内容导读:
NVIDIA是模拟技术公司:NVIDIA核心竞争力在模拟技术,通过模拟物理、虚拟世界、智能,预测未来,构建时间机器。
日本在NVIDIA发展史上重要地位:日本是NVIDIA许多第一次发生地,例如第一个合作的游戏开发者世嘉、第一个使用CUDA构建超级计算机的机构东京工业大学、第一个采用NVIDIA移动处理器的项目任天堂Switch。
加速计算的变革:加速计算并非取代CPU,而是增强CPU能力,将计算密集型工作负载转移到GPU上,实现CPU与GPU协同工作。这是全新计算模型,需要全新算法与领域专用库。
软件2.0时代与深度学习的民主化:黄仁勋介绍软件1.0基于CPU的传统编码、与软件2.0基于GPU机器学习的区别,强调QDNN库在深度学习民主化进程中作用,使得AI与机器学习规模扩大100万倍,催生ChatGPT等应用。
多模态AI与规模定律:AI能理解与生成多种模态的数据文本、图像、视频、音频等,遵循规模定律,模型越大,数据越多,AI越智能,导致模型规模与计算资源需求的指数级增长。
推理规模定律与Blackwell系统:黄仁勋介绍推理规模定律,AI需要进行多步骤推理与规划,而非简单单步响应。Blackwell系统,作为NVIDIA最先进的AI超级计算机,拥有超高带宽与算力,能满足不断增长的计算需求。
AI智能体AI Agent与Nemo平台:黄仁勋提出AI智能体概念,比作数字员工,介绍Nemo平台提供构建AI智能体的全生命周期支持,包括数据准备、训练、微调、评估等。
物理AI Embodied AI与Omniverse平台:黄仁勋阐述物理AI,例如机器人重要性,介绍Omniverse平台,这是用于模拟物理AI的物理引擎,Isaac Lab与Groot系列工作流程,用于训练与测试机器人。
与SoftBank合作构建日本最大AI工厂:黄仁勋宣布与SoftBank合作,在日本建设拥有25艾字节算力的AI工厂,利用SoftBank网络基础设施,构建覆盖全日本的AI网络AI Grid,将AI能力扩展到各个领域。
AI的新工业革命:黄仁勋认为,AI的出现,标志着一次新工业革命,类似300年前电力带来的变革。每个公司与国家,都必须参与AI生产与应用,才能在未来保持竞争力。黄仁勋通过一系列技术突破与战略合作,描绘AI对日本乃至全球产业未来发展的深刻影响,强调NVIDIA在推动这一变革中关键作用。
黄仁勋在Nvidia日本峰会的Keynote演讲
黄仁勋:你好,日本,欢迎来到英伟达AI峰会。
你刚才看到的一切都是模拟的,没有动画。
根本上说,英伟达是家模拟技术公司,我们模拟物理、虚拟世界,模拟智能。通过我们的模拟,我们帮你预测未来。很多方面,英伟达在建造时间机器。
今天,我们将向大家介绍我们一些最新突破。最重要的是,这是一场关于日本生态系统的盛会。
我们在这里有许多合作伙伴,350家初创企业、25万名开发者、数百家公司。
我们来这里很久了,从我们公司成立之初,日本就一直对我们非常重要。
正是在日本,我们取得许多第一,许多英伟达第一次。
我们第一个游戏开发者与我们合作,是世嘉。著名3D游戏开发者铃木裕,第一次与我们合作,将世嘉令人难以置信的3D游戏,移植到英伟达GPU上。
这也是有人首次使用英伟达CUDA构建超级计算机,东京工业大学的Subame 1.2,这使得英伟达能利用我们GPU推进科学计算。
日本在很多方面都是第一。这也是我们第一次能创建移动处理器,导致我们一个非常、非常重要的项目任天堂Switch,如此多的第一次。
现在,我们正处于新时代的开端:AI革命,新的产业,非凡的技术变革。
这是令人兴奋的时代,它也非常关键。
我们来这里,是为与日本生态系统、这里令人惊叹的公司合作,将AI带到日本,以便我们能一起抓住我们面前这个非凡的机会。
今天我们有很多合作伙伴,我要感谢他们。GMO互联网集团、惠普企业、微软Azure、三井物产是白金赞助商,我要感谢你们所有人,谢谢你们。
还有56家赞助商,感谢各位光临,感谢你们支持。
英伟达发明加速计算,加速计算没有取代CPU。我们是计算领域几乎唯一不想取代CPU,而是希望增强CPU的公司,以便我们可以将计算密集型工作负载卸载到GPU上。
这些是GPU,那是CPU。
通过协同工作,我们可以利用两种处理器的最佳功能:一种非常擅长顺序处理的CPU、一种擅长并行处理的处理器GPU。
这正是加速计算,不仅是并行计算,而是加速计算,CPU与GPU协同工作。
这种计算模型,对世界是全新的。
仅使用CPU,有60年历史,从我出生后1年,1964年开始算起。
今天,我们看到世界上,绝大多数运行在计算机上的东西,都是运行在CPU上。
计算模型正在发生变化,一种根本性变化。
要做到这一点,不能仅将顺序运行的CPU软件,放在GPU上并行运行,我们必须创建很多新的算法。
正如OpenGL使计算机图形应用程序,能通过图形处理器连接到加速一样,我们必须为许多不同应用程序创建许多特定领域的库,类似OpenGL一样。
这些是我们公司拥有的350多个不同库中的一部分,一些非常重要。
cuLitho用于计算光刻,包括制作芯片掩膜,涉及许多层,可能需要数周时间。
我们将数周的计算,缩短到数小时。我们可以加快构建芯片的周期时间,非常重要的是,我们可以使光刻算法更精细发展,使我们能将半导体物理学推向远超2纳米、1纳米甚至更远,计算光刻将通过cuLitho得到加速。
其他库,包括用于稀疏求解器的QoDSS与AI Aerial,这是令人难以置信的新库,它使这台计算机能运行5G无线电堆栈,本质是在CUDA加速器上实时运行的无线电。
我们还有用于量子模拟与量子电路模拟的CUDA-Q、用于基因测序的Parabricks、用于向量存储或向量数据库的QVS用于索引与查询,这对AI至关重要,用于数值处理的cuPyNumeric。
NumPy是世界上最流行的数值处理库,有500万不同的开发人员依赖它;仅上个月,就被下载3,000万次,令人难以置信的数字,它现在已完全针对多GPU与多节点应用程序进行加速。
我们还有用于数据框处理的cuDF,它是类似SQL、pandas、polars的结构化数据处理工具。
现在针对cuOpt进行加速,速度提升数百倍。
Modulus,涉及AI物理学;然后是我们创建过最重要的库之一QDNN,用于深度神经网络,它处理深度学习堆栈的各个层。它使我们能做到一些非凡的事:通过创建QDNN,加速深度学习,我们使深度学习更加普及,过去10年中,AI与机器学习规模扩大百万倍。
机器学习规模的百万倍增长,带来ChatGPT令人难以置信的突破,AI的出现。QDNN做了一些非常特别的事,它改变了软件开发方式。
以前软件开发方式1.0,软件程序员编写代码来描述一个算法,也就是一个函数,这个函数就是软件。然后你提供输入,它预测输出。这段由人类编写的代码,在CPU上运行效果最佳。软件1.0,根本上说是关于编码的,编写在CPU上运行的软件。
软件2.0的出现,是计算机现在速度非常快。你可以为它们提供海量示例观测数据,使它们能自行学习与预测函数。我们将这种新范式称为软件2.0,它不再依赖传统编码,而是依赖机器学习。它不再是代码在CPU上运行,而是利用在GPU上运行的神经网络。
这些在GPU上运行的神经网络,代表新型操作系统的形成,一种使用现代大型语言模型的新型计算机使用方法。这种机器学习方法,已被证明具有极高可扩展性。你可以将其用于各种应用程序,包括数字化文本、语言、声音、语音、图像、视频。它本质是多模态的,你甚至可以教会它理解氨基酸序列、或任何有大量观测数据可用的东西。
第一步,理解数据的含义。仅通过研究互联网海量文本,我们就能理解单词、词汇、句法、语法,甚至通过寻找模式与关系来理解单词含义。
使用相同方法,我们现在不仅能理解不同数据类型,连接到不同模态的含义,例如,单词与图像,例如猫的文字与猫的图像现在连接在一起,学习多模态。
我们现在甚至可以进行翻译与生成,我们可以理解各种类型数据,可以生成数据。
智能信息,包含各种形式的智能。如果你看当今涌现的创新型初创企业与应用程序,你可以识别出几种关键技术组合。
例如,文本到文本的转换,可能涉及摘要、问答、文本生成、故事讲述。
类似,视频到文本技术侧重字幕,图像到文本涉及图像识别。
另一方面,文本到图像,包括像Midjourney这样图像生成工具,文本到视频包括像RunwayML这样视频创作平台。
可能性甚至更广泛,包括蛋白质描述到文本、文本到化学物质用于药物发现,甚至视频与文本在机器人技术中协同工作。
每种组合,都代表一个新行业或应用,突显令人难以置信的寒武纪创新爆发,我们才刚开始。
机器学习的一个决定性特性,是我们说的缩放定律。本质上讲,模型越大,我们提供的数据越多,AI越聪明。
有令人信服的证据表明,随着我们增加模型大小与训练数据,智能的有效性、质量、性能会显著提高。
每年,行业都会将模型大小翻一番,这需要相应增加训练数据与计算资源,通常是四倍。
推进AI所需的算力呈指数级增长,导致训练缩放定律。这个过程,包括预训练、后训练、涉及强化学习与各种形式反馈的训练。后训练中,合成数据生成的运用,带来显著扩展,产生优异的结果。
当Strawberry或OpenAI的o1发布时,它引入新颖的推理方法,类似ChatGPT的与AI的交互方法。ChatGPT是一种一次性操作,你只能提供一个问题、或提示,收到直接的答案。
思考往往超出了一次性格式,需要多步骤规划,在得出最佳答案之前,考虑各种可能的解决方案。这种反思过程,一步一步分解问题,体现一种思维链。为增强推理而开发的技术,允许更复杂的思考与规划,这在我们所说的推理缩放定律中得到体现。这不仅是生成下一个词,它强调AI思考与规划的重要性。
这2个存在的缩放定律,突出对加速计算需求。
对每一代或架构,我们通常会看到性能提升一个数量级,将功耗与成本降低相同倍数,提高性能、与降低成本与能耗是一致的。
随着社会继续采用与集成AI,我们集体使命是快速提高性能,扩大AI覆盖范围与有效性,降低成本与功耗。这种持续的演变,促使我们采用1年一度的新进展周期。
值得注意的是,AI挑战并非仅是基于硬件,这些AI系统规模巨大。
Blackwell系统为例,Blackwell指的是GPU与整体系统,GPU本身非常出色。它具有2个Blackwell芯片,每个芯片都是有史以来生产的最大芯片,拥有惊人的1,040亿个晶体管,由台积电使用最先进的4纳米工艺制造。
2个Blackwell芯片,通过低能耗链路进行通信,带宽高达10 terabytes每秒,这对系统的性能至关重要。这种配置,象征着维持AI进步所需的巨大规模与复杂性。
2个芯片之间有数千个互连,带宽为10 terabytes每秒。它连接来自SK海力士与美光的8个HBM3E内存,这些内存的运行速度,都为8 terabytes每秒。这2个GPU,通过另一个非常低功耗、非常节能的SERDES连接到CPU,带宽为1 terabyte每秒。
SERDES,是Serializer/Deserializer缩写,中文译为串行器/解串器。它是一种将并行数据转换为串行数据进行传输,并在接收端再将串行数据转换为并行数据的电路。
SERDES就像数据转换器,它能高效处理高速数据传输,常用于需要长距离或高速率数据传输的应用场合,例如高速网络、数据中心互联、高性能计算等领域。SERDES核心功能,在于提高数据传输速率与减少传输线数。
每个GPU,通过NVLink以1.8 terabytes每秒速度连接。这是每秒大量terabytes。之所以需要这么高带宽,是这个系统无法单独工作。
即使是有史以来最先进的计算机,也无法独立执行AI任务。它通常需要与数千台其他计算机协同工作,作为一个统一系统运行。
有时,它们必须单独运行,以响应不同客户或查询。操作可以是协调一致的,也可以是独立的。
为使GPU能作为有凝聚力的单元工作,我们使用网络系统,包括2个CX7,它们将这个GPU与数千个其他GPU连接起来。
NVLink至关重要,它允许我们将一个机架中多个GPU连接起来,这个机架就在我身后。
这个机架,通过NVLink以1.8 terabytes每秒速度连接,提供的带宽是全球最高带宽网络的35倍。此功能,使我们可以将所有这些GPU连接到NVLink交换机。
每个机架中有9个NVLink交换机,每个机架包含72台计算机,所有这些计算机都通过NVLink主干互连,这种复杂的设置,能提供高级AI应用程序所需的强大算力。
这是电缆,铜线,50磅重的铜线,由这款令人难以置信的SERDES,我们称之为NVLink的令人难以置信的I/O直接驱动。
它们这样连接到计算机,连接到NVLink。这个交换机,将所有这些计算机连接在一起,作为一个整体。
结果是72台这样计算机连接在一起,构成大型GPU,极其庞大的GPU。软件角度看,它就是巨大的整体,这些机架,这些NVLink,
72个系统,这个机架,这个机架重达3,000磅。它不可能搬到舞台上来;否则,我会给你们展示的。
它重3,000磅,功率120千瓦。
我朋友们都在这里,相当于很多、很多个任天堂Switch的功率,它不可移动,非常强大。
这是Blackwell系统,我们设计它可以配置成像这样的大型集群,或者配置成拥有成千上万、甚至数十万个节点的巨大数据中心。它们通过这些交换机连接,一些是量子InfiniBand交换机。
如果你想要一个专用的AI工厂、或NVIDIA Spectrum X革命性的以太网系统,你可以将其集成到你现有以太网环境中,我们可以用这些构建AI超级计算机。
我们可以将它们集成到企业数据中心、超大规模数据中心,或将它们配置到边缘。Blackwell系统不仅功能强大,适应性极强,可以融入世界各地计算基础设施的各个角落,这就是Blackwell系统。
Blackwell系统顶部是计算机,最重要的是,如果没有在其上运行的所有软件,这台计算机根本无法运行。
当你看到这些带有所有液冷装置与所有布线的计算机时,你会感到震惊。
你如何编程这样一个令人难以置信的计算机?这就是NVIDIA软件堆栈发挥作用的地方。这涵盖我们在CUDA、Nickel、Megatron内核方面所有努力,我们多年来创建所有软件,例如Tensor RTLM与Triton。所有这些集成到系统中的软件,使得每个人都可以部署世界各地的AI超级计算机。
在顶部,我们有AI软件,使人们可以轻松构建AI。
问题出现了:什么是AI?
我们以许多不同方式谈论AI,我认为有两种类型AI将非常流行。
我认为有两种思维模型非常有用,对我来说非常有用。
第一种,是数字AI工作者。这些AI工作者,可以理解、计划、采取行动。有时会要求数字AI工作者执行营销活动、支持客户、提出制造供应链计划、优化芯片、帮我们编写软件。
也许是一个研究助理,一个药物研发行业的实验室助理。也许这个AI Agent,你知道,是CEO的导师。也许所有员工,都有一个导师。这些AI,这些数字AI工作者,我们称它们为AI Agent,就像数字员工。
就像数字员工一样,你必须培训他们。你必须创建数据,以欢迎他们加入你的公司,并向他们介绍你的公司。
根据你希望他们发挥的作用,你会培训他们掌握特定技能。培训完成后,你会对他们进行评估,确保他们学习应该学习的内容。
你会对他们进行限制,确保他们完成被要求做的工作,而不是没有被要求做的工作。
你会操作它们,部署它们,从Blackwell为它们提供能量,Blackwell的AI Token。他们与其他AI Agent互动,作为一个团队协作解决问题。
你将看到各种各样AI Agent,我们创建几样东西,使生态系统更易为公司构建AI Agent。NVIDIA不从事服务业务,我们不创建;我们不提供最终产品,我们不提供解决方案。
我们提供使生态系统能创建AI、交付AI、持续改进AI的赋能技术,AI Agent生命周期平台称为Nemo。
Nemo为我提到的每个阶段都提供库,从数据管理、到训练、到微调、到合成数据生成、到评估、到防护,这些库集成到世界各地工作流程与框架中。
我们正在与Accenture、Deloitte等AI初创公司与服务提供商、全球公司合作,将其带给所有大型组织。
我们与ServiceNow等独立软件供应商ISV合作,使他们能创建利用其平台的AI Agent。
目前,用户通过许可平台与ServiceNow互动,允许员工与之互动以寻求帮助。
将来,ServiceNow还将提供广泛的AI Agent,公司可以租赁AI Agent,是旨在帮助解决各种问题的数字员工。
我们与ServiceNow的合作,扩展到SAP、Cadence、Ansys、Snowflake等其他主要公司,我们目标是开发能显著提高组织内生产力的AI Agent。
这些AI Agent,拥有理解、推理、规划、采取行动的能力。它们不是单个AI模型,而是AI模型集合或系统。
Nemo在构建这些复杂的系统方面,发挥至关重要的作用。我们创建预训练的AI模型,打包为NIM,它们是提供AI功能的微服务。
与过去软件打包在盒子里,并在CD-ROM上交付不同,今天的AI封装,在能进行智能交互的微服务中。
你可以与该软件对话,它理解你的意思,可以与其他软件或AI互连,最终促进AI Agent创建,这构成这些AI Agent运行方式的基础。
让我举一些这些AI Agent的例子。
代理式AI正在改变每个企业,它使用复杂的推理、迭代规划,来解决复杂的多步骤问题。
AI Agent通过即时洞察,帮营销活动更快上线,帮优化供应链运营,节省数亿美元成本,将软件安全流程从几天缩短到几秒钟,方法是帮分析师对漏洞进行分类。
使代理式AI如此强大的原因,在于它能将数据转化为知识,将知识转化为行动。
在此示例中,数字AI Agent可以使用来自一组信息密集型研究论文的见解,来教育个人,它使用NVIDIA AI蓝图构建。
这些是具有NVIDIA加速库、SDK与NIM微服务的参考工作流程,可帮你快速构建与部署AI应用程序。
使用AI应用程序,多模式PDF数据提取蓝图,有助于构建数据摄取管道,数字人蓝图提供了流畅的拟人化交互。
比如James是一个数字AI Agent,可以摄取PDF研究论文,包括图像、图表、表格等复杂数据,生成通过交互式数字人界面交付的高级摘要。
James可以根据论文,回答问题或生成新的内容。
英伟达AI赋能企业自动化流程、获取实时洞察,提高工作效率。
AI Agent由三个部分组成:Nemo、NIMS、蓝图。这些都是参考资料,你可以源代码形式获取,以便根据需要使用它们,构建你的AI Agent团队。
这些AI Agent,都不能完成任何人100%的任务或工作。
所有AI Agent,都能完成你50%的工作量,这是巨大的成就。
与其考虑AI会取代50%人的工作,不如考虑AI会为100%的人完成50%的工作。
这个角度看,你就会意识到AI将有助于提高公司生产力。有人问我:AI会取代你工作吗?我总是这样回答,这是事实,AI不会取代你的工作,而是别人使用AI会取代你的工作,请务必尽快开始使用AI。
第一类,是AI Agent,它们是数字AI。
第二类,是物理AI。同样的基本技术现在具体化,并存在机械系统内部。
机器人技术,将成为世界上最重要的产业之一。
目前为止,机器人技术一直受到限制,原因非常明确。
在日本,全球50%的制造机器人是由川崎、发那科、安川、三菱等公司制造,这四家领先企业,制造全球一半的机器人系统。
机器人推动制造业的生产力,扩展机器人产业非常困难,这个产业长期以来一直停滞不前。原因在于它过于特定,它不够灵活,无法应用不同场景、条件、工作类型。
我们需要更灵活的AI,一种能自我适应与学习的AI。
请注意我们迄今为止描述的技术,自主AI。无论你是谁,都应该能与这些AI Agent进行交互。
AI给出的回应质量,可能并不总是与人类回应的质量相匹配,但许多回应甚至比我们能产生的更好。
我们可以将这项通用AI技术,应用于具体化AI、物理AI,或称之为机器人技术的世界。
为了使机器人技术蓬勃发展,我们需要构建三台计算机。
第一台计算机,用于训练AI,类似我之前分享的例子。
第二台,用于模拟AI;你需要为AI提供一个练习、学习、接收可从中学习的合成数据的空间。我们称之为Omniverse,它是我们用于创建物理AI与机器人的虚拟世界数字孪生套件库。
在Omniverse中进行训练、验证、评估后,你可以将模型部署到物理机器人中。
机器人内部,我们有专门为机器人技术设计的处理器,称为Jetson Thor,Thor是一款专为机器人与人交互而设计的机器人处理器。这个过程,为AI创建持续的学习与适应循环。
AI Agent生命周期平台,有一个这样的平台,Omniverse平台,可以让你创建AI。
最终,你想要的是AI。
请注意左侧,它看到一个世界;它看到视频,看到周围环境与情况。
你告诉它,你想要什么,这个AI会生成关节运动。
就像我们使用文本生成视频一样,我们可以使用文本生成化学物质。
对药物,我们可以使用文本生成关节运动。这个概念与生成式AI非常相似。这就是为什么我们认为现在我们拥有Omniverse与我们构建的所有计算机这三台计算机、最新的生成式AI技术之间必要的技术,现在是人类机器人时代来临的时候。
现在,为什么人类机器人如此困难?很明显,为人类机器人开发的软件极其困难,好处是难以置信的。
只有两种机器人系统,可以轻松部署到世界上。
第一个,是自动驾驶汽车,原因是我们创造了适应汽车的世界。
第二个,是类人机器人。
这2个机器人系统,可以部署在世界任何地方的已开发地区,我们为人类创造了这个世界。这两种技术都极其困难,现在是时候,影响将是巨大的。
本周机器人学习会议上,我们宣布一个非常重要的全新框架,它被称为Isaac Lab。
Isaac Lab是一个强化学习虚拟仿真系统,允许你教人类或机器人如何成为人类或机器人。
在此基础上,我们创建了几个工作流程。
第一个工作流程是Groot Mimic,一个框架,用于向机器人演示如何执行任务。你使用人类演示,然后使用领域随机化模拟该环境,这会生成数百个与你演示类似的其他示例,以便机器人可以学习泛化。否则,它只能执行非常具体的任务。使用Mimic,我们可以泛化它的学习。
第二个是GrootGen,使用Omniverse中生成式AI技术,使我们能创建大量领域随机化的环境示例、我们希望机器人执行的动作。
我们正在生成大量测试、评估系统与评估场景,机器人可以尝试执行,并改进自身,学习如何成为优秀的机器人。
第三个是Groot Control,一个模型蒸馏框架,允许我们将学习到的所有技能,蒸馏成一个统一的模型,使机器人能执行运动技能。
机器人不仅会自主运行,未来的工厂也将是机器人的。这些工厂,将是协调机器人的机器人工厂,建造机械系统也是机器人的。
让我来展示一下。
物理AI具体化了机器人,例如安全的在现实世界中导航的自动驾驶汽车、执行复杂工业任务的操作器、与我们一起协同工作的类人机器人。
工厂将由物理AI具体化,能监控与调整运营或与我们进行沟通。
英伟达构建了三台计算机,使开发人员能创建物理AI。
模型首先在DGX上进行训练,然后使用Omniverse中强化学习物理反馈,对AI进行微调与测试。最后,经过训练的AI,在英伟达Jetson AGX机器人计算机上运行。
英伟达Omniverse,是一个基于物理的物理AI模拟操作系统。机器人使用Isaac Lab,一个建立在Omniverse上的机器人训练场中的Groot工作流程,学习并微调其技能。
这些工作流程包括Groot Gen,它生成多样化的学习环境与布局;Groot Mimic,它基于少量现实世界捕获创建大规模合成运动数据集;Groot Control,它促进神经全身控制。此设置,不仅推动单个机器人的发展,也推动自动化工厂的未来发展。
未来的工厂,将协调机器人团队,通过数千个传感器监控整个运营。对工厂数字孪生,它们利用名为Mega的Omniverse蓝图。使用Mega,工厂数字孪生将填充虚拟机器人及其AI模型,作为机器人的大脑。机器人通过感知环境、推理、计划下一个动作,最后将这些计划,转换为动作来执行任务。
这些动作,由Omniverse中世界模拟器在环境中进行模拟,结果通过Omniverse传感器模拟被机器人大脑感知。
基于这些传感器模拟,机器人大脑决定它们下一个动作,创建一个连续的反馈回路,Mega精确跟踪工厂数字孪生体中所有事物状态与位置。
这种软件,在环路测试,将软件定义的流程,带入物理空间与实体,使工业企业能在将变更部署到物理世界之前,在Omniverse数字孪生体中模拟与验证这些变更,显著降低风险与成本。
物理AI时代到来,正在改变世界重工业与机器人领域。
不可思议的时代,我们有2个机器人系统。
一个是数字的,我们称之为AI智能体;你们在办公室使用它们,与员工协作。
第二个是物理AI,物理AI系统,机器人。这些物理AI,将是公司制造的产品。公司将利用AI,来提高员工生产力。我们将利用AI,来驱动与赋能我们销售的产品。
未来的汽车公司,将拥有两家工厂,一家工厂制造汽车,一家工厂生产汽车中运行的AI。这就是机器人革命,世界各地正在进行如此多的活动,我难以想象。
没有比日本更适合引领机器人AI革命的国家,原因是,这个国家热爱机器人,你们热爱机器人。你们创造了一些世界上最好的机器人,这些是我们从小就熟悉的机器人,这些是我们一生都热爱的机器人。
我甚至没有展示一些我最喜欢的,例如《魔神Z》、《高达》。
我希望日本能利用AI的最新突破,将其与你们在机电一体化方面的专业知识相结合。
世界上,没有哪个国家比日本在机电一体化方面拥有更强技能。这是非凡的机会,你们必须抓住它,我希望我们能一起努力,使这个梦想成为现实。
NVIDIA AI在日本发展得非常好,我们这里有很多合作伙伴正在做出重大贡献。我们合作伙伴正在构建大型语言模型,包括东京科学研究所、乐天、Southbank Intuitions、NTT、富士通、NEC与名古屋大学,Kotoba Technologies。
我们有与AIST、软银、Sakura Internet、GMO互联网集团、HiRezo、KDDI与Rutelia合作的AI云,所有这些都在这里构建AI云,以培育能在日本蓬勃发展的生态系统。
许多机器人公司,开始了解AI目前提供的功能,以利用现有机会。
像安川电机、丰田、川崎重工这样的知名公司,正在朝着这个方向迈进。
Reputa医疗影像系统、佳能、富士胶片、奥林巴斯,都在利用AI,未来这些医疗器械将更加自主。
这几乎就像一个护士,一个AI智能体,在医疗器械内部,帮护士引导诊断。AI的应用方式多种多样,药物研发行业也是如此。我对这里的进步感到高兴,我们希望加快步伐,以利用AI革命的优势,这个行业正在发生变化。
计算机行业从运行在CPU上的编码,转变为现在运行在GPU上的机器学习。从生产软件的行业,我们现在成为制造AI的行业。AI是在工厂里生产的,它们24/7全天候运行。当你们授权软件时,会将其安装到电脑中;该软件的制造与分销就完成了,智能永无止境。
你们正在与所有AI互动,无论是AI智能体、还是AI机器人。智能的标记或单元,以数字表示。这些标记以各种方式构成,成为言语中的智能、方向盘中的智能、自动驾驶汽车中的智能、驱动人类机器人的马达中的智能,蛋白质、化学物质、药物研发中的智能,所有这些标记都在这些工厂中生产。
这些基础设施,这些工厂以前从未存在过,这是全新的概念,这就是为什么我们看到世界各地都在进行大量发展的原因。我们第一次拥有全新的行业,全新的工厂生产全新的东西,我们称之为AI。这些工厂,将由公司建造,每个公司都将成为AI制造商。任何公司都不能不制造或生产AI,任何公司都承受不起不生产智能,任何国家也承受不起不生产智能?
你们不必生产芯片,不必生产软件,你们必须生产智能,这是至关重要的,这是你们是谁的核心。这是我们是谁的核心,我们有了新的行业,AI工厂。
这就是为什么我称之为新工业革命的原因。
上次发生这种情况,是在300年前,那时发现电力。电力与电力生产,导致新型工厂的创建。这家新工厂是一座发电厂,创造名为能源的新兴产业。几百年前,根本不存在能源产业,它是在工业革命期间出现的。
现在我们有一个以前从未存在过的全新行业,AI建立在计算机行业之上,它被各个行业利用与创造。
你们必须创造自己的AI,制药业创造自己的AI,汽车业创造自己的AI,机器人行业创造自己的AI。每个行业,每家公司,每个国家,都必须生产自己的AI。
一场新的工业革命。
我有一个非常重要的公告,要宣布。
今天,我们宣布与软银合作,为日本带来,并构建AI基础设施,我们将一起建造日本最大的AI工厂。它将由NVIDIA DGX构建,建成后,它将拥有25艾字节AI算力。世界上最大的超级计算机,最近才达到1艾字节算力。这是一个拥有25艾字节AI算力的AI工厂,用于生产AI。
为了分发AI,软银将集成NVIDIA的Arial,我前面提到的引擎,它运行在CUDA上的5G无线电。通过这样做,我们可以统一与结合无线电计算机、基带与AI计算机。
从5G RAN开始,我们现在可以将电信网络发展与改造为AI RAN。它能承载语音、数据、视频,但在未来,我们将承载AI,一种新型的信息,智能。这将通过软银在日本20万个站点进行分发,服务5,500万客户,AI工厂与生产AI。
与AI分销网络来分发,AI RAN来分发AI。我们还将在其之上添加一种新型商店,AI商店,以便软银创建的AI与第三方创建的AI,可以提供给5,500万客户。
我们将在此之上构建这些应用程序,使用NVIDIA AI Enterprise,并会有新的商店向所有人提供AI,这是一个了不起的发展,结果将是一个遍布日本的AI网络。
现在,这个AI网络,将成为基础设施的一部分,也是最重要的基础设施之一。
你们需要拥有工厂与道路,作为基础设施的一部分,以便你们能制造与分发商品。你们需要能源与通信,作为基础设施的一部分。每次为基础设施创造一些根本性的新事物时,都会创造新产业与新公司,新的经济机会与新的繁荣。
如果没有道路与工厂,我们如何拥有工业革命?如果没有能源与通信,我们如何拥有IT革命?每一个新的基础设施,都打开新的机会。
与软银合作,在日本实现这一切,令我无比兴奋。宫川先生的团队应该就在现场,与你们合作真是太棒了,我真的很高兴我们能做到这一点,这完全是一场革命。这是第一个将电信网络、通信网络,转变为AI网络的案例。
让我向你们展示一下它的功能,它能做的事令人惊叹。
例如,我现在站在一个基站,一个无线电塔下面,汽车上有摄像机,汽车的视频被传输到拥有AI的无线电塔。这个无线电塔,拥有视频智能与视觉智能,它可以看到汽车看到的东西,可以理解汽车看到的内容。这种AI模型,可能过于庞大,无法安装在汽车内部,安装在基站内不成问题。利用传输到基站的视频,它可以理解发生在汽车及其周围环境中的任何事。
这只是在边缘使用AI,保障人们安全的一个例子,或者可以作为自动驾驶汽车的空中交通管制系统。
应用是无限的,我们可以使用这个基本概念,将整个工厂变成一个AI。
这边是一个工厂,有很多摄像头,摄像头将数据传输到基站。令人惊叹的是:所有摄像头与运行的AI模型,现在这个工厂变成一个AI。
你可以与工厂对话,询问工厂发生了什么,是否有任何事故,或者是否有任何异常情况。你可以询问今天是否有人受伤,它会给你一份每日报告。你只需要询问工厂,它现在变成一个AI。这个AI模型不必在工厂运行,它可以在软银的无线电塔中运行。
这是另一个例子,可能性无数。你可以将每一个物理物体变成一个AI,体育场、道路、工厂、仓库、办公室、建筑物。
它们都可以成为AI,你可以像与ChatGPT对话一样,与它们对话。例如,你可能会询问通道的状况,询问是否有任何障碍物或溢出物。你只是在与工厂说话,而它观察到了一切,它理解它所看到的东西,它可以推理、计划行动,或者只是与你沟通。
你会得到这样的回应:不,仓库的通道没有任何障碍物、溢出物或危险。视频中通道的状况,看起来井然有序、干净,没有障碍物或危险。
你正在与工厂对话,这太不可思议了。你正在与仓库对话,你正在与汽车对话,所有这些现在都变得智能化了。
接下来,我有一位非常特殊的嘉宾,要谈谈我们今天的公告,也要谈谈将AI引入日本。
这位我的朋友,你们可能认识他。我这位朋友真的非常独特,孙正义在哪儿?
黄仁勋对话孙正义
孙正义:太好了,Jensen。让我告诉你一些事,我不知道你是否知道这个。
黄仁勋:我们一直参与。我在科技行业工作很长时间,从个人电脑革命开始。计算机行业从个人电脑发展到互联网,再到云计算,到移动云,再到AI。
孙正义:是的,漫长的旅程。
黄仁勋:孙正义是世界上唯一一位企业家,也是唯一一位创新者,他在每一代技术变革中都选择赢家,并与赢家合作。
是孙正义把比尔盖茨带到日本的,是孙正义发明、或把杨致远带到日本。是孙正义使中国的云计算产业,阿里巴巴,成为可能。是孙正义把乔布斯与iPhone带到日本,你们许多人可能不知道,有一段时间,孙正义是英伟达最大股东。
英伟达股票卖早了。
孙正义:呜呜呜。
黄仁勋:没关系,我们可以一起哭。
你是怎么做到的,是如何挑选的,在计算历史上,每一次技术革命中的创新者、创造者,100%的成功率。
孙正义:我认为我只是运气好,我出生在正确的时代,我遇到像你一样伟大的企业家。这是一种激情,一个梦想,一种本能,你可以嗅出谁是真正先驱,谁是真正创新者。
我真的很幸运,我们有相同愿景,我们可以嗅到它,就像狼闻到狼的气味一样,我想我们互相闻到对方的气味。
黄仁勋:现在,孙正义,当你回顾历史时,这次转型,这个平台的转变,这场革命,它与之前有何不同?你感觉有什么不同?
孙正义:我认为这是未来最激动人心、最充满活力的前沿。这是前所未有的,规模是之前的100倍、1,000倍。这是最大的浪潮,我完全这么认为。
黄仁勋:是的,我认为从数学角度或工业角度看,重要的是要意识到,AI是软件,它是一种非常不同类型的软件。
孙正义:是的。
黄仁勋:你我创造、参与的软件行业,是一个工具行业,它是人类使用的工具。
这是第一次,这种新型软件,神经网络、大型语言模型、智能体、机器人,不是工具,而是技能,是任务,它们可以工作,它们可以执行工作。
这个行业,这个市场,这个工作行业,不是1万亿美元,而是100万亿美元。这就是我们意识到这个行业不是IT行业的转型,而是每个行业转型的原因,这就是为什么它如此重要。
孙正义:人类是唯一一种与任何其他物种相比,拥有超级大脑的动物。大脑的力量,人类如此强大。如果你只比较肌肉,狮子与大象,它们肌肉更大。
人类拥有最聪明的大脑,如今GDP的每一项活动,都是基于人类某种类型的大脑活动。我认为每个行业,都会受到这场革命的影响。
黄仁勋:是的,令人惊奇的一点是,在一个受原子支配的行业里。这个行业的规模是有限的,你只能移动这么多原子,它们很重。
孙正义:没错。
黄仁勋:AI行业是电子的行业,它受量子力学支配,它可以无限大。
孙正义:是的,与仅移动物体相比,智能更有价值得多,思维链、推理,太神奇了。
黄仁勋:是的,我们今天一起宣布的事之一,是建设日本的AI网络。这个AI网络,将拥有用于开发AI模型的AI工厂,还将拥有用于在日本各地分发AI模型的AI RANAI无线接入网。我们共同研发的AI工厂与AI RAN的架构,是革命性的,世界上没有任何类似的东西,日本将成为世界第一。
孙正义:是的,其他每家电信公司,都必须追随这股新潮流。
黄仁勋:我想问你几个问题。
首先,软银将如何自己使用这项技术,如何用于你的子公司?你认为这个AI网络,将如何彻底改变日本的AI?
孙正义:是的,我们蜂窝塔过去只承载用于电信与互联网浏览的比特。现在,凭借这个我们密集互连的智能网络,它将成为日本智能基础设施的巨大的神经网络,这将非常神奇。
黄仁勋:你也可以将其用于你的子公司,例如LINE与雅虎日本,PayPay。
你会创造AI,使你的所有服务对你的消费者更有乐趣、更有用。
我非常兴奋的一件事是,让这种资源能为日本科研人员、学生、初创公司提供服务,让他们蓬勃发展。
孙正义:在你的支持下,我们正在日本建设最大AI数据中心,我正在与宫川讨论,我们应该将这个平台提供给许多研究人员、学生与初创公司,以便我们可以鼓励他们。我们正试图提供补贴,以便他们能获得更好访问权限与更多算力。
黄仁勋:建设基础设施,需要大量资金投入,你们对日本下了很大的赌注。
很多方面,日本在机电一体化时代,都处于技术领先地位。那次工业革命中,机械技术与电子技术结合在一起。即使在那时代的消费电子产品领域,日本也真正引领世界。
然后,当IT产业与软件兴起时,错失良机。我认为在过去30年中,随着软件产业在西方与中国蓬勃发展,日本本可以更积极一些。
孙正义:完全同意。甚至在某种程度上,直到今天,大型企业、媒体与有经验的人们,都认为制造实体产品,具有真正的价值与意义。
他们认为实体产品具有合法价值,软件被视为虚无缥缈的东西,他们不信任其价值。这种心态,在日本持续很多年,导致年轻创业者与年轻一代感到沮丧。
尤其在网络泡沫破裂之后,对初创企业批评非常多,我也受到很多批评。
这种强烈反弹,是对年轻新星的惩罚,导致社会内部消极情绪,我认为我们需要重燃这种热情。
通过将AI与机器人技术相结合,我们可以创造出真正具有创新性的东西。
在日本,我们把原子小金刚称为铁臂阿童木,这是我最喜欢的卡通片。它强调了一个重要的点:你不能只有肌肉,你还需要有智慧。
机器人必须能与我们交流与互动,表现出像朋友一样的热情。我相信这些前端挑战,在日本非常需要。
黄仁勋:我认为现在是软件时代。好消息是,这是一个新时代的开始。
孙正义:重启,再一次重启。
黄仁勋:这个行业正在重启。
你可以看到整个技术栈都在被重置,上一代公司在新一代中表现不佳,出现了全新的技术栈,全新的机遇,日本必须抓住这个优势。
必须利用这次机会,AI与软件非常不同,AI需要数据,需要这个领域专业知识。
如果你是一位艺术家,你就拥有这个领域专业知识。
如果你开发电子游戏,你就拥有这个领域专业知识。
如果你寻找药物,发现药物,你就拥有这个领域专业知识。
如果你拥有领域专业知识,你就可以用数据来描述你的专业知识。这些数据可以用来训练AI模型,这个AI模型就变成了你的AI。
孙正义:至少日本政府没有试图压制这场AI革命,其他一些国家试图过度保护AI,法规变得有些疯狂。
在日本,至少我们很幸运,这一次,日本政府似乎没有试图压制,至少没有设置障碍。
我认为,他们应该鼓励更多。正如你所说的,这是重启。这是赶上这场新革命的时刻,我们不能错过这次机会。
黄仁勋:不能错过这次机会。为了成为AI革命的一部分,你需要这个机会,你需要基础设施。这种类型的软件,它属于机器学习,
孙正义:你会购买很多你的芯片。
黄仁勋:是的。你需要基础设施,你需要AI工厂。没有基础设施,不可能创造AI,绝对的,这就是软银在日本建设AI网络的原因,你将催化、激活、加速这里存在的所有活动。
孙正义:我们将以我们行动来证明。
黄仁勋:希望今天,我们与日本350家初创公司合作,在全球22,000家初创公司中。我们必须鼓励年轻的企业家、创新者们,积极参与AI,大胆尝试,勇于突破,基础设施正在建设中。
孙正义:宫川与我正在讨论,我们将在日本建立最大的AI数据中心。我们将提供许多扶持项目,补贴算力,以便他们能几乎免费试用他们新模型,试用他们各种AI应用。你们也应该捐赠一些,大多数情况下,都是初创企业。
黄仁勋:每次见到Masa,我都要花钱。
孙正义:这对每个人都好。
黄仁勋:Masa,你对日本AI的未来最兴奋的是什么?你希望什么?你的梦想是什么?
孙正义:我对AI机器人充满热情,我认为AI医疗解决方案,我认为医疗AGI即将到来。
我认为会有很多新的智能体,我们有Line,我们有雅虎与其他服务、PayPay。我们可以为帮助日本人的生活方式,创建许多特定的AI智能体。
这不能仅仅来自美国,我们了解日本人行为、文化、本地智慧、与日本许多、许多网站的API。
我认为智能体,你提到的企业AI智能体,是必不可少的。我绝对支持这一点,我对它带来的可能性感到兴奋。
我相信个人智能体,将真正成为我们每个人生活中的一部分。比尔盖茨曾提到过每个桌上都有一台PC,乔布斯谈到人手一部智能手机。
我认为,现在是时候说AI智能体应该对每个人都可用,我们每个人都应该拥有自己个人智能体。
这些个人智能体,将以各种方式帮我们,例如帮我们制定旅行、度假,甚至教育计划。随着技术进步,这些智能体将在增强我们的日常生活体验方面发挥关键作用。
黄仁勋:你能想象一个AI智能体……
孙正义:我们的孙辈们,他们从1岁起,就与iPhone一起长大。他们说话,每次看到图片,他们都会这样做。即使是静态图片,他们天生就有两只手指,他们认为每张图片都可以放大。
孙正义:将来,他们会看到一张照片,然后与它说话,他们会希望它回应。
他们从1岁起,就会拥有智能体,他们的个人智能体,就像你的第二个身体,看着你,与你一起成长,了解一切。你生病了,你健康了。你的导师,从你还是个孩子的时候起。
黄仁勋:记住你读过的所有东西,记住它教给你的所有东西,你的专属亚里士多德。
孙正义:完全正确,完全是数字孪生,我认为这真的即将到来。
拥有日本本土的知识、文化等,本土智能体将拥有巨大而令人惊叹的未来。
黄仁勋:各国正在逐渐意识到的是,他们国家的资料,他们公民资料,编码了国家的知识、文化与智慧,这些数据属于国家。
孙正义:它是国家资源一样,国家安全。
黄仁勋:每个国家,都应该处理这些数据,处理并将其转化为适合本国人民的AI。完全正确,将其外包给其他人毫无意义。
孙正义:这非常非常重要,这是一个主权数据中心,每个主权国家、每个国家、每个政府,都必须将其国家安全数据迁移到他们自己数据中心,AI数据中心。
这成为你必须在自己国家拥有的东西,每个国家都必须拥有国家安全、数据安全,我认为这将成为每个国家保护的规章制度。
黄仁勋:每个国家都会产生自己的情报,每个公司都会产生自己的情报或自己的AI。一家公司怎么可能不创建自己AI?
孙正义:这就像把你的大脑,交给别人一样。
黄仁勋:没错,我认为世界正在觉醒于这个想法。最重要的部分是第一部分,必须存在一个国家电网,一个AI电网。如果没有道路,就不可能有汽车工业。
现在你们为日本建造AI道路,在此基础上,各种新服务、新公司可以蓬勃发展,真的为此感到兴奋。
你能想象一下,如果今天你是最大的股东?
孙正义:我不知道,我们尝试了三次,我以为是两次。
第一次,我们通过自己从市场上购买,成为你的股东,我们谈到了,你与我10年前的私下谈话,别说了。
10年前,在我的花园里。我知道,我后悔了。在我的花园里,在我的家里。
黄仁勋:没有什么,让我告诉你,Masa说了什么。你们准备好了吗?
Masa说,Jensen,市场不理解英伟达的价值,你的未来令人难以置信。
是的,市场并不理解英伟达的价值,你的痛苦之旅还会持续一段时间,你正在创造这个未来。
让我给你钱,去买英伟达。他想借钱给我买英伟达全部,现在我后悔没有接受你的建议。
孙正义:那是个好主意,那是最好的主意,现在我们都很伤心。
那是我收购ARM一个月后的事,然后我们谈到了……
黄仁勋:合并两家公司,是的。
孙正义:那也是一个好梦,那是第三次。
那是第三次尝试。
首先,我们谈到了私有化。
然后,第二次是我,我只是从市场上购买。
第三次是合并,三次尝试。
孙正义:哦,我的上帝。
黄仁勋:现在我们将一起创造不可思议的价值,英伟达与软银将合作,我太高兴了。
我很高兴,我们正在日本做一些如此重要的事,我非常有希望。
孙正义:这仅仅是个开始,我们将一起做很多很多事。
这个行业规模如此庞大,ARM拥有大量移动设备、物联网设备、汽车相关业务,你们还有强大的数据中心、游戏等,有很多很多我们可以合作的领域。
孙正义:我非常期待。
黄仁勋:你可以看到他对AI的热情,我们正在开展的工作,我们正在发展的伙伴关系,将从工厂、到分布式AI领域,在整个日本构建AI网络。
在我离开之前,我想欢迎大家参加AI峰会。我们这里有很多会议,也有很多合作伙伴。
我们目标,是与大家合作,将AI引入日本,利用这次技术重置的机会,来转型企业,并在日本创造下一批伟大的公司。
日本一直对我来说都很重要,你们大多数人可能不知道,如果不是日本……
我的意思是,非常认真说,如果不是日本,英伟达不会存在于今天。
这是有原因的,如果不是日本,我们不会看到第一台AI超级计算机,CUDA超级计算机的诞生。
日本长期以来,一直对我来说非常重要。我非常感谢我们合作关系,我非常感谢你们的友谊。我制作了一个简短的视频与大家分享,请播放。
画外音:我们与日本关系,始于30年前。我们当时有一个梦想,重新发明三维图形。开创性的游戏公司世嘉,选择英伟达开发下一代游戏机。
我们意识到,我们独特方法,无法达到预期效果,我们怀着歉意,请求世嘉解除合同。他慷慨同意,给了我们发明GPU,并取得成功的机遇,拯救了我们公司。
那时起,我们便与日本朋友们合作,重新定义游戏概念。PlayStation 3、世嘉街机游戏机、任天堂Switch,我们创造讲述精彩故事的方式。
随着CUDA发明,我们从游戏公司转型为计算公司。
当我们迈向超级计算机与AI领域时,最早认识到GPU加速计算潜力的,正是当时的日本东京工业大学。在发布CUDA不到10年后,我们推出DGX-1,这是一款改变世界的AI计算机。
现在,英伟达与AI,正处于新一轮产业革命的核心。
请务必阅读免责声明与风险提示
请先 后发表评论~