Webb3SkyCity.AI
黄仁勋最新谈愿景,风险和GPU | 斯坦福胡佛研究所访谈城主说| 本次访谈记录了 NVIDIA 创始人黄仁勋的非凡历程。从他 9 岁作为移民来到美国,在肯塔基州的寄宿学校度过童年,到在俄勒冈州和斯坦福大学完成学业,黄仁勋分享了个人成长与 NVIDIA 创立背后的精神内核。对话深入探讨了 NVIDIA 总部建筑的模拟技术、加速计算对深度学习的意义,以及美国梦中“自由、风险与机遇”的深刻内涵。

目录
全局摘要和核心观点
建筑的智慧:模拟、效率与和谐
少年移民:从台湾、泰国到肯塔基
求学与成长:从俄勒冈到斯坦福
创立 NVIDIA:挑战通用计算
爆发前夜:加速计算与深度学习的汇流
自由与未来:美国梦的化身
核心观点
- 加速计算的第一性原理:通用计算(CPU)无法应对所有需求,模拟现实世界和人工智能需要专门的并行计算架构。
- 移民精神与创业精神的高度统一:两者都源于在没有退路的情况下,对更美好生活的渴望以及对机遇的极度感激。
- AI 革命的应用层红利:AI 是一块“千层蛋糕”,能源、芯片和模型是基础,但决定国家竞争力的核心在于医疗、国防、制造等“应用层”的突破。
模拟的艺术:建筑与芯片的同构逻辑
步入英伟达的新总部大楼,访客会被那种精确而和谐的光影律动所震撼。在黄仁勋看来,这栋建筑本身就是计算机科学的产物。“这是一栋只有借助超级计算机才可能实现的大楼,它首先是在模拟环境中完全构建出来的”。黄仁勋向访客解释道,为了达到极致的节能与舒适,工程师们通过全年的模拟运行,不断调整三角形采光井的位置和屋顶的起伏。
这种对“模拟”的痴迷,实际上揭示了英伟达技术版图的核心。黄仁勋认为,现实世界是高度并行的,而传统的通用处理器(CPU)遵循的是串行逻辑,这在处理复杂的模拟任务时显得捉襟见肘。“在数学上达到完美的和谐,这就是我们要追求的目标”。无论是设计一座能追踪太阳轨迹的建筑,还是研发能够实时渲染复杂世界的图形芯片,其底层逻辑都是一致的:用并行计算去重构对现实的理解。
逆风而行:从肯塔基少年到斯坦福极客
黄仁勋的成长路径并非一帆风顺。1973年,由于泰国政局动荡,9岁的他与10岁的哥哥被父母紧急送往美国。“你能想象一个10岁的孩子带着一个9岁的孩子,独自完成横跨大洋的旅行并在庞大的芝加哥机场转机吗”?少年时代的艰辛不仅没有压垮他,反而赋予了他一种极低的心理预期和极高的生存韧性。
在肯塔基州那所简陋的寄宿学校里,黄仁勋学会了在偏见与孤独中寻找机遇。对他而言,来到美国本身就是一个奇迹。“移民最了不起的地方在于,你们来的时候并没有太高的期望,却怀揣着伟大的梦想,因此你会珍惜所拥有的一切”。这种“没有退路”的危机感,后来成为了英伟达企业文化中最重要的基石。
这种韧性一直延续到他的求学时代。在俄勒冈州立大学,他通过“统计学方法”锁定了实验室里的心仪女孩(后来的妻子);在斯坦福大学,他一边在超微半导体(AMD)工作,一边攻读硕士学位,将学术原理与产业实践在脑海中融为一炉。“技术、应用、基础科学以及产业战略的交汇点,正是在那个时期形成的”。
孤注一掷:挑战通用计算的霸权
英伟达的创立始于一个在当时看来近乎疯狂的假设:通用计算(CPU)虽然统治着世界,但它绝非万能。黄仁勋回忆道,在公司初创期,硅谷的一切都围绕着摩尔定律和中央处理器旋转。但他和伙伴们坚定地认为,需要有一种“另一种工具”来增强计算机的能力。
“通用计算机绝不可能是唯一的计算平台,一定有办法实现加速计算”。黄仁勋选择了最难的一条路——先有鸡还是先有蛋的难题。为了推行新架构,他必须找到一个足够庞大的应用市场,而当时尚处于萌芽阶段的电子游戏成为了他的切入点。尽管当时的商业计划在投资者看来充满了不可预见的风险,但硅谷的冒险基因最终接纳了他。他坚信:“如果我们能引入这个新理念,就有太多有趣的问题可以解决了”。
十年苦难:深度学习与人工智能的汇流
在长达三十年的征途中,英伟达并非始终站在聚光灯下。黄仁勋直言不讳地谈到了那段长达十年的“苦难”时期。在那段时间里,英伟达投入巨资研发图形处理器(GPU)的通用计算能力,却几乎没有得到市场的正面反馈。
“最困难的部分在于,你所从事的事业没有任何正面反馈,也没有任何外部激励”,黄仁勋说道。直到有一天,人工智能领域的研究者们——如安德鲁·吴(Andrew Ng)和杰夫·辛顿(Geoff Hinton)——发现英伟达的并行架构正是深度学习梦寐以求的加速引擎。
这次历史性的汇流并非偶然。黄仁勋认为,人工智能本质上是对大脑和心智的模拟,这与英伟达长期深耕的物理世界模拟在逻辑上是高度同构的。“因为它的成功,引发了更进一步的内省。我们一步一个脚印,将一切拆解回其第一性原理,然后重建,以适应那个未来的世界”。正是这种在寂寞中的坚守,让英伟达在人工智能浪潮席卷全球时,成为了唯一的“军火供应商”。
自由的红利:人工智能时代的“千层蛋糕”
作为人工智能革命的核心推动者,黄仁勋对这项技术持有一种“审慎的乐观主义”。他将人工智能的竞争比作一块“千层蛋糕”:底层是能源与基础设施,中层是芯片和模型,而决定胜负的最高层则是应用。
“决定我们国家竞争力的核心在于应用层。将人工智能应用于医疗、国防、网络安全和制造业,这将是推动行业向前发展的动力”。黄仁勋警示道,尽管美国目前处于领先地位,但在技术转折点,领先地位最容易发生更替。政策制定者必须确保不会阻碍应用层的发展,因为那是这场工业革命红利最集中的地方。
对话最后,黄仁勋再次回归到了“个人与国家”的主题。他认为,英伟达的成功只能发生在美国,因为这里提供了自由的“顺风”和值得信赖的规则。“我确信我对英伟达的感受,以及那种想要做得更好的紧迫感,与我父母为养家糊口而奋斗时的感受完全一样。他们别无依靠,没有退路”。
作为一名曾经的移民少年,如今的科技巨头,黄仁勋的总结简洁而有力:“我就是美国梦的化身”。这不仅是一个关于财富和技术的故事,更是一个关于在自由的土壤中,如何通过对第一性原理的近乎偏执的坚守,最终改变世界的故事。
完整访谈
天空之城全文整理| 黄仁勋最新谈愿景,风险和GPU - 斯坦福胡佛研究所访谈
建筑的智慧:模拟、效率与和谐
我的父母一无所有,变卖了一切,来到了美国。那是一切的开始。一路走来,我所做的工作、所上的学校、所拥有的机会,成就了今天的我们,让 NVIDIA 成为世界上举足轻重的科技公司。
这在其他任何地方都不可能发生。美国在技术创新方面处于世界领先地位。这种发生在我们周围硅谷的创新,之所以能在这里实现,得益于我们的美国式自由。
但要利用自由所带来的机遇,就需要承担风险,并以勇气和决心面对未知。
NVIDIA 作为创始 CEO,拥有远见卓识,承担了重大风险,如今领导着一家标志性的美国企业,推动着全球科技核心的变革。他作为移民的旅程令人着迷,它告诉了我们很多关于我们国家的信息。这个国家及其卓越之处。美国提供了让 Jensen 的冒险精神得以改变世界的机遇。现在,仅在美国,请看我与黄仁勋的对话。
你好吗?很高兴见到你。
欢迎。谢谢你。你觉得我们的新大楼怎么样?
我认为这太棒了。
这是一栋只有借助某些技术和超级计算机才可能实现的大楼。
没错,这太棒了。
这首先在模拟环境中完全构建出来的。
你是在开玩笑吧。
这座建筑的设计初衷,是为了让我们能最大限度地利用加州这片不可思议的空间。是的。因此我们决定,要利用这个空间来获取美丽的阳光和天气。而且整个空间都非常节能。所以我们最大程度地利用了阳光。这就是它们重量轻的原因。这就是它们重量轻的原因。
在屋顶上。但当屋顶设有采光井时,排除热量会变得极其困难。
所以请注意三角形的位置,采光井只设置在有必要的地方。
我明白了。
从这里看屋顶是平坦的,但实际上它呈波浪状,以便追踪太阳轨迹。因此,它能恰到好处地让阳光射入,而不会引入多余的光照。否则,我们就必须设法排除热量。那太热了。
那样就很高效了。
完全高效。我们通过全年的模拟,对这座建筑进行了每一小时的运行仿真。我们不断调整一切,直到它变得完美无缺。在数学上,达到完美的和谐。
我对此早有预料,这是一个机会。
那是一个试图扮演建筑师角色的工程师。
我喜欢这样。我喜欢,没错。
至于这种起伏,这一处形成了像棒球帽一样的结构。之所以这样设计,是因为你可以看到在下午太阳快要落山时,阳光会直射进大楼内部。我将墙面设计成倾斜状,以便将办公室向后移。所以这就是这座建筑的棒球帽。而且它完全契合这种精美的设计。
如果让我看起来太完美无缺,所有人都会觉得那是假的。我得表现得稍微有点古怪才行。好吧。总得有一点瑕疵。
就是这样。
你还会自称 Madam Secretary 吗?不,你快要忘记那个头衔了。
我告诉人们,我现在这样挺好的。谢谢。我告诉人们,Madam Secretary 已经是过去的事了。Dr. Rice 是我父亲。Rice 教授和我的学生们在一起。
所以我认为。这留给我们的就是喜剧了。
天哪,这些标题都很棒。
Jensen Huang,谢谢你。感谢你邀请我来到这个美丽的 NVIDIA 园区。你和我相识已久。我有很多领带,代表领带以及类似的东西。所以我非常期待我们的对话。但还是让我从这个小伙子说起吧。第九点是关于美利坚合众国。从很多方面来看,美国本身就是一个巨大的移民故事,虽然有着各不相同的经历,但核心都是关于人们寻求更美好生活,以及相信下一代会过得更好的宏大叙事。
那么,谈谈刚来到这里的情形吧。
那一定不容易。
少年移民:从台湾、泰国到肯塔基
我出生在台湾。在我五岁那年,父亲在泰国找到了一份工作,参与筹建一家炼油厂。于是,我们搬到了泰国。我们在那里大约住了四年。1973 年,那里发生了一场政变,就像时不时会发生的那样。我父母认为继续待在那里不安全。我哥哥比我大一岁。他当时 10 岁。我当时 9 岁。我父母想尽快把我们送出去。
于是他们找了住在华盛顿州塔科马的叔叔,让他接我们过去待一阵子。我的第一印象是我从未在室内站过铺着地毯的屋子里。那是一种非常奇怪的感觉。我觉得自己像是穿着鞋子在床上走一样。而且一切事物,从麦片早餐、早间电视节目、下午的 Speed Racer 和 The Partridge Family,还有各种糖果、Snickers 巧克力棒,所有的一切都让我无法想象这是一个多么令人惊叹的国家。所有的一切都那么美好,汽车,一切都简直不可思议。
我们在塔科马住了大约三个月。后来他们把我们送到了美国最平价、最容易入学的寄宿学校,因为我父母负担不起太高昂的费用。一所很棒的学校。他们欢迎各种背景的学生,其中许多来自困难家庭,还有一些国际学生,我们正是通过这种方式得以成行。
他们资助了我们,让我们能够来到美国并留在那所寄宿学校。我在肯塔基州的 Oneida 大约待了两年。
在这一刻之前,我从未听说过肯塔基州的 Oneida。
如果你在 Google Maps 上查看肯塔基州的 Oneida,你会发现美妙之处在于它周围什么都没有。它只是一个小点。我想我在那里的时候,人口大概有 600 人。现在可能还是 600 人。美丽,难以置信。我在那里度过了一个非常、非常美妙的童年。
独自来到美国是一件非常困难且可怕的事情。
但坦率地说,我哥哥所做的一切令人惊叹。我只是跟随着他。他当时才 10 岁。你能想象一个 10 岁的孩子带着一个 9 岁的孩子,从泰国一路旅行,从未去过美国,降落在华盛顿州的塔科马,然后前往肯塔基,还在芝加哥中转吗?天哪。那个机场,芝加哥机场简直太巨大了。所以我们得去寻找转机航班,要知道,一个 10 岁的孩子独自完成了这一切。我哥哥真是太不可思议了。
那太令人惊叹了。所以这在很多方面都充满风险,但你的父母认为,继续留在原地才是更大的风险。你受到了怎样的对待?人们友好吗?他们感到惊讶吗?那部分经历如何?
1973 年的美国,在肯塔基,仍然存在偏见,而且没有人,学校以前从未见过像你这样的中国孩子。那里的孩子们很棒,但他们从未见过中国人。所以,在一个从未有人见过像你这样的人的城镇里,作为一名陌生人,不可避免地会伴随各种情况。因此确实存在很多偏见,当然,还有诸如此类的事情。
但孩子终究是孩子。所以对当时的我们来说,美国太棒了。我是游泳队的一员,也是足球队的一员。而且食物很有意思。还有,香肠配肉汁。谁会不喜欢呢?还有汉堡包。每次游泳比赛结束后,教练都会带我们去世界上最棒的餐厅。食物都是装在盒子里上桌的。而且菜单上全都亮着灯。我们坐在一家看起来像宇宙飞船的餐厅里。那是麦当劳。是麦当劳,你懂吗?
所以我认为人生归根结底取决于期望。当你来自更加艰难的环境时,移民就是这样,当你来到美国,你是出于选择而来的。你想要来到这里。我父亲把我们送到了这里。事实上,当我四岁的时候,他有机会来到美国接受培训。结果他来的地方是纽约。你能想象从台湾来到美国,而且是来到纽约市吗?在 60 年代。因此他总是说,他希望自己的家人最终能来到美国,来到这个不可思议的地方。
所以移民最了不起的地方在于,你们来的时候并没有太高的期望。你们怀揣着伟大的希望和梦想而来。你们珍惜所拥有的一切。
并对自己的处境以及所获得的新机遇怀有感激之情。
没错。还有这,这简直是一个奇迹。你们亲眼见证的这一切。我清楚地记得第一次看到美国时的感受,这个奇迹,以及这里所有热情好客的人们。
用那样的视角去审视它。但当然,随后你就从那个肯塔基州的小孩,变成了游泳队的成员。听起来你当时过得还不错。我曾是一名优秀的运动员。
我曾是一名优秀的运动员。后来我们在华盛顿州的塔科马与父母会合。他们当时一无所有。他们真的是把所有的家当都带上了飞机。所以他们什么都没有。他们来的时候,真的就只带了一个行李箱。我是说,那个故事,那个移民的故事。他们靠着省吃俭用,为孩子们创造了生活。我母亲曾在一所天主教学校当女佣。我父亲是一名工程师。他们省吃俭用,攒下了所有能攒的钱。我爸买了一辆绿色的卡车,是一辆货车。里面没有座位。于是他在车后铺了块地毯,还放了几个牛奶箱当座位。我们坐进了那辆绿色的货车。他开车带着我们从俄勒冈一路南下到了洛杉矶。这样我们就能去迪士尼乐园了。那是我们全家唯一的一次度假。
求学与成长:从俄勒冈到斯坦福
你是怎么考上大学,后来又去了斯坦福的呢?还有,关于在 Denny's 工作的事,我们之后得找机会聊聊?
不,我一定是 Denny's 最好的形象大使。
没错,我觉得你是,肯定的。
不,我非常爱 Denny's。我从未想过自己能负担得起大学费用,或者说,去任何地方上大学。所以我一直以来的计划就是留在俄勒冈长大。我热爱数学。我热爱科学。当你还在上高中,且热爱数学 and 科学时,你身边大概只会剩下三个同样热爱这些的朋友。所以我们那两三个朋友,大家都参加了同一个社团,就是数学俱乐部。我们还参加了科学俱乐部。对。然后我们还参加了计算机俱乐部。
大家都在一起。大家聚在一起。
然后,就在那之后,去夜店玩完后,我们会去玩街机游戏,玩玩弹珠台或者去玩街机游戏。这就是我的成长经历。我最好的朋友 Dean Verheyen 说,他打算去俄勒冈州立大学,因为他哥哥在那读过书。我父母也是那里的校友。我说,那听起来很棒。俄勒冈州立大学的工程项目很出色。那真是一个美妙的巧合。
我非常喜欢那所学校。结果发现那里还有另一个孩子叫 Lori。她是学校里一个班级里仅有的三名女生之一,而班上其他 250 名全是男生。她是,她是,我是学校里年纪最小的孩子。我是学校里年纪最小的孩子。我当时只有 16 岁。而她比我大一岁半。我当时下定决心要去见她。于是通过统计学方法,让自己成功进入了她的实验课,从而筛选掉了其他人。这样我就把竞争对手的人数从 250 人减少到了 4 人。
那真是相当聪明。
那非常聪明。那非常有策略性。老师,这是我小时候的事了。而且,我当时知道,我清楚成功的几率。然后,我向她使出了终极搭讪金句。我问她想不想看我的家庭作业。于是。
那,那,那真的很顺滑。你做得确实很顺滑。
我稳操胜券了。所以,我们从那时起就一直在一起了。
那太棒了。原来你们是这样认识的。
我们认识了,我们当时在读大学。
所以你们在科瓦利斯,在俄勒冈州立大学。在学校表现不错。斯坦福是怎么进入你的视野的?
我一直想去一所优秀的学校。我一直想象着去攻读硕士学位,但我从未想过自己能负担得起。所以在俄勒冈州立大学期间,来自硅谷的招聘人员来了。于是我接受了 AMD 的一份工作。那是一个非常好的选择,因为这份工作确实很有趣。我结识了非常出色的同事。他们当时有一个项目,可以让你去斯坦福工作并同时在 AMD 任职,而且所有费用都由他们承担。那真是一件不可思议的事情。
所以当他们向我提供这份邀约时,我说,等一下,我既可以去 AMD 工作,你们还能支付我优厚的薪水。而且你们还要资助我同时去斯坦福深造。他们回答说,是的。
你说那听起来很不错。
那听起来简直就像美梦成真。所以我接受了那份工作。然后,当然,一年后,Lori 毕业了。我们结婚了。接着生活开始了。所以我断断续续地选修了一些课程,中间穿插了一些休学时间。总而言之,我大概花了八年时间才拿到学位。我可能是斯坦福在读时间最长的学生。没有人比我为在斯坦福接受教育支付过更多的费用。在此期间,Spencer 和 Madison 出生了。在此期间,Spencer 和 Madison 出生了。
我是在 NVIDIA 找到这份工作的。说实话,在我任职的整个期间,也就是在斯坦福求学的那段时间里,我的人生经历了这一切。当你还在学校时,你会觉得学校的功课非常学术化。原因在于你无法确定学习这些内容是否有任何目的或益处。同时兼顾工作与学业,特别是在斯坦福,我能看到许多被传授的原理带来的益处。以及它们对我如今所做的一切有多么重要。因此,能同时经历这一切是一种巨大的荣幸。我的家庭、孩子、公司、斯坦福,还有工作,所有这些汇聚成了一锅巨大的汤。
人们常谈论硅谷及其生态系统。但你刚才用了一个非常棒的词。它确实就像是一锅大杂烩,你会遇到非常有趣的人,他们会改变你对某些事物的看法。而这会引向新的事物。听起来斯坦福对你而言就是这样一个地方。
创立 NVIDIA:挑战通用计算
这彻底塑造了我对计算机科学及其对行业影响的态度和视角。而产业战略,即技术、应用、基础科学以及计算机科学战略之间的整个交汇点,对我而言,确实是在那个时期形成的。没错。那真的很棒。
早期创始人故事总是非常引人入胜,因为你必须去冒险。你必须承担风险。你并不确定它是否会成功。但最初让您和您的联合创始人们觉得“或许我们能做成这件事”的核心想法是什么?
当时正值 PC 革命的开端,也是摩尔定律的初期,以及 CPU 时代的开端,那个不可思议的技术引擎真正改变了一切。在硅谷,一切都围绕着 CPU。一切都围绕着通用计算。一切都围绕着 CPU。一切都围绕着摩尔定律。一切都围绕着 PC。当时我和 Chris Curtis 正在同时考虑两个想法。
其中一个想法当然是,每一个有趣且有意义的应用程序是否都能在 CPU 上运行?我们相信存在着太多的需求。需要解决的问题,无论是实时计算机图形学,这在当时是计算机科学中最困难的问题之一。现在,或者是模拟以及除此之外的其他事情,一台普通的计算机,比如仅配备 CPU 的计算机,显然不可能是正确的形态。我们认为还有另一种工具可以增强 CPU,使计算机本质上成为一台超级计算机。这就是其中一个想法。
第二个想法是,我们究竟该如何创办这家公司?问题在于 CPU 在当下,即通用计算,发展至今已有大约 64 年历史。计算机行业的特性在于,如果你创造了一种能为应用程序带来益处的架构,装机量就会上升,销量就会增加,应用程序对它的利用率也会提高,这种良性循环会促使两者相互促进其自身。事实上,在过去 64 年里,有如此多的应用程序构建 on CPU 之上。你究竟该如何促使应用开发者去考虑另一种架构呢?
另一种架构,对吧。
这种先有鸡还是先有蛋的问题极其难以解决,且从未被解决过。事实上,除了今天的 NVIDIA 之外,实际上其他所有东西都在 CPU 上运行。因此,我们想要让开发者采用这种新架构的想法面临着巨大的困难。所以问题在于,第一个应用场景是什么?没错。这让 NVIDIA 想到了第二个主意,也许第一个应用场景是计算机图形学。
但问题是,当时的计算机图形学市场非常小。那会儿只有 Silicon Graphics。
对,没错。
Silicon Graphics 虽然是一家大公司,但以计算机架构的标准来看,它非常、非常小。所以问题在于,确实非常小。所以问题在于,我们该如何找到一个既需要这种架构,同时又能具备足够大的市场体量,从而推动这种架构普及的应用场景呢?
对,没错。
所以我们想,或许可以尝试电子游戏的 3D 图形技术。
电脑游戏不仅充满乐趣,而且它们在推动计算能力极限方面,可能比任何其他应用领域都更为突出。个人电脑的升级需求往往不是由家中的成年人驱动的,而是源于那些想要更强劲游戏性能的年轻群体。好的,所以你带来了这款全新的 G4-3 显卡。
没错,正是如此。G4-3 是 NVIDIA 最新一代的图形处理器。为了让你有个概念,这款产品实际上集成了一个拥有 5700 万个晶体管的图形处理器。这比 Pentium 4 和 Pentium 3 加起来的晶体管数量还要多。
我刚刚描述的就是一份商业计划。是的。那是不可能获得融资的。确实如此,我至今还记得当时解释这份计划的情景。每个人都在说,是啊,但这又是这样又是那样,云云种种。这需要先解决这个问题,而且存在多种鸡生蛋、蛋生鸡的悖论。
然而硅谷,就在这里,Sand Hill Road 的人会为我提供融资。红杉资本和 Sutter Hill,没错,他们会成为这家公司的投资者,我们也将有能力吸引世界上最聪明的头脑、最顶尖的计算机科学家来这里工作。但我们坚定地认为,从第一性原理出发,通用计算机绝不可能是唯一的计算平台。没错。而且一定有办法实现。如果我们能引入这个新理念,就有太多有趣的问题可以解决了。
图形处理器首次变得像 CPU 一样可编程。我们拥有了一套指令集。就像 Intel 处理器拥有一套指令集,你可以用它来编写 Microsoft Word 或 Windows 程序一样。我们现在拥有了一套指令集,游戏程序员可以利用它在我们的处理器上创建特效。
所以你当时确实是在逆水行舟。那些你试图去说服的人们。长达 30 年。30 年。但后来发生了一些事,你所解决的问题,结果证明还有许多其他应用场景。
NVIDIA!这是参与上网本爆发式增长的最佳方式。没错,就是 NVDA。首先,这家公司了解上网本带来的机遇。引用一句,越来越多的人证明了他们希望能够随身携带电脑。
Nvidia 在几个月前找到我们,并向我们介绍了一款令人惊叹的产品。他们想要打造的图形部件。
我们当时回应说,这太棒了,但我们希望能将其应用于笔记本电脑中。
我们能在这方面展开合作吗?我们与 Nvidia 已经合作了许多个月,他们确实创造出了非常出色的成果。
爆发前夜:加速计算与深度学习的汇流
我记得曾在斯坦福听过你的演讲,你说过,我们只是不断尝试去解决难题。
计算机图形学本质上是对世界的模拟。这是一个模拟问题。在很多方面,人工智能是对心智的模拟。是对大脑的模拟。因此,仿真的计算并非完全不可拆分,很大程度上是可以并行完成的。所以,用于仿真的处理器架构与用于任务执行的架构会有所不同,后者遵循的是第一步、第二步、第三步这样的操作流程。在仿真场景下,世界是同时且并行发生的。
基于这一基本原理,人们会认为对世界的仿真,无论是量子物理、牛顿物理还是其他范畴,都应采用与流程执行及指令执行完全不同的架构。这就是那个极其宏大的核心理念。那么接下来的问题是,如何通过技术将这一理念付诸实践?第一点。第二点,如何为其找到应用场景?当然,我们发现的第一个应用领域是计算机图形学。
第二个应用领域是地震数据处理或反向物理模拟,包括 CT 重建、超声波及地震波分析等,这些本质上是非常相似的问题。我们发现的下一个问题是分子动力学和牛顿物理学。问题接二连三,我们不断发现一个又一个的问题。后来有一天,一些研究人员,包括在斯坦福的吴恩达,在多伦多大学的 Jeff Hinton,以及在纽约大学的 Yann LeCun,他们都在尝试解决一个类似的问题,即深度学习。他们联系了我们,正如你所知,保持警觉的我意识到这是一个我们确实能够做出贡献的问题,我很高兴能提供帮助。
由于我们共同开展的工作,它实现了前所未有的计算机视觉能力。难以想象。由于它的成功,引发了更进一步的内省。它为什么有效?它还能做些什么?它能走多远?这对计算机科学意味着什么?这对我们所构建的整个行业意味着什么?于是,我们一步一个脚印,将一切拆解回其第一性原理。然后,我们又该如何重建,以适应那个未来的世界?我们该如何应用我们所掌握的所有技术?我们该如何一步步前行,从而既能探索这未知的未来,又能兼顾当下?
因此,这一切的核心在于推理、愿景、战略、自律与耐心。信念。信念。在坚毅的核心中,我们历经磨难才走到今天。是的。我们确实经历过苦难。这一路走来,每一步我们都历经磨难,因为起初根本没有人相信这件事。没错。所以我们拥有了长达十年的时间来构建这一切,那时甚至还没有人关注我们。当然,最困难的部分在于,你所从事的事业没有任何正面反馈,也没有任何外部激励。
你是如何保持动力,又是如何让你的员工保持动力的?因为在那段时间里,NVIDIA 并不是硅谷任何人挂在嘴边的名字。当时还有各种样其他的事情正在发生。你是如何做到不仅自己保持专注,还能让整个员工队伍、让工程师们始终相信这一点?那一定需要相当震撼人心的励志演讲吧?你是怎么做到的?
首先,我们必须相信我们所做的事情。我们必须回归我们的核心价值观。正如你所知,在几乎所有伟大的成就中,你都必须回归你的核心基石。你必须证明自己决心去追求那个目标。证明你能在脑海中预见到那个未来,即使其他人还无法看到。你能在脑海中预见到那个未来。你必须讲述这个故事,让其他人也能在他们的脑海中预见到它。并且你自己必须对此深信疑。欢迎参加 World First Conference,这是致力于我们行业,致力于视觉计算行业的盛会。
欢迎参加 GTC 2010。GTC 旨在庆祝因 GPU 计算革命而成为可能的伟大发现和惊人发明。GTC 是对你们工作的致敬与庆祝。
这必须首先从你自身出发,你的核心信念是什么?你认为这种未来会发生的理由是什么?你可以这样评价美国,评价斯坦福,也可以评价 NVIDIA。美国拥有核心基础。我们之前稍微谈到过这一点。美国梦拥有核心基础。它之所以存在是有原因的。有一种目标在驱动着它。它承载着一种承诺。有几大支柱支撑着它。当你透过我的视角审视这个世界,透过我的视角看待美国,以及当你审视当今的美国时——正如我走访世界各地,透过我去过的每一个地方、那些渴望成为我们的国家,以及那些渴望加入我们行业的产业的视角来看待美国时。这真的是一个奇迹。
自由与未来:美国梦的化身
这真是一个奇迹。我经常教导年轻人,当然,有时我觉得其中一些东西已经遗失了。这种冒险精神,这种愿意承担失败的意愿,确实非同寻常。身处一个能让你获得第二次机会的地方,这本身就是事实。言论自由的作用,以及可靠法律的作用,确实是非常非凡的。
我们有一个词来形容它。我们称之为自由。
我们称之为自由。而这种自由成就了如此多的一切。
正是如此。
你会对他们说些什么?因为很遗憾,现在我的学生中存在一种恐惧感,一种感觉。一种觉得自己无法实现那些目标的感觉。也许是因为这个世界,比如我会因为 AI 而失业,或者怀疑那个美国梦是否依然真实存在?你会对他们说些什么?
我总是会回归到第一性原理。我总是会从第一性原理出发进行推理。当我无法确定未来,当事物发展过于迅速时,你总是要回归到第一性原理。我的核心价值观是什么?是什么让我今天变得卓越?我的志向是什么?回归到这一点,我想对年轻人说,同时拥有多种情感是可能的。同时拥有多种情感是可能的。你可以对所拥有的一切心怀感激,同时对我们当前的处境感到不满,并怀有追求卓越的抱负。你完全可以同时拥有所有这些感受。
投身于技术变革,投身于改变世界,这是成就卓越的唯一机会。在现状之下,想要做出改变是非常困难的。因此,我会深入钻研人工智能的能力,并尽可能地在方方面面使用它。这不仅仅关乎科学的精通,不仅仅关乎对科学的掌握,更关乎如何在你所处的科学领域精通并掌握人工智能的使用。如果你决定从事医学,你的目标就是关怀他人。这与研究放射科影像扫描结果有着本质的不同。
作为一名工程师,你的目标要么是解决一个已知的问题,要么是发现那些从未被解决过但又值得去解决的问题。我们在工作中执行的任务与我们工作的目标之间存在着本质的区别。令人惊讶的是,每个人的目标,或者说每一项工作的目标,虽然都由具体的任务组成,但并不能由这些任务来定义。
实际上,让我们来谈谈 AI,因为你现在是整场 AI 革命的核心基石。是的。但你对这项技术持乐观态度。审慎的乐观主义者。请为我描述一下什么是审慎的乐观主义,因为有些人,毕竟我们在硅谷生活了很久。当然,也有些人属于那种盲目狂热的乐观主义者。那么,你想跟我聊聊什么?聊聊审慎的乐观主义意味着什么,以及你是如何思考这个问题的。
是的。智能是社会各个层面、工业各个领域以及我们所从事的一切事业的基础。在我们所做的几乎每件事中,核心要素都是智能。当然,我们必须保持谨慎。我们必须保持谨慎,以便在尽可能快速地推进技术发展的同时,确保它能按照我们承诺的方式运作。确保其功能性。确保其功能性。如我们所期望的那样。确保它不会产生所谓的智能。那种听起来像是智能,但实则不然的东西。那是有缺陷的。功能性事物更安全。我希望我的汽车能按承诺的那样正常运行。AI 需要按承诺的那样正常运行。
当您从国际视角等层面思考整个问题时,目前的现状有哪些令您担忧的地方?
我认为挑战之一在于定义什么是 AI?这可能是最重要的问题之一。关于这项技术有很多不同的思考方式,但其中一种方式是将其想象成一层层的千层蛋糕,我们需要在每一层都取得胜利。第一层仅仅是能源。能源、土地电力和外壳。第一层。第二层是芯片层,也就是我所处的领域。第三层是基础设施层,类似于云服务。再往上一层是AI模型层。这就是大家都在谈论的地方。没错。
但这并不是唯一的一层。关于那一层的一切都非常重要。但归根结底,对我们国家而言,最重要的一层是它之上的那一层,即应用层。没错。将AI应用于医疗保健、军事、国防、网络安全、交通运输以及制造业,这将是推动我们行业向前发展的动力。但我确实认为我们国家也必须高度警惕,因为这是一个非常关键的时刻。
尽管我们处于领先地位,尽管我们是世界领袖,但在技术发生转折的时刻,恰恰是领导地位可能发生更替的时候。我们必须确保在制定政策时,不会阻碍最重要的一层,即最高层,也就是应用层。这是关键的一层,谁能在这一层取得最大进展,谁就能从这场工业革命中获得最大的红利。
有人从台湾来到这里,当时他们才 9 岁,结果竟然落脚在肯塔基,后来因为朋友去了俄勒冈州立大学,家人也在那儿,于是他们也去了俄勒冈州立大学,再后来因为有人愿意资助,他们又进入了斯坦福。你遇到了一群人,他们或许是智力上的天才,但全靠自力更生。
没错,我就是那个在 Denny's 打工的服务生,遇到了 Chris 和 Curtis 这两位天才,这就是故事的走向。没错,故事就是这样,没错。
而你们基于一个想法创办了这家公司。所以,在这一想法最终证明你们是正确之前,这种事只会发生在 美国 吗?是因为你们提到的那些基础制度 and 理念,才导致它只会发生在 美国 吗?
我认为这是一系列极低概率事件连锁反应的结果,最终促成了这种结局。如果没有美国提供的顺风,美国提供的是顺风,而不是逆风。它提供了顺风,以及那些清晰易懂、值得信赖的法律和规则。一个商业环境,一个工业环境,人们遵循着你可以理解并信赖的规则行事。当每个人都遵守规则时,因为这些规则和法律的存在是有充分理由的,那么至少你可以发现 market 中哪些部分尚未得到充分服务。而且你是可以依赖这一点的。你可以信赖这样一个事实:你可以创造出伟大的产品,并以一种满足市场需求的方式将其推向市场。而且它不会被随机、武断、无知地,或者说不可预见地剥夺。那些创业者所依赖的东西,在这里依然充满活力。
作为一个移民,你是出于选择来到这里的。你见证了一个奇迹,因为与你曾经生活的地方以及你所处的环境相比,这确实是一个奇迹。这里的资源令人难以置信,而且极其丰富。你想要努力工作,因为你渴望成功。作为一个创业者,你渴望成功。如果你不每天都努力工作,你就会失败。创业精神与移民精神,其实相当相似。行为也很相似。
非常相似。
确实如此。你们有着相同的感受。是的。我确信我对 NVIDIA 的感受,以及我那种想要做得更好的持续紧迫感,与我父母为养家户口而奋斗时的感受完全一样。他们别无依靠,没有退路。我无法想象还有什么地方能实现这一切。没错。这确实是,NVIDIA 确实是一个只可能发生在美国的故事。从很多方面来看,我也是一个只可能发生在美国的故事。
这一切发生在一代人的时间里。我指的不是什么第五代移民的事情。我指的不是什么第三代移民的事情。这一切就发生在我这一代人身上。我的父母为了来到这里放弃了一切,毫无退路。他们牺牲了毕生精力为子女建立生活,好让我们拥有比他们更多的机会;而这个国家为我和所有人创造了机会,提供了资源、体制、制度和基础,使得像 NVIDIA 这样的公司成为可能。我就是美国梦的化身。







