黄仁勋小扎首次公开对话 聊了大模型开源那些事儿 还互送夹克表情谊

出品|网易科技《态度》栏目

作者|御柳

编辑|丁广胜

扎克伯格是黄仁话聊还互懂得玩梗的。今天,勋小型开英伟达黄仁勋与Meta扎克伯格首次公开对话,扎首常德市某某展览服务运营部两位大佬围绕AI领域新突破话题进行了深度的开对克表交流。在对话结束后,大模扎克伯格从座位后面拿出了一件皮夹克送给黄仁勋,源那而黄仁勋也将身上的事儿送夹皮夹克送给了扎克伯格,台下掌声轰动。情谊


对话中,黄仁话聊还互黄仁勋对Meta的勋小型开开源大模型不吝赞美之词,称Meta在人工智能领域做了很多了不起的扎首工作。他与扎克伯格都认为应该坚持大模型的开对克表开源路线。

近日,大模英伟达宣布推出全新AI Foundry和英伟达NIM(推理微服务),源那与此同时Meta也正式发布了Llama 3.1开源模型,事儿送夹两者一起进行部署,企业可以定制专属模型。可见双方的合作非常紧密。

黄仁勋还提到了英伟达最新推出NVIDIA NIM 微服务。黄仁勋认为:“AI 的下一波浪潮是机器人,其中最令人兴奋的发展之一是人形机器人。我们正在推进整个 NVIDIA 机器人堆栈的发展,面向全球人形机器人开发者和公司开放访问,让他们能够使用最符合其需求的平台、加速库和 AI 模型。”

对于虚拟现实头显设备,扎克伯格认为智能眼镜将会是未来计算机发展的一个重要形态。他认为,智能眼镜将成为下一代计算平台的手机版本。扎克伯格曾经在公开场合表示,Meta今年年底前预计将发布全新的AR智能眼镜,其性能将远超目前的雷朋产品,将彻底颠覆传统眼镜。

在对谈结束之后,大屏幕上出现了此前黄仁勋与扎克伯格交换外套的照片。这是去年俩人吃饭后交换外套时拍到的照片,在网络上引起了广泛的流传。就在此时,扎克伯格起身从座位后面拿起了一件定制皮夹外套,黄仁勋穿上这件定制外套,并将自己身上的那件外套送给了扎克伯格。

“你的这件衣服显然更值钱,因为它是被你穿过的。”扎克伯格开玩笑说到。

据了解,在此次 SIGGRAPH 2024上,NVIDIA正式宣布为全球机器人制造商、AI模型开发者和软件制造商提供一套服务、模型以及计算平台,以开发、训练和构建下一代人形机器人。


以下为黄仁勋与扎克伯格对话实录(AI翻译生成):

黄仁勋:马克,坐下,很高兴你来到这里。欢迎。

这是Siggraph,你知道有90% 的博士。Siggraph真正伟大的事情是计算机图形学、图像处理、人工智能和机器人技术的结合展示。这些年来,一些公司在这里展示并揭示了迪士尼、Pixar Adobe史诗游戏以及你知道的,英伟达今年在这里做了很多工作。我们发布了20篇人工智能与仿真交叉领域的论文。我们正在使用人工智能来帮助模拟更大尺度、更快的速度,例如可微物理学。我们正在使用仿真来创建用于人工智能合成数据生成的仿真环境。因此,这两个领域真正地融合在一起,为我们在Meta所做的工作感到自豪。

我的第一个问题是,你如何看待今天生成式人工智能广告的进步,以及你如何应用它来增强你的运营或引入新功能的?

扎克伯格:首先真的很高兴来到这里,Meta已经做了很多工作,已经参与了Siggraph八年。与你们相比我们是个小人物。我们在2018年展示了我们的虚拟现实和混合现实头显的一些早期手动追踪工作。我们已经谈了很多关于我们在编解码器化身方面取得的进展,我们希望能够从消费者穿戴驱动的真实感化身,我们越来越接近这个目标,对此非常兴奋,并且我们已经完成了许多显示系统的工作。因此,一些未来的原型和研究将使混合现实头戴设备能够变得非常轻薄,就像使用相当先进的光学堆栈和显示系统一样集成系统。

今年,不仅仅是谈论元宇宙的东西,还有所有的AI作品,正如你所说的,我们开始了公平,常德市某某展览服务运营部AI研究中心。当时是Facebook,现在是meta,在我们开始现实实验室之前。我们已经在这方面做了一段时间了,围绕着基因AI的所有东西,这是一场有趣的革命,我认为它将会最终制造出我们所做的所有不同的产品,你可以看看我们已经拥有的大产品线。像feed和推荐系统、Instagram和Facebook这样的东西,我们一直在这个旅程中,从仅仅与朋友联系变得越来越重要。排名总是很重要,因为即使你只是在跟随朋友,如果有人做了一些非常重要的事情,比如你的表弟生了一个孩子或其他事情,你也希望自己能排在最前列,如果我们把它埋在信息流里,你会对我们非常生气,所以排名很重要。但在过去的几年里,它已经发展到这样一个程度,即更多的东西只是不同的公共内容,推荐系统非常重要,因为现在不仅有几百或1000个潜在的候选人帖子来自朋友,还有数百万条内容。这就变成了一个非常有趣的推荐问题。随着生成式AI的出现,我认为我们将迅速进入一个时代,你今天在Instagram上看到的东西,刚刚向你推荐了一些与你的兴趣与你是否关注人群相匹配的东西。

我认为在未来,很多这些东西也将用这些工具创建,其中一些将成为创作者使用工具来创建新内容。我认为其中一些内容最终要么是即时为您创建的内容,要么是通过不同的事物组合在一起并合成的内容。因此,这只是我们所做的核心部分将如何发展的一个例子,而且它已经发展了20年。

黄仁勋:但我认为很少有人意识到,世界上最大的计算系统之一是推荐系统。

扎克伯格:是的,这是一个整体,是一个完全不同的道路,对吧?这并不是人们谈论的那种生成式AI热,但我认为这就像它是所有的变压器架构,这是一个类似的事情,只是越来越普遍地建立起来。

黄仁勋:将非结构化数据嵌入特征中。

扎克伯格:是的,我的意思是,推动质量改进的一件大事是过去对于每种类型的内容,你会有不同的模型,对吧?最近的一个例子是,我们有一个模型用于排名和推荐卷轴,另一个模型用于排名和推荐更长的视频,需要一些产品工作来基本上使系统可以显示,任何在线的东西。但是,你越是创建更通用的推荐模型来跨度一切,它就会变得越来越好。所以我的意思是,其中一部分,我认为就像内容的经济性和流动性以及您可以从中提取的更广泛的池一样。你只是没有从不同的池中提取这些奇怪的低效率。但是,随着模型变得更大、更普遍,那就变得越来越好。所以我梦想有一天,你几乎可以想象所有的Facebook或Instagram,就像一个单一的AI模型,将所有这些不同的内容类型和系统统一在一起,实际上在不同的时间框架内有不同的目标,因为其中一些只是展示,你今天想看到的有趣的未来是什么,但也有一些是帮助你长期建立网络的。

黄仁勋:而这些多模态水平往往在识别模式、微弱信号等方面要好得多。所以其中一件事是,AI在你的公司里如此深入,这很有趣。您已经建立了GPU的基础设施,运行这些大型推荐系统很长时间了。

扎克伯格:你现在有点慢,实际上要到Gpu。

黄仁勋:是的,我总是试着友好。

扎克伯格:我知道,你知道的。

黄仁勋:太好了。我试着对你友好,你知道的。

扎克伯格:我猜,当我来到这里之前在后台的时候,你在谈论像拥有自己的错误之类的事情,对吧?

黄仁勋:你不必突然自愿参加。

扎克伯格:我认为这一个已经试过了。是的,就像我被刹车了。

黄仁勋:但是一旦你深入其中,就会变得强大起来。让我们把它放进去。现在关于生成式AI真正酷的事情是,当我使用WhatsApp的这些日子,我感觉自己正在与WhatsApp合作。我喜欢,想象一下你在打字,它正在生成图像。当我走的时候,我会回去改变我的话语,它会产生其他的图像,你知道吗?所以那个中国老人在日落时与三只狗、金毛猎犬、金毛涂鸦和一只伯尔尼山脉狗一起享用一杯威士忌,它产生了一幅相当真实的画面。

扎克伯格:我们正在到达那里。这就是我每个月所努力的。对此非常兴奋。想象一下,我知道我花了很多时间和我的女儿们在一起,把她们想象成美人鱼之类的东西。

在过去的一周里,一切都很有趣。一方面,许多生成式AI东西将会对我们长期拥有的所有工作流程和产品进行重大升级。但另一方面,现在可以创造出所有这些全新的东西。所以meta 人工智能,拥有一个人工智能助手的想法,可以帮助你完成不同的任务,在我们的世界里,将会像你说的那样非常具有创造性。

但我的意思是,它们非常普遍。随着时间的推移,它将能够回答任何问题,我认为,当我们从像Llama 3模型到Llama 4以上的模型时,它会,我认为,感觉不像是一个聊天机器人,就像你给它一个提示,它只是回应,然后你给它一个提示,它就会回应,就像来回一样。我认为它会很快演变成你给它一个意图,它实际上可以在多个时间范围内消失。它可能应该承认你预先给了它一个意图,但我的意思是,如果我认为的一些东西最终会结束,它会启动计算工作,你知道,需要几周或几个月或其他时间,然后回到你这里,就像世界上发生的事情一样。我认为这将是非常强大的。

黄仁勋:所以我的意思是,今天的AI,有点像术语页面,你说一些话,它会对你说一些话。但显然,当我们被赋予任务或提出问题时,我们会考虑多种选择,或者我们会想出一棵选项树,一棵决策树,然后我们走到我们脑海中模拟的决策树,你知道,我们可能做出的每个决定的不同结果是什么,所以我们正在做规划?因此,未来的AIS也会做同样的事情。但是当你谈到你对创造者AI的看法时,我非常兴奋的一件事是,坦率地说,这是一个本家的想法。告诉大家关于创作者AI和AI工作室,这将使您能够做到这一点。

扎克伯格:是的,我们今天将把它推广得更广。你知道,我们的很多愿景是,我不认为会有像1个AI模型那样的东西。这是业内其他一些公司的事情,他们就像一个中央代理一样在构建。我们将拥有您可以使用的meta助手,但我们的很多愿景是希望授权所有使用我们产品的人基本上为自己创建代理。因此,无论是平台上的数百万创作者,还是数亿小企业,我们最终希望能够拉入所有的内容,并非常快速地建立业务代理,并能够与您的客户互动,进行销售和客户支持等。我们现在刚开始推出更多的是我们称之为AI工作室。它基本上是一套工具,最终每个创作者都可以构建自己的AI版本,作为他们的社区可以互动的代理或助手。

这里有一个基本问题,就是一天的时间不够,对吧?这就像,如果你是创造者,你想更多地参与你的社区,但你受到时间的限制。同样,你的社区想要与你互动。做这件事的时间有限。所以下一个最好的事情是允许人们基本上创造这些文物,对吧?

它有点像代理人,但你要训练它在你的材料上以你想要的方式代表你。我认为这是一种非常有创意的努力,几乎就像你在那里展现的一件艺术品或内容。不,很清楚的是,它并没有与创造者本身互动。但我认为这将是另一种有趣的方式,就像创作者如何在这些社交系统上发布内容,以便能够有代理来做到这一点。

同样地,我认为会有这样一种情况: 人们基本上可以为各种不同的用途创建自己的代理。有些是他们正在尝试完成的定制实用工具,他们希望对一些人进行微调和培训,有些是娱乐,有些是人们创造的东西只是有趣的。只是在不同的方面有点傻,或者对事情有一种有趣的态度,我们可能无法,我们可能不会把Meta AI作为助手,但我认为人们,人们对查看和互动非常感兴趣,我们看到的一个有趣的用例是人们使用这些代理来提供支持。

这是一件让我有点惊讶的事情,Meta AI的顶级用例之一已经是人们基本上使用它来进行角色扮演,以及将会遇到的困难社交场合。所以无论是专业情况,都像是,好吧,我想问我的经理,我如何获得晋升或加薪?或者我正在和我的朋友吵架,或者我和我的女朋友遇到这种困难的情况,就像这次谈话如何进行?基本上有一个完全没有评判的区域,在那里你可以基本上进行角色扮演,看看对话将如何进行,并获得反馈。但是很多人,他们不只是想与相同类型的代理人互动,无论是met AI还是ChatGPT,或者其他人都在使用的任何东西。他们想要创造自己的东西。所以,这大概是我们与AI工作室的合作目标,这是我们更大观点的一部分,即不应该只有一种人们与之互动的大型AI。我们只是认为,如果有这些不同事物的多样性,世界将变得更好、更有趣。

黄仁勋:我只是觉得这很酷,如果你是一个艺术家,你可以把你的风格,你所有的作品都进行微调。现在这成为一个AI模型,你可以来并提示它。你可以让我按照我的艺术风格创作一些东西,你甚至可以给我一件艺术品作为素描,一个草图作为灵感,我可以为你创造一些东西。然后你来到我的机器人这里,来到AI这里,它可能是每一家餐厅,每一个网站,我们将来可能会有这些ai。

扎克伯格:是的,我认为在未来,就像每个企业都有,你知道,一个电子邮件地址、一个网站和一个社交媒体账户或几个。我认为在未来,每个企业都将拥有一个与客户交互的AI代理。我认为,其中一些事情在历史上是相当困难的。就像如果你想到任何一家公司,你可能拥有的客户支持只是一个独立于销售的组织。这并不是你希望它像首席执行官一样工作的方式。只是它们是你正在建立的不同技能,这些是您的客户支持吗?

黄仁勋:就像马克作为一个首席执行官一样需要一些东西,你无法判断它是聊天机器人还是它。

扎克伯格:是的,当你在首席执行官时,你必须做所有这些事情,但是当你在组织中建立抽象概念时,很多时候就像一般情况下一样,组织是分开的,因为它们针对不同的事情进行了优化。但我认为,柏拉图的理想是这只是一件事,对吧?作为一个顾客,你知道,你并不在乎,你知道,当你想买东西时,你不想有不同的路线,如果你买的东西有问题,你只是想有一个地方,可以让你的问题得到回答,并能够以不同的方式与业务互动。我认为这适用于创作者,我认为这是个人消费者的一面。

黄仁勋:这就是与客户互动的全部内容,特别是如果他们的投诉将使您的公司变得更好。是的,完全正确,事实上所有与AI的互动都将捕捉机构知识以及如何进行分析,从而改进AI等。

扎克伯格:是的,所以我认为这个商业版本有了更多的整合,我们还处于相当早期的alpha阶段,但是AI工作室正在制造它,以便人们可以创建他们的ubc代理和不同的东西。开始使用飞轮让创作者创造它们。我对此很兴奋。

黄仁勋:好的,我可以使用AI工作室来微调我的图像,我的图像集合吗?

扎克伯格:是的。

黄仁勋:我们要去那里,好的,然后我可以,我可以给它加载我写的所有东西,以便使用它。

扎克伯格:基本上是的。

黄仁勋:然后每次我回到它,它都会再次加载它的记忆,所以它会记得上次离开的地方,然后我们继续谈话,就像什么都没发生过一样。

扎克伯格:是的,就像任何产品一样,它会随着时间的推移变得更好。有了培训工具,它会变得更好。这不仅仅是你想让它说什么。我的意思是,创作者和企业通常也有他们想远离的话题,所以他们在所有这些方面都越来越好,你知道,我认为这不仅仅是文本。你几乎只想能够做到。那么这有点像与我们随着时间的推移所做的一些编解码器化身工作的交集。你想要基本上能够与代理商进行几乎像视频聊天一样的交流,我认为随着时间的推移我们会到达那里。我认为这个东西并不遥远,但是飞轮旋转得很快,所以很令人兴奋。

有很多新的东西要建造。我认为,即使基础模型的进展现在停止了,我认为我们会有五年的产品创新,让行业基本上弄清楚如何最有效地利用迄今为止建立的所有东西。但我实际上只是认为基础模型和基础研究的进展正在加速,所以这是一个相当疯狂的时期。

黄仁勋:你的愿景。

扎克伯格:这就是全部,是你让这一切发生的。

黄仁勋:我们是Ceo,需要很多支持。

扎克伯格:我认为我们是这个行业历史最悠久的两位创始人,对吧?

黄仁勋:我想这是真的。

扎克伯格:你的头发也变白了。

黄仁勋:我的变得灰白了,你的变得卷曲了,怎么了?

扎克伯格:它总是卷曲的,所以我保持剪短。

黄仁勋:如果我知道成功需要这么长时间。

扎克伯格:你永远不会开始。

黄仁勋:恩,我可能会退学。

扎克伯格:嗯,我们的性格有很大的不同。

黄仁勋:你领先了12年。这很好,非常好。

扎克伯格:你做得很好。

黄仁勋:我要继续下去。是的,我喜欢您的愿景,每个人都可以拥有一个AI,每个企业都可以拥有一个AI,我希望每个工程师和每个软件开发人员都有一个AI。我喜欢您的愿景的一点是,您也相信每个人和每个公司都应该能够制造自己的AI。所以当你开源Llama 时,我认为那是伟大的Llama 2.1。

扎克伯格:我的意思是,我认为这是由于H100。

黄仁勋:这是一个先生鸡还是先生蛋的问题。我之所以说这是最大的事件,是因为当它出来时,它激活了每个公司,每个行业的每个企业。突然间,每个医疗保健公司都在建立AIS。每家公司都在建设AI,每家大公司、小公司、初创公司都在建设AI。这使得每个研究人员都能够重新接触AI,因为他们有一个起点可以做一些事情。

然后现在3.1已经出来了,我们一起努力部署3.1。我们正在将其带到世界企业中,而这种兴奋只是超出了图表的范围。我认为它将使各种应用成为可能。但是告诉我你的开源哲学从哪里来的?你知道,你开源了PyTorch,现在它是完成AI的框架。现在你已经开源了Llama 3.1围绕它建立了一个完整的生态系统。所以我想这一切是从哪里来的?

扎克伯格:是的,有很多关于这方面的历史。我的意思是,随着时间的推移,我们已经做了很多开源工作。我们是在其他一些科技公司之后开始建设像分布式计算基础设施和数据中心这样的东西,因此,当我们建造那些东西时,它并不是一个竞争优势。我们不妨让它开放,然后我们将从围绕它的生态系统中受益。所以我们有很多这样的项目。我认为最大的一个可能是开放计算,我们进行了服务器设计、网络设计以及最终的数据中心设计并发布了所有这些。通过使这成为某种程度上的行业标准,所有的供应链基本上都围绕它进行了组织,这有利于为每个人省钱。因此,通过将其公开和开放,我们基本上可以节省数十亿美元。

黄仁勋:嗯,开放计算也是英伟达HGX得以实现的原因,因为我们设计了一个数据中心,每个数据中心都可以工作。

扎克伯格:那是一次很棒的经历。我们已经使用了许多基础设施工具,比如React PyTorch。所以我想说当Llama 到来的时候,我们是倾向于这样做的。特别是对于AI模型,我想有几种方式来看待这个问题。在公司过去的20年里,建造东西真的很有趣。

其中最困难的事情之一就是必须面对这样一个事实: 我们通过竞争对手的移动平台发布我们的应用程序。因此,一方面,移动平台对行业来说是一个巨大的福音。另一方面,必须通过竞争对手交付产品是具有挑战性的,Facebook的第一个版本是在网上开放的。作为向移动设备的过渡,好的一面是现在每个人都在口袋里有一台电脑。缺点是我们在能做什么方面受到了更多的限制。

因此,当你看到这几代计算技术时,存在着巨大的时新偏见,每个人都只看移动设备并认为,好吧,因为封闭生态系统,因为苹果基本上赢了并设定了条款。我知道技术上有更多的Android手机,但像苹果基本上拥有整个市场和所有利润,基本上Android在开发方面有点跟随苹果。所以我认为苹果很明显赢得了这一代,但并不总是这样。或者即使你回到一代人之前,你知道苹果正在做他们那种封闭的事情,但是微软,它显然不像这个完全开放的公司,但与苹果相比,在所有不同的oem和不同的软件上运行Windows,不同的硬件,它是一个更加开放的生态系统。而Windows是领先的生态系统。我希望在下一代计算中,我们将回到开放生态系统获胜并再次领先的区域,总会有一个封闭的生态系统和一个开放的生态系统。

我认为两者兼而有之是有原因的,对双方都有好处。我在这方面不像狂热者,我们做封闭源代码的东西。我并不是我们发布的所有内容都是开放的,但我认为对于整个行业正在构建的计算平台来说,如果软件尤其是开放的,那么它就有很大的价值。这真的塑造了我对此的哲学。对于与Llama 合作的AI以及我们在AR和虚拟现实方面所做的工作,基本上,我们正在将我们为混合现实构建的地平线操作系统变成一个开放的操作系统,以感知Android或Windows的类型,并基本上使其成为这样,但我们将继续为了能够与许多不同的硬件公司合作制造各种不同类型的设备,我们基本上只是想将生态系统恢复到开放的水平。我非常乐观地认为,下一代开放的人将会赢得胜利。

未来10或15年的一件事是,我只是想确保我们能够构建我们将要构建社交体验的基本技术,因为我试图构建的东西太多了,在某种程度上,我们将一路建设并确保这一点。

黄仁勋:我认为这是一个伟大的世界,有人致力于建造最好的AIS,无论他们如何建造它,他们制造它,他们向世界提供它,作为一种服务。但如果你想建立自己的AI所以完全能够写作,使用AI,你知道,有很多东西。

现在你建立一个模型的方式,它是以透明的方式建立的,你要奉献它,你有一个世界级的安全团队,世界级的道德团队,你可以以这样一种方式建立它,每个人都知道它是正确建立的。所以我真的很喜欢它的那一部分。

扎克伯格:是的,我的意思是,只是为了完成之前的想法,我在那里绕道而行,我们正在建造它,因为我们想要这个东西存在,我们想把它从某个封闭的模型中剔除,对吗?但这不仅仅是一个你可以构建的软件。你知道,你需要一个围绕它的生态系统。所以它几乎就像它一样,如果我们不开源它,它几乎不会那么好。我们这样做不是因为我们是无私的人,尽管我认为这对生态系统有帮助。我们这样做是因为我们认为通过拥有一个强大的生态系统,这将使我们正在构建的东西成为最好的。

黄仁勋:仅视频一项,我们可能有几百人专门致力于使PyTorch变得更好、可扩展、更高性能等等。

扎克伯格:是的,当某些东西成为行业标准时,其他人也会解决它。因此,就像所有的硅和系统一样,最终将被优化以非常好地运行这个东西,这将使每个人受益。但它也将与我们正在构建的系统良好运行。我认为,这只是一个例子,说明这最终如何真正有效。我认为开源策略将会是一个很好的商业策略。我认为人们仍然不完全了解。

黄仁勋:我们非常喜欢它。我们围绕它建立了一个生态系统。我们建造这个东西。

扎克伯格:每次我们发布时,你们都是第一个发布并优化它并使其工作的人。我很感激。

黄仁勋:我能说什么呢?我们有优秀的工程师。我们建立了这个概念,称之为一个AI工厂AI铸造厂,这样我们就可以帮助很多人都有建造AI的愿望,拥有AI非常重要,因为一旦他们把它放入他们的飞轮中,他们的数据飞轮,这就是他们公司的机构知识被编码并嵌入到AI中的方式。所以他们负担不起那个AI飞轮,即在其他地方经历过飞轮的数据飞轮。所以开源允许他们这样做,但他们真的不知道如何将整个事情变成AI。所以我们创造了这个叫做AI铸造厂的东西。我们提供专业的拉玛技术工具,我们有能力帮助他们将这整个事情变成一个AI服务。然后当我们完成后,他们拿走了它,他们拥有它。它的输出就是我们所说的Nim。神经微型英伟达推理微服务,他们只是下载它,拿走它,然后在任何地方运行它,包括在本地,我们有一个来自oem的合作伙伴生态系统,可以运行Nims到Gsis,就像我们训练和合作的谴责,以创建基于Llama 的NIM和管道。

现在我们正在帮助世界各地的企业做到这一点。我的意思是,这真的是一件非常令人兴奋的事情。这实际上都是由Llama 开放的采购引发的。

扎克伯格:是的,我认为帮助人们从大模型中提炼出自己的模型的能力将是一个非常有价值的新事物,就像我们在产品方面谈论的那样,至少我不认为会有一个主要的AI代理商,每个人都会与之交谈。它处于同一水平。我不认为一定会有每个人都使用的模型。

黄仁勋:AI正在运行。让我们假装我们正在雇用那个AI。用于芯片设计的AI可能每小时10美元,你知道吗?如果你经常使用它,并且在一大堆工程师中分享AI。因此,每个工程师可能都有一个与他们坐在一起的AI,成本并不高。我们付给工程师很多钱。对我们来说,每小时几美元可以增强一个真正有价值的人的能力。

扎克伯格:是的,你不需要说服我。

黄仁勋:如果你还没有,如果你还没有雇用过AI,那就马上做。这就是我们所说的全部。那么让我们谈谈下一波。你知道,我非常喜欢你们的工作,计算机视觉,我们内部经常使用的模型之一是将一切都分段。而且你知道我们现在正在视频上训练人工智能模型,以便我们能够理解世界模型、机器人和工业数字化的用例,将这些人工智能模型连接到全宇宙中,以便我们能够更好地建模和表示物理世界。我有在这些全宇宙世界中运作更好的机器人,你的应用程序将人工智能带入虚拟世界的愿景真的很有趣,告诉我们这件事。

扎克伯格:你所说的第二个任何东西模型,我们实际上正在展示,它现在可以工作,也可以在视频中工作。我想这些实际上是我在科威特牧场的牛。

黄仁勋:我们使用它的原因是,例如,你有一个仓库,他们有一堆摄像头,仓库AI正在监视一切。比如说,你知道,一堆箱子被毡或有人把水溅到地上,无论发生什么事故,AI都会识别它,生成文本,发送给某人。所以这是一种使用它而不是记录所有事情的方式,如果发生事故,开始记录每纳秒的视频,然后回溯并检索那个时刻。它只是记录了重要的东西,因为它知道它在看什么。所以我有一个视频理解模型,一个视频语言模型对于所有这些有趣的应用程序来说非常强大。

扎克伯格:是的,所有的智能眼镜都有。当我们考虑下一个计算平台事业部时,我们会将其分解为混合现实,耳机和智能眼镜。这个智能眼镜,我认为人们更容易戴着它,几乎每个今天戴眼镜的人都会升级到智能眼镜。这意味着世界上有超过十亿人。所以这将是一件相当大的事情。

VR/MR眼镜,我认为有些人觉得它对于游戏或不同用途很有趣,有些人则不喜欢。然而,我的观点是,他们将同时存在于这个世界上。我认为这些智能设备将会成为一种永远在手机上的下一代计算平台事业部。混合现实耳机将更像您的工作站或游戏机,当您坐下来进行更具沉浸感的会话并希望访问更多计算时。

黄仁勋:它恰好发生在所有这些突破和生成式AI发生的时候。

扎克伯格:是的,我们一直在从两个不同的方向解决问题。

一方面,我们一直在构建我们认为是理想的全息AR眼镜所需的技术。我们正在进行所有定制的芯片工作,所有定制的显示堆栈工作,就像所有你需要做的事情一样。它们看起来像眼镜,但它们仍然离你现在戴的眼镜很远。不过,对于一种完整的全息影像,我们已经接近了。在接下来的几年里,我认为我们基本上会更接近。它仍然会相当昂贵,但我认为这将开始成为一个产品。

我们所关注的角度是,让我们从好看的眼镜开始,与世界上最好的眼镜制造商合作。在这个范围内,让我们尽可能多地投入技术,理解我们无法在技术上达到我们想要适应的那种理想状态。但最终,它会像漂亮的眼镜一样。

在这一点上,我们有了摄像头传感器。所以你可以拍照和视频,你可以直播到Instagram,你可以在WhatsApp上进行视频通话并流式传输给其他人。你知道你正在看到什么,你可以,我的意思是,它有一个麦克风和扬声器。所以我的意思是,这个扬声器实际上非常好,它是开放的耳朵,所以很多人觉得它比耳塞更舒适。你可以听音乐,就像这种私人体验一样。这很整洁。人们喜欢这样。你可以用它来接听电话,但事实证明,那个传感器包正是你需要的,你也可以与AI交谈。

这有点意外。如果你五年前问我,我们是否会在AI之前获得全息AR,我会说,是的,很可能.看起来所有虚拟现实和混合现实的图形进展和显示进展,以及建立新的显示堆栈,我们正在不断取得进展。然后这个突破发生了,事实证明,我们现在有了非常高质量的AI,并且在全息投影技术之前以非常快的速度变得更好。所以这种倒置是我没有预料到的。我的意思是,我们幸运地处于有利位置,因为我们正在开发所有这些不同的产品。但我认为你最终得到的只是一系列不同潜在眼镜产品,它们具有不同的价格点和不同的技术水平。所以我有点认为基于我们现在看到的雷禁金属,我猜,以300美元的价格显示更少的AI眼镜将成为一个真正的大产品,最终将有数千万人或数亿人拥有它。

黄仁勋:你将拥有正在与之交谈的超级交互式AI。是的,视觉上的。你有刚刚展示的视觉语言理解能力,你有实时翻译。你可以用一种语言和我交谈,我听到用另一种语言。

扎克伯格:然后显示屏很明显它也会很棒,但它会给眼镜增加一点重量,并使它们更加昂贵。所以我认为会有很多人想要那种全全息显示,但也会有很多人,他们想要的东西最终会像非常薄的眼镜一样。

黄仁勋:对于工业应用和一些工作应用,我们需要它。

扎克伯格:消费者也需要。

黄仁勋:你这么认为?

扎克伯格:是的,在Covid期间,当每个人都有点远程时,你把所有时间都花在Zoom上。我们有这个真是太棒了。但在未来,我们离能够进行虚拟会议已经不是很多年了,就像我不在这里一样,这只是我的全息图,感觉就像我们在那里,我们在场。我们可以一起工作,一起合作。但我认为这将特别重要。

但我想我们会到达它实际存在的地步。在眼镜里面,有更薄的镜框,有更厚的镜框,所有这些款式都有,但是我不这样做,我认为我们离在你的眼镜的外形中配全息图眼镜还有一段时间了,但我认为将它放在一副时尚的、更大块的框架眼镜中并不遥远。

黄仁勋:这些太阳镜现在是宽松的脸型。

扎克伯格:我看得出来。这只是一种外观,这是一种非常有用的风格。这非常有帮助,这就像我正在努力。

黄仁勋:我们现在可以做的事情太多了。和你一起工作真是太棒了,我知道建立一家公司并不容易,你将自己的业务从桌面转向移动设备,转向虚拟现实,转向AI,所有这些设备。观看真的非常非常特别。英伟达自己也改变了很多次,我很清楚这有多难。

扎克伯格:如果你继续做你以前做的事情,但同时也是,但这是你添加的,这一切还有更多章节。

延伸阅读
  • 问界40万台新车下线,余承东辟谣“遥遥领先”罚款一说
  • 7月30日外媒科学网站摘要:利用寄生虫向大脑输送药物
  • 外媒:易用好学,剪映在美国快速崛起,威胁到Adobe
11132.net