开始：腾讯科技【MAST-007】3Dバーチャル彼女 木下若菜

作家：李海丹

北京时辰7月30日，$英伟达 (NVDA.US)$在好意思国丹佛市举行的顶尖磋商机图形大会SIGGRAPH 2024上展示了在渲染、仿真和生成式AI边界的多项最新发达。

旧年的SIGGRAPH，英伟达推出GH200、L40S显卡、ChatUSD循序登场。而本年的主角，是英伟达在生成式AI期间的新王牌——“Nvidia NIM”全新升级，况兼通过NIM 将生成式 AI 应用于 USD（通用场景刻画），拓宽AI在3D天下的可能性。

01 Nvidia NIM升级：既是福音，亦然挑战

英伟达秘书，Nvidia NIM罢了了进一步优化，并法度化了AI模子的复杂部署。NIM是英伟达在AI布局中的环节一环。黄仁勋屡次对NIM带来的创新赞誉有佳，称其是“AI-in-a-Box， 履行上它即是盒子里的东谈主工智能。”

此次升级无疑沉着了英伟达在AI边界的招引地位，成为其期间护城河的弥留构成部分。

一直以来，CUDA被觉得是英伟达在GPU边界确立招引地位的环节身分。借助CUDA的复旧，GPU从单一的图形处理器发展成为通用的并行磋商开导，使得AI开发成为可能。不外，尽管英伟达的软件生态系统尽头丰富，但关于零落AI基础开发才气的传统行业来说，这些散播的系统仍然过于复杂和难以掌持。

为了措置这一问题，在本年3月，英伟达在GTC大会上推出了NIM（Nvidia Inference Microservices）云原生微服务，将昔时几年开发的总共软件集成在一齐，以简化和加快AI应用的部署。NIM可将模子行为优化的“容器”，这些容器可部署在云表、数据中心或责任站上，让路发东谈主员豪放在几分钟内完成责任，比如马虎为副驾驶、聊天机器东谈主等构建生成式 AI 应用要津。

到当今，Nvidia布局的NIM生态系统照旧可提供一系列预测验的AI模子。英伟达秘书，匡助开发者在多个边界加快应用开发和部署，况兼要点在不同的边界（如清爽、数字东谈主、三维开发、机器东谈主期间和数字生物学）中提供的具体AI模子：

Nvidia NIM（Nvidia Inference Model）提供的服务过火具体模子

清爽标的，NIM可使用Llama 3.1和NeMo Retriever，擢升文本数据的处理才气；数字东谈主标的，提供了Parakeet ASR和FastPitch HiFiGAN等模子，复旧高保真语音合成和自动语音识别，为构建编造助手和数字东谈主类提供了强劲的器用；

在三维开发方面【MAST-007】3Dバーチャル彼女 木下若菜，USD Code和USD Search等模子简化三维场景的创建和操作，匡助开发者更高效地构建数字孪生和编造天下；

在机器东谈主具身标的，英伟达推出了MimicGen和Robocasa模子，通过生成合成通达数据和模拟环境，加快了机器东谈主期间的研发和应用。MimicGen NIM 可凭据 Apple Vision Pro 等空间磋商开导纪录的汉典操作数据，生成合成通达数据。Robocasa NIM 可在 OpenUSD (一个用于在 3D 天下中进行开发和结合的通用框架)中生成机器东谈主任务和仿真就绪环境。

数字生物学边界的DiffDock和ESMFold等模子，则在药物发现和卵白质折叠展望方面提供了先进的措置决策，推进了生物医学盘问的发达等等。

此外，Nvidia秘书Hugging Face推理即服务平台也由Nvidia NIM提供复旧，在云表初始。

通过整合这些多功能模子，Nvidia的这种生态系统不仅擢升了AI开发的效力，还提供了创新的器用和措置决策。不外，尽管Nvidia NIM的诸多升级关于行业如实是一大“福音”。但从另一面来看，也给要津员们带来了好多挑战。

Nvidia NIM通过提供预测验的AI模子和法度化的API，大大简化了AI模子的开发和部署过程，这关于开发者来说如实是一大福音，关联词否也意味着无为要津员的奇迹契机异日或将进一步镌汰？毕竟，企业不错用更少的期间东谈主员完成一样的责任，因为这些任务照旧由NIM事先完成，无为要津员可能不再需要进行复杂的模子测验和调优责任。

02 教AI用3D想维进行想考，构建编造物理天下

英伟达在SIGGRAPH大会上也展示了生成性AI在绽放USD和Omniverse平台上的应用。

英伟达秘书，构建了天下上首个豪放清爽基于 OpenUSD（Universal Scene Description 通用场景刻画）讲话、几何、材料、物理和空间的生成性AI模子，并将这些模子打包为Nvidia NIM微服务。现时，在Nvidia API目次中有三个NIM可供预览：USD Code，用于申报绽放USD的学问问题并生成绽放USD Python代码；USD Search，允许开发者使用当然讲话或图像输入搜索强大的绽放USD 3D和图像数据库；USD Validate，可查验上传文献与绽放USD发布版块的兼容性，并使用Omniverse云API生成完全RTX渲染的旅途跟踪图像。

英伟达暗示，跟着Nvidia NIM微服务对OpenUSD的增强和可拜访性，异日九行八业都不错构建基于物理的编造天下和数字孪生。通过基于绽放USD的新的生成性AI和Nvidia加快开发框架，这些框架构建于Nvidia Omniverse平台之上，更多行业当今不错开发用于可视化工业想象和工程项指标应用要津，以及用于模拟环境以构建下一波物理AI和机器东谈主。此外，新的USD贯穿器将机器东谈主和工业模拟数据样式以及开发者器用贯穿起来，使用户豪放将大边界、完全由Nvidia RTX后光跟踪的数据集流式传输到Apple Vision Pro。

国产主播

简而言之，通过Nvidia NIM引入USD，通过大模子更好的清爽物理天下和构建编造天下，这是一笔尽头厚爱的数字钞票。举个例子，在2019年，法国巴黎圣母院遭受严重失火，教堂大面积被毁。运道的是，育碧游戏想象师曾大量次造访这座建筑物，学习它的结构，完成了对巴黎圣母院的数字规复责任，在3A游戏《刺客信条：大立异》，重现了巴黎圣母院的总共细节，也给巴黎圣母院的培植带来很大的匡助。那时想象师和历史学家用了两年的时辰来复刻，但跟着该期间的推出，异日针对数字副本的重现咱们不错大边界的提速，通过AI来更追究化的清爽和复刻物理天下。

再比如，想象师在Omniverse中构建基础三维场景，并期骗这些场景转机生成性AI，罢了可控和结合的内容创作过程。比如WPP与好吃可乐公司领先聘请这一责任历程，来扩大其群众告白行径。

Nvidia还秘书行将推出几种新的NIM微服务，包括USD Layout、USD Smart Material和FDB Mesh Generation，以进一步擢升开发者在绽放USD平台上的应用才气和效力。

此次NVIDIA Research携20多篇论文参会，共享波及推进合成数据生成器和逆渲染器用发展的创新后果，其中两篇取得了期间最好论文奖。本年展示的盘问标明，AI通过擢升图像质料息争锁新的3D暗示阵势，使模拟才气变得更好；同期，修订的合成数据生成器和更多内容也提高了AI的水平。这些盘问展示了Nvidia在AI和模拟边界的最新发达和创新。

图注：Getty Images生成性AI案例

英伟达暗示，想象师和艺术家当今有了新的修订阵势，通过使用基于许可数据测验的生成性AI来提高分娩力。比如Shutterstock（好意思国图片供应商），推出了其生成性3D服务的买卖测试版。它仅需使用文本或图像提醒，使创作家豪放快速原型化3D钞票，并生成360 HDRi布景以照亮场景；以及Getty Images（好意思国图片交游公司）加快了其生成性AI服务，使图像生成速率加倍，提高输出质料。这些服务基于多模态生成性AI架构Nvidia Edify，通过新模子速率加倍，擢升了图像质料和提醒准确性，让用户豪放为止相机成立，如景深或焦距。用户不错在大致六秒钟内生成四张图像，并将它们放大到4K差别率。

03 结语

在黄仁勋出现的各大局面中，他老是穿戴一袭皮衣，向天下描画AI所带来的振奋东谈主心的异日。

咱们也资历着英伟达的成长，目击英伟达一步步从游戏GPU巨头到AI芯片霸主、再到纵横AI软硬件全栈式布局，英伟达的策画皆备，在AI的期间波浪最前沿快速迭代。

从可编程着色GPU、CUDA加快磋商，到Nvidia Omniverse和生成式AI NIM微服务的推出，再到推进3D建模、机器东谈主模拟和数字孪生期间的发展，也意味着新一轮AI产业的改动降临。

不外，跟着大公司领有更多的资源，包括资金、期间和东谈主力，豪放更快地聘请和引申Nvidia NIM等先进期间。而中小企业由于资源有限，可能难以跟上期间发展的行径。再加上东谈主才期间水平的不同，异日是否会导致更多的期间不对等加重？

东谈主类之盼愿中的AI，是匡助东谈主类目田双手和劳能源，带给东谈主类更高分娩力的天下。关联词当分娩力和分娩贵寓被少部分东谈主掌持的时候，会不会激励带来更深档次的一场危险？这都是咱们需要想考的问题。

剪辑/Somer

]article_adlist-->

海量资讯、精确解读，尽在新浪财经APP