Press "Enter" to skip to content

Tag: Universal Scene Description

遇见杂食动物:SiBORG实验室使用OpenUSD和NVIDIA Omniverse提升无障碍性的方法

无障碍性是所有设计师在构建空间或产品之前必须考虑的关键要素,然而传统的评估过程往往令人繁琐且耗时。 新泽西理工学院的建筑与设计助理教授马修·施瓦茨(Mathew Schwartz)正在利用NVIDIA Omniverse平台和通用场景描述(Universal Scene Description)框架(即OpenUSD)来帮助建筑师、室内设计师和工业设计师解决这一挑战。 施瓦茨的研究与设计实验室SiBORG(模拟、生物力学、机器人和图形)专注于理解和改进设计工作流程,尤其是与无障碍性、人因和自动化相关的工作流程。施瓦茨和他的团队开发算法用于研究项目,并将其转化为可用产品。 利用Omniverse这一开发平台,团队开发了基于OpenUSD的开源代码,可以自动生成建筑设计复杂的无障碍性图表。这一代码基于施瓦茨的研究论文《以人为中心的无障碍性图表用于环境分析》。 该图表提供人体运动相关的反馈,例如完成某一路径所需的估计能量消耗、完成路径所需的步数,或者沿途的任何斜坡角度。 借助Omniverse,团队可以使用施瓦茨的代码可视化图表及其生成的路径。这可以帮助设计师更好地评估建筑规范和人员安全性,并提供重要的无障碍性见解。 https://blogs.nvidia.com/wp-content/uploads/2023/12/Pathloop.mp4 OpenUSD 的威力 传统上,在建筑设计过程中,对无障碍性和环境条件的反馈通常局限于建筑规范分析。施瓦茨的工作通过无缝集成Omniverse和OpenUSD,使设计师能够克服这一障碍。 以前,他不得不在多个应用程序之间切换,以完成模拟和建模项目的不同方面。他的工作流程经常涉及Unity等支持人体模拟的工具和McNeel Rhino3D等具备3D建模功能的工具。 通过OpenUSD,他现在可以将研究、Python代码、3D环境和渲染以及常用工具集成到Omniverse中。 “让我对Omniverse着迷的是,它使我能够将Python应用程序编程界面与强大的物理、渲染和动画软件结合起来,”他说。“我的团队充分利用了Omniverse中灵活的Python API,几乎开发了整个用户界面。” 施瓦茨的团队利用Omniverse以与现有的开源Python代码进行可视化和交互,而无需进行外部工作,例如无缝链接到第三方应用程序。实验室的多才多艺的数据分析工具可以与与OpenUSD兼容的任何程序进行交互。 “通过OpenUSD和Omniverse,我们能够扩大我们的研究范围,将数据分析和可视化与设计过程无缝结合起来,”施瓦茨说。 运行逼真的渲染和模拟 施瓦茨还使用Omniverse来模拟人群的移动和互动。 他利用两个NVIDIA RTX…

Leave a Comment

《进入全宇宙:Blender 4.0 Alpha版发布开启了全新时代的OpenUSD艺术之旅》

编辑注:本文是《进入全宇宙》系列的一部分,重点介绍艺术家、开发者和企业如何利用OpenUSD和NVIDIA Omniverse的最新进展来改变工作流程。 对于经验丰富的3D艺术家和新手数字创作爱好者来说,流行的3D软件Blender的Alpha版本正在提升创作之旅。 通过更新的特性,包括精细着色器网络创建和增强的资产导出能力,使用Blender和通用场景描述框架OpenUSD的开发社区正在推动3D领域的发展。 NVIDIA工程师在增强Blender的OpenUSD功能方面发挥着关键作用,这也为与NVIDIA Omniverse一起使用带来了增强功能,Omniverse是用于连接和构建基于OpenUSD的工具和应用的开发平台。 Blender工作流程的通用升级 通过Blender 4.0 Alpha,各行各业的3D创作者和企业能够访问针对不同用例优化的OpenUSD工作流程。 例如,慕尼黑宝马集团技术办公室的设计实习生Emily Boehmer正在使用Omniverse、Blender和Adobe Substance 3D Painter的综合能力创建基于OpenUSD的逼真资产,以训练计算机视觉AI模型。 Boehmer与团队合作创建了用于SORDI.ai的资产,SORDI.ai是宝马集团发布的一个包含80多万张逼真图像的AI数据集。 一个工业货箱的剪辑虚拟“老化”过程。 USD帮助优化了Boehmer的工作流程。她说:“看到Blender和Substance 3D Painter都支持USD真是太好了。当我使用USD创建3D资产时,我可以确信它们在场景中的表现和行为与我的期望一致,因为我可以为它们添加物理属性。” 澳大利亚动画师Marko Matosevic也在他的3D工作流程中充分发挥了Blender、Omniverse和USD的综合能力。 Matosevic开始为他的YouTube频道Markom3D创建教程,以帮助各个层次的艺术家。他现在与超过77,000名订阅者分享他丰富的3D知识。 最近,Matosevic在Blender中创建了一个3D太空船,然后通过虚拟现实在Omniverse中进行了增强。 个人创作者不是唯一通过Blender和USD取得成功的人。多媒体娱乐工作室Moment…

Leave a Comment

“遇见杂食动物:工业设计师将艺术与OpenUSD融合,为AI训练创建3D资产”

编辑注:这篇文章是我们的《遇见全能者》系列的一部分,该系列介绍使用NVIDIA Omniverse和OpenUSD加速其3D工作流程并创建虚拟世界的个人创作者和开发者。 作为澳大利亚昆士兰科技大学(QUT)的学生,艾米莉·博默尔在选择追求创意艺术还是科学方面犹豫不决。 然后她发现了工业设计,这使她能够深入研究和编码,同时探索可视化工作流程,如素描、动画和3D建模。 现在,博默尔作为宝马集团(BMW Group)技术办公室的设计实习生将她的技能付诸实践。该团队使用NVIDIA Omniverse,这是一个用于开发和连接3D工具和应用程序的平台,以及通用场景描述(Universal Scene Description,简称OpenUSD),以增强其合成数据生成流程。 博默尔创建了逼真的3D资产,这些资产可以与SORDI.ai一起使用,SORDI.ai是Synthetic Object Recognition Dataset for Industries的缩写。SORDI.ai由宝马集团、微软和NVIDIA合作发表,帮助开发人员和研究人员简化和加速用于生产的AI训练。为了自动化图像生成,该团队开发了一种基于Omniverse Replicator的扩展,Omniverse Replicator是用于创建自定义合成数据生成工具的软件开发工具包。 作为SORDI.ai团队的一员,博默尔使用Blender和Adobe Substance Painter设计具有高度物理准确性和照片真实感的3D资产,有助于确保合成数据可以用于高效训练AI模型。 博默尔创建的所有资产都用于在NVIDIA Isaac Sim平台上测试和模拟自主机器人,该平台为开发人员提供了一套合成数据生成能力,可以为光线真实、物理准确的虚拟环境提供动力。 为训练AI创建逼真的3D资产 作为设计实习生,博默尔的主要任务是动画和3D建模。这个过程始于拍摄目标物体的照片。然后,她使用这些2D照片作为参考,在Blender中将其与3D模型对齐。…

Leave a Comment

Shutterstock通过NVIDIA Picasso将生成式人工智能应用于3D场景背景

想象一下:创作者可以借助Shutterstock的尖端工具,快速创建和定制3D场景背景,利用生成式人工智能的帮助。 这家视觉内容提供商正在使用基于云的NVIDIA Picasso构建服务,用于开发用于视觉设计的生成式人工智能模型。 这项工作结合了Picasso的最新功能——在NVIDIA创始人兼首席执行官Jensen Huang的SIGGRAPH主题演讲中宣布——该功能将帮助艺术家根据简单的文本或图像提示增强和照明3D场景,所有这些都是使用完全许可、保留权利的数据构建的AI模型。 基于这些提示,新的生成AI功能快速生成定制的360度、8K分辨率、高动态范围成像(HDRi)环境贴图,艺术家可以使用这些贴图设置背景和照明场景。 这扩展了NVIDIA与Shutterstock的合作,为下一代数字内容创作工具赋能,并加速3D模型生成。 为了满足电影、游戏、虚拟世界、广告等领域对沉浸式视觉的不断增长需求,3D艺术家群体正在迅速扩大,过去一年增长了20%以上。 其中许多艺术家正在利用生成式人工智能来增强他们复杂的工作流程,并将能够利用这项技术快速创建和定制环境贴图。这使他们有更多时间来处理英雄级3D资产,这些是观众关注的3D场景的主要资产。在创建引人注目的3D视觉效果时,这产生了巨大的差异。 “我们致力于超强能力地支持3D艺术家和合作者,帮助他们比以往更快地构建他们所设想的沉浸式环境,并利用NVIDIA Picasso简化他们的内容创作工作流程,”Shutterstock的3D创新副总裁Dade Orgeron说道。 生成逼真的环境贴图 以前,艺术家需要购买昂贵的360度摄像机来从头开始创建背景和环境贴图,或者选择固定选项,这些选项可能与他们的3D场景不完全匹配。 现在,用户只需提供一个提示——无论是文本还是参考图像——基于Picasso构建的360 HDRi服务将快速生成全景图像。此外,由于生成式人工智能的帮助,定制的环境贴图可以自动匹配输入为提示的背景图像。 用户随后可以自定义贴图,并快速迭代想法,直到实现他们想要的效果。 合作推动3D世界建设 Autodesk是媒体和娱乐领域的3D软件和工具提供商,致力于为艺术家提供激发和取悦全球观众的创造自由。 通过将基于Picasso的基础模型开发的生成式人工智能内容创作服务与其广受欢迎的3D软件Maya集成,Autodesk使艺术家能够将平凡的任务交给无限创造力,并最终更快地产生内容。 通过AI为Autodesk客户的工作流程提供增强,艺术家可以专注于创作,并最终更快地生成内容。 生成式人工智能模型工厂 Picasso是NVIDIA AI Foundations的一部分,该部门推动企业级生成式人工智能的发展,包括文本、视觉内容甚至生物学。…

Leave a Comment

如何构建生成式人工智能应用和3D虚拟世界

为了成长和取得成功,组织必须不断专注于技术技能的发展,特别是在快速发展的技术领域,如生成式人工智能和3D虚拟世界的创造。 NVIDIA培训为团队提供了适应人工智能时代、高性能计算和工业数字化的技能,并宣布推出覆盖这些技术的新课程。该计划已经为成千上万的学生、开发人员、研究人员和数据科学家提供了关键的技术技能。 通过最新的课程,NVIDIA培训使组织能够充分利用生成式人工智能和虚拟世界的力量,这些技术正在改变商业格局。 开始构建生成式人工智能应用 生成式人工智能正在改变组织的工作方式。它使用户能够根据各种输入快速生成新内容,包括文本、图像、声音、动画、3D模型和其他数据类型。 关于生成式人工智能的新课程包括: 生成式人工智能解析 — 生成式模型正在加速许多用例的应用开发,包括问题回答、摘要、文本蕴含、2D和3D图像和音频创建。在这门为期两小时的课程中,NVIDIA应用深度学习研究副总裁布莱恩·卡坦扎罗将概述生成式人工智能的主要发展,介绍其现状以及未来可能具备的能力。他将讨论技术细节和流行的生成式人工智能应用,以及企业如何负责任地使用这项技术。 使用扩散模型的生成式人工智能 — 得益于计算能力和科学理论的改进,生成式人工智能比以往更易于访问。通过这门实践课程,学生将学习如何使用最新技术构建基于文本到图像的生成式人工智能应用。使用扩散模型生成图像,并通过各种优化来改进输出。使用U-Net架构构建去噪扩散模型,为用户提供更多的控制。 要查看关于生成式人工智能和大型语言模型的完整课程列表,请查看NVIDIA培训的学习路径。 构建数字3D世界 数字世界构建的进展正在改变媒体和娱乐、建筑、工程、施工和运营、工厂规划和头像创建等行业。 沉浸式的3D环境提升了用户参与度,使创新解决方案能够应对现实世界的问题。NVIDIA Omniverse是一个用于连接和开发3D工具和应用程序的平台,使技术艺术家、设计师和工程师能够快速组装复杂和物理准确的模拟和3D场景,并与团队成员无缝协作。 关于这个主题的新课程包括: NVIDIA Omniverse中USD的基本要素 — 通用场景描述(Universal Scene Description,简称USD)正在改变各行业的3D工作流程。它是一个开放标准,使3D艺术家和开发人员能够在元宇宙中连接、组合和模拟。学生将学习什么使得OpenUSD成为设计3D世界的独特之处。培训内容包括使用基本节点、属性和关系进行数据建模,以及用于场景组装和协作的自定义模式和组合。 开发Omniverse…

Leave a Comment

英伟达帮助创建论坛,为3D世界制定OpenUSD标准

NVIDIA今天与Pixar、Adobe、Apple和Autodesk联合创立了Alliance for OpenUSD,这是迈向解锁下一个3D图形、设计和仿真时代的重要一步。 该联盟将标准化并扩展OpenUSD,这是开源的通用场景描述框架,是互操作的3D应用和项目的基础,涵盖从视觉效果到工业数字双胞胎等各种领域。 几家领先的3D生态系统公司已经成为该联盟的首批普通会员,包括Cesium、Epic Games、Foundry、Hexagon、IKEA、SideFX和Unity。 标准化OpenUSD将加速其采用,创建一个基础技术,将帮助当前的2D互联网演变成3D网络。许多公司已经与NVIDIA合作开创这个未来。 从摩天大楼到跑车 OpenUSD是NVIDIA Omniverse的基础,这是一个用于连接和构建3D工具和应用的开发平台。Omniverse正在帮助Heavy.AI、Kroger和Siemens等公司构建和测试工厂、零售店、摩天大楼、跑车等物理精确模拟。 对于宜家来说,OpenUSD代表着“一种非专有的标准格式,用于编写和存储3D内容,以更紧密地连接我们的价值链,并以更低的价格开发家居解决方案,”宜家的创新经理Martin Enthed在联盟今天发布的新闻稿中说。 “通过加入该联盟,我们展示了我们对OpenUSD为客户提供的优势的承诺,这些优势包括与基于云的平台(包括Nexus、Hexagon的制造平台HxDR、Hexagon的数字现实平台和NVIDIA Omniverse)连接以在其行业中构建创新解决方案,”Hexagon的CTO Burkhard Boeckem说。 OpenUSD的起源 Pixar于2012年开始开发USD作为其特色电影的3D基础,提供跨数据和工作流程的互操作性。四年后,该公司将这项功能强大、多方面的技术开源,以便任何人都可以使用OpenUSD并为其发展做出贡献。 《寻梦环游记》中的场景分解与最终图像对比。USD在创造这部电影的复杂世界中起到了重要作用。© Disney/Pixar OpenUSD支持构建虚拟世界的要求,如几何、相机、灯光和材料。它还包括适用于大规模复杂数据集的功能,并且具有极高的可扩展性,使得这项技术能够适应视觉效果以外的工作流程。 OpenUSD的图示,展示了它作为大规模工业工作流程技术的强大能力。 OpenUSD的一个独特能力是其分层系统,它可以让用户实时协作而不会相互干扰。例如,一个艺术家可以建模一个场景,而其他人则为其创建照明。 打造共享标准 作为首要任务,该联盟将制定一个描述OpenUSD核心功能的规范。这将提供给工具构建者一个实施的指南,鼓励广泛应用开放标准于各种用例。…

Leave a Comment

见识全食动物:初创公司开发出一款应用程序,让用户只需使用智能手机即可将物品转换为3D模型

编辑注:本文是我们Meet the Omnivore系列的一部分,介绍使用NVIDIA Omniverse创建虚拟世界和加速3D工作流程的个人创作者和开发人员。NVIDIA Omniverse是基于Universal Scene Description,又称OpenUSD开发平台构建的。 随着增强现实(AR)在全球范围内变得越来越突出和易于访问,Kiryl Sidarchuk正在帮助消除现实世界和虚拟世界之间的边界。 Kiryl Sidarchuk AR-Generation的联合创始人兼首席执行官,该公司是NVIDIA Inception创新型创业公司计划的成员,Sidarchuk与他的公司开发了MagiScan,这是一款基于人工智能的3D扫描应用程序。 用户可以用智能手机相机捕捉任何物体,并快速创建高质量、详细的3D模型,用于任何AR或元宇宙应用程序。 AR-Generation现在提供了一个扩展,可以直接将MagiScan中的3D模型导出到NVIDIA Omniverse,这是一个用于连接和构建3D工具和元宇宙应用程序的开发平台。 这得益于Universal Scene Description,又称OpenUSD,这是一个可扩展框架,可作为数字内容创建工具之间的通用语言。 “增强现实将成为日常生活的重要组成部分,”总部位于塞浦路斯尼科西亚的Sidarchuk说。“我们定制了我们的应用程序,允许基于真实世界的物体直接导出3D模型到Omniverse,使用户可以在AR中展示模型,并将它们集成到任何元宇宙或游戏中。” Omniverse扩展是核心构建块,可以让任何人使用流行的Python或C++编程语言创建和扩展Omniverse应用程序的功能。 由于NVIDIA团队提供的易于访问的文档以及技术指导、免费的AWS学分和与其他AI驱动公司的交流机会等所有优势,AR-Generation的Sidarchuk表示,构建扩展变得简单且便捷,这些都是成为NVIDIA Inception的一部分的好处。 从现实世界物体中捕获、单击和创建3D模型 Sidarchuk估计,MagiScan可以比设计师手动创建3D模型的速度快10倍,并且成本可降低高达100倍。…

Leave a Comment

进入Omniverse:针对Marvelous Designer的通用场景描述支持让用户为3D角色量身定制数字资产和服装

编辑注:本文是Into the Omniverse系列的一部分,该系列每月聚焦于艺术家、开发者和企业如何利用最新的Universal Scene Description和NVIDIA Omniverse的进展来转变他们的工作流程。 无论是为数字角色制作鱼鳍动画还是设计时尚服装,创作者都可以使用Marvelous Designer软件来组合和定制资产、衣服和其他材料以用于他们的3D工作流程。 Marvelous Designer最近推出了Omniverse Connector,这是一款增强协作工作流程的工具,用于在其软件和NVIDIA Omniverse之间连接和构建3D工具和应用程序的开发平台。 该连接器通过支持通用场景描述框架(OpenUSD),使用户能够显著加快和简化设计流程。OpenUSD是3D工具之间的通用语言。 在一个典型的计算机图形管道中,艺术家需要在不同的软件之间来回切换以完成他们的工作。新的Omniverse Connector使得创作者通过OpenUSD的改进的导入和导出功能节省时间。 在最近的一次直播中,3D设计师Brandon Yu分享了他如何使用新的连接器和OpenUSD来改进他的协作工作流程,提高生产力,扩展创意可能性和简化设计过程。 拥有超过15万个订阅者的MH Tutorials YouTube频道的Mike Shawbrook在以下教程中演示了如何使用新的连接器。Shawbrook演示了如何在Marvelous Designer和Omniverse之间设置实时会话来创建一个简单的布料毯子。 想了解更多,请查看使用新连接器的教程,以及了解OpenUSD如何改进3D工作流程: 改进的USD兼容性 使用Marvelous…

Leave a Comment