数字孪生:adidas和Covision Media借助AI技术创造逼真3D模型
数字孪生:adidas和Covision Media借助AI技术创造逼真3D模型

数字孪生:adidas和Covision Media借助AI技术创造逼真3D模型

Covision基于AI的3D技术帮助企业扫描数千种产品,为网站和移动应用程序创建逼真的3D图像、视频和增强现实体验。

创建物理产品的3D扫描可能非常耗时。企业通常使用传统方法,如基于摄影测量的应用程序和扫描仪,但这些方法可能需要数小时甚至数天的时间。它们也不总能提供在所有应用中使模型看起来逼真所需的3D质量和细节水平。

总部位于意大利的初创公司Covision Media正在利用AI和NVIDIA RTX来增强3D扫描流程和基于3D的内容创建。

Covision Media开发了基于人工智能的3D扫描仪,允许客户创建任何产品的数字孪生,包括鞋类、眼镜、体育用品、玩具、工具和家居物品。该公司是NVIDIA Inception的成员,这是一个为初创企业提供最新资源和技术访问的免费计划。

使用Covision的技术,客户可以快速创建3D扫描,并自动保留详细的纹理、材料、颜色、几何形状等等,以使图像尽可能逼真。

该技术运行在NVIDIA RTX上,允许用户创建高质量、详细、逼真的3D模型。Covision Media还使用神经辐射场(NeRFs)来提高3D模型的质量,同时解决了准确捕捉光照、反射和透明表面等典型挑战。adidas和其合作伙伴NUREG,一家内容创作工作室,是首批使用Covision Media的3D扫描技术来自动化和扩展电子商务内容制作的企业之一。

利用RTX和AI开启3D的新可能性

Covision的3D扫描仪连接到运行NVIDIA RTX A5000和RTX A6000 GPU的多台工作站,这两者都提供高性能的光线追踪性能和强大的人工智能功能。

NVIDIA OptiX框架的光线追踪性能,加上NVIDIA RT核心,使Covision能够精确测量扫描对象的光照。这是让客户将他们扫描的产品放入任何虚拟环境的最重要的独特因素之一。Covision还利用NVIDIA的软件基础设施来开发最先进的AI解决方案,用于其神经纹理方法。

“Covision Media的技术负责人Burkhard Güssefeld博士说:“如果没有NVIDIA RTX GPU,我们根本无法达到所需的准确度和性能水平。NVIDIA的硬件和软件能力在推动我们技术边界方面不可或缺。”

Covision的技术允许3D模型完全可调光,这意味着用户可以调整和操纵场景中的光照。用户还可以将部分扫描合并在一起,构建产品的360度扫描,这可以在扩展现实(XR)环境中使用。

核心技术使用了计算机视觉和机器学习。Covision在NeRFs方面的强大专业知识使他们能够将其集成到现有的流程中,以克服传统的挑战,如透明度和反射。这使Covision Media能够仅通过几张图像快速重建3D形状和外观。

该公司对质量、毫米级精度、材料分离和可调光性有非常高的要求。因此,团队利用来自精确的光姿势、受控环境和准确的几何线索等元素的数据,对NeRF技术的能力进行了调整和扩展。

NeRF允许团队从流程的开始就创建高质量的3D图像。这使他们可以提高吞吐量,同时减少所需的后期处理工作量。

“我们的3D扫描仪在大规模生产中自动提供最高质量的资产,同时帮助客户创造价值并节省成本,”Covision Media的CEO Franz Tschimben说道。“此外,我们的扫描设备将帮助公司创建高质量的3D资产,以填充新的空间计算设备和混合现实头戴设备上的应用和世界,例如苹果的Vision Pro和Meta的Quest。”

Covision希望将其他NVIDIA产品和研究项目整合到其解决方案中,例如高性能可微分渲染的Nvdiffrast和快速神经网络框架的Tiny CUDA。团队还将在其系统中部署自定义的NeRF实现,该实现将利用NVIDIA的Instant-NGP提供的API。

adidas将3D技术运用得炉火纯青

adidas每年使用Covision的技术扫描数千件物品,用于其在线网站和应用程序,这些网站和应用程序在台式机和移动设备上均兼容。

这些3D模型已经帮助增强了adidas的虚拟试穿功能,使顾客可以在购买之前在虚拟环境中试穿鞋子。adidas还使用这些3D模型自动生成2D虚拟产品照片和视频,取代了传统的产品摄影需求。

根据adidas的说法,Covision的扫描技术在保持规模化扫描生产的同时,帮助团队在质量上迈出了重要一步。借助高度逼真的扫描,adidas通过从传统的内容制作,如照片和影片,转向计算机生成的内容制作,实现了时间和成本效益。

为了扩大3D资产的生产规模,adidas依赖于Covision的技术,并与一组重要的合作伙伴合作。NUREG是在创建和准备3D资产以在adidas平台上投放方面的重要合作伙伴。除了在物流、造型和扫描方面的专业知识外,该工作室还提供自己的软件工具,以及在2D和3D制作方面的专业知识,使3D工作流程能够适用于每年数千个资产。

“无与伦比的质量和可再照明性使我们的全球3D和照片专家团队能够利用3D模型用于我们正在创建的所有最终应用,”NUREG adidas团队负责人Tommy Lenssen说道。“我还对我们的后期制作平台的成功,它允许精简协作和质量控制,感到满意。”

至于后期制作工作流程,Covision和NUREG与The Kow Company合作,后者是全球企业的主要图像和视频编辑公司。客户可以购买Covision Media的3D扫描仪,以在他们自己的内容制作工作室中开始生产,或者可以通过Covision在欧洲或北美的合作伙伴进行产品扫描。