人工智能

只需0.5秒 Stability AI新模型超快生成3D图像

字号+作者: 来源:硬AI 2024-08-03 07:29 评论(创建话题) 收藏成功收藏本文

生成式人工智能(AI)明星初创公司StabilityAI8月发布最新突破性3D模型StableFast3D,将单张图片生成3D图像的速度大幅提升。StabilityAI今年3月发布的3D模型'...

生成式人工智能(AI)明星初创公司StabilityAI8月发布最新突破性3D模型StableFast3D,将单张图片生成3D图像的速度大幅提升。StabilityAI今年3月发布的3D模型SV3D需要多达10分钟生成3D资产,基于TripoSR的新模型StableFast3D完成同样的任务只需0.5秒,现已可以在HuggingFace上使用。qSY品论天涯网


qSY品论天涯网

StabilityAI介绍,StableFast3D只需0.5秒即可将单个输入图像转换为详细的3D资产,认为该创新模型为三维重建领域的速度和质量树立了新的标杆。它能迅速生成完整的3D资产,包括UV拆分网络、材料参数和降低光照烘焙的反照率颜色,而且用户可选四边形或三角形重新网格化,处理时间仅会增加100到200毫秒。qSY品论天涯网

StableFast3D问世代表StabilityAI在缩短AI模型处理时间方面实现重大飞跃。qSY品论天涯网

今年3月StabilityAI发布了3D模型StableVideo3D(SV3D),它在StableVideoDiffusion的基础上进行改进,只需一张图就能生成对应的3D模型,适用于新视角合成任务和3D生成的任务。SV3D需要多达10分钟生成3D资产,而StableFast3D完成同样的任务只需0.5秒,将速度提高了1200倍。qSY品论天涯网

StabilityAI发布StaleFast3D时特别提到,该模型在几个关键领域超越竞争对手,其中之一是:在7GB显卡内存VRAM的GPU上,每次生成3D资产只需0.5秒,而在StabilityAIAPI上需要将近一秒。此外,该模型具有高质量的UV拆分网络和材料参数,能减少纹理中的纠缠照明,并能生成附加材质参数和法线贴图。qSY品论天涯网


qSY品论天涯网


qSY品论天涯网

StabilityAI称,StableFast3D基于该公司和TripoAI合作开发的模型TripoSR,可显著改进架构并强化功能。该模型适用于游戏和虚拟现实(VR)开发者,以及零售、建筑、设计和其他图形密集型行业的专业人士。在游戏和电影制作中有多种用例:qSY品论天涯网

  • 在实验是关键的预制作期间,用该模型实现快速推理。qSY品论天涯网

  • 游戏的静态资产(背景物体、杂物、家具)qSY品论天涯网

  • 电子商务的3D模型qSY品论天涯网

  • 增强显示(AR)/VR的快速模型创建。qSY品论天涯网

  • 目前,StableFast3D可通过StabilityAI的聊天机器人StableAssistant和StabilityAIAPI使用。用户可以在AI开源社区HuggingFace上使用该模型,StabilityAI基于免费用于研究、非商业和商业用途的StabilityAI社区许可而发布。qSY品论天涯网

    StabilityAI官宣推出StableFast3D后,社交媒体的网友迅速回帖回应,有网友问,该模型生成的UV网络有多清晰,有多少个多边形。有网友称,喜欢StabilityAI在发布模型时附上的那个动图,它展示了机器吐出通用的AI图像模型,并将它们直接扔进垃圾桶。有网友问,可不可以把生成的3D成果打印出来。qSY品论天涯网


    qSY品论天涯网


    qSY品论天涯网


    qSY品论天涯网

    有评论称,目前,3D世界的内容创作是一个瓶颈。我们不想花钱请人手工制作元宇宙。自动生成资产应该是默认的,就像在现实世界中一样。StabilityAI的新模型是朝着正确方向迈出的一大步。qSY品论天涯网


    qSY品论天涯网

    本网除标明“PLTYW原创”的文章外,其它文章均为转载或者爬虫(PBot)抓取; 本文只代表作者个人观点,不代表本站观点,仅供大家学习参考。本网站属非谋利性质,旨在传播马克思主义和共产主义历史文献和参考资料。凡刊登的著作文献侵犯了作者、译者或版权持有人权益的,可来信联系本站删除。 本站邮箱[email protected]