又一3D生成模型来袭!3DTopia-XL开源,直出工业级PBR资产
上海人工智能实验室(ShanghaiAILab)与南洋理工大学(NTU)共同推出了新一代的三维生成大模型3DTopia-XL,能够从图片或文字单阶段直出具有PBR(物理渲染)材质的高质量三维数字资产。3DTopia-XL已将代码、预训练模型和技术报告开源,模型已经发布在始智AIwisemodel开源社区,欢迎大家前去社区体验。通过采用全新的三维表征...
首个检索增强3D生成模型!实现各种模态生成大一统:文&图&3D都可以
在第一阶段,Phidias的目标是将额外的3D参考模型引入预训练的多视图生成模型,以提高多视图生成的3D一致性、泛化性和可控性。为了将3D参考模型集成到扩散模型的去噪过程中,研究人员将其转化成多视图正则坐标图(CanonicalCoordinateMaps,CCMs)来约束扩散模型。CCM将3D参考模型表面点的3D位置坐标保存为RGB,仅保留了参考...
AI生成3D模型再进化!距离真实模型师还有多远?实测结果一览!
其AI生成3D模型的能力引起了很多模友的关注昨天另一款国产AI:Tripo3d也迎迎头赶上推出了2.0版本直接先看官方视频根据官方演示视频来看2.0版本相比之前有了很大进步官网主页也有很多网友生成的案例点进去几个看看具体生成效果这是一个通过文字描述生成的模型一直狗骑着火箭可以看到整个结构还是非常流畅的...
为吸引开发者创建游戏地图,Roblox 将推出 3D 模型生成 AI 工具
Roblox的目标是当其日活量达到10亿时,能够从中获得10%的收益。Roblox表示,公司团队内部正在开发一个多模态3D基础AI模型,并计划将其开源。这个模型将允许用户通过文本、视频或3D提示生成3D内容,同时提供广泛的生成式AI功能,支持游戏内的实时生成能力,并向所有用户开放,以便于用户创造各种游戏内容。
腾讯、上海科大开源InstantMesh,图片直接生成3D模型
首先,接收用户输入的图片,并利用Zero123++模型生成一系列的新视角图像,包括了物体的正面、侧面、上面、下面和背面等360度视角图片。这可以帮助InstantMesh捕捉到图片的全方位信息,为后续的3D网格预测打下坚实的基础。简单来说,整个过程就像玩拼图游戏一样,例如,需要从一张完整的图片中找到所有可能的视角,然后将它们...
图片直接生成3D视频模型,开源Stable Video 3D来啦!
3月19日,著名大模型开源平台stability.ai在官网开源了,图像直接生成3D视频模型——StableVideo3D(以下简称“SV3D”)(www.e993.com)2024年10月17日。这与其之前发布的StableZero123、Zero123XL模型相比,SV3D在生成质量、多视角、泛化能力、3D建模、一致性、光照效果等方面实现大幅度提升。
Garment3DGen:用衣服图片就能生成逼纹理效果的3D模型
如下图,上传一张服装照片,就能输出衣服的3D模型,并给出了各种应用场景。注:左侧为输入,右侧为输出研究团队在论文中详细介绍了他们提出的3D服装风格化框架,该框架具有高度细致和准确性,能够生成逼真的服装纹理。通过对服装的结构和纹理进行建模,Garment3DGen可以根据用户需求自动生成具有独特风格的服装设计。这项研...
CRM:上传图片生成3D模型,10秒搞定
1.??ConvolutionalReconstructionModel(CRM)是一种高保真度的前馈单图像到3D生成模型,充分考虑了稀疏3D数据的限制,强调了在网络设计中整合几何先验的必要性。2.????CRM通过生成六个正交视图图像,经过卷积U-Net处理,利用其强大的像素级对齐能力和显著的带宽,创建了高分辨率的三平面...
Stability AI新模型:可从单张图片生成360° 无死角及3D视频
SV3D可通过输入单一对象形象,输出该对象的新颖的多视图再利用这些视图生成3D视频。StabilityAI发布新模型StableVideo3D(SV3D),可以通过单张照片生成出360°环绕视角的轨道视频(orbitalvideos),以及在指定的摄像机路径上创建3D视频,视频的品质与视角一致性都有大幅提升。StableVideo3D现在可以通过StabilityAI会员...
...0.5 秒生成三维建模,Stability AI 推出“Stable Fast 3D”模型
StabilityAI今天推出了一款名为StableFast3D的AI模型,该模型主打“图生3D模型”,号称只需0.5秒就能快速生成完整且自然的3D模型,目前该模型已在HuggingFace平台上架。