麻省理工创新模型:用2D视频扩散,生成 3D 视频

例如,我们想要生成一个猫在花园里玩耍的动态3D场景,Vid3D通过将生成任务分解为生成场景的2D时间动态和为每个时间步生成3D表示两个部分,极大降低了生成时间并简化了生成流程。Vid3D先从一张参考图像开始,生成该场景的2D视频种子,也称为“时序播种”,旨在捕捉场景随时间变化的动态特征。再通过查询一个2D视频模型并输入...

可将任何2D图像重建为3D模型!NVIDIA推出GANverse3D

NVIDIA于4月16日宣布,公司位于多伦多的研究实验室成功开发了GANverse3D,当作为NVIDIAOmniverse平台的扩展导入并在NVIDIARTXGPU上运行时,GANverse3D可将任何2D图像重建为逼真的3D模型。据NVIDIA介绍,GANverse3D可为建筑师、创作者、游戏开发人员和设计师提供便利,使他们能够轻松实现将新对象添加到他们的实体模型中,...

现在1秒就能建模?Stable Fast 3D已可将2D图秒速转3D模型!

逆天了！使用StableFast3D，现在一张2D照片转3D模型（glb格式）仅需1秒左右！使用官方示例图斧头生成模型，时间在0.9-1.2秒之间。在众人目光仍聚焦于近期热门的AI生成视频之际，StabilityAI——StableDiffusion背后的团队，已于数日前推出了其基于TripoSR技术的新3D模型StableFast3D（简称SF3D）。这款模型以其...

3D视觉重建技术DUSt3R:轻松基于2D图片生成3D模型

DUSt3R是一种新的方法,它可以处理任意数量的图片,甚至在没有任何相机信息的情况下,也能把这些图片变成3D模型。这就像我们在玩拼图游戏,不管你拼的是哪一块,DUSt3R都能把它们很好地组合在一起。它把成对的重建问题看作是“点图”的回归,通过这种方式,DUSt3R可以同时处理单张和多张图片。DUSt3R的另一个亮点...

谷歌展示Genie模型:一张草图就能生成一个2D游戏

Genie根据人的画作生成动作可控的2D世界。DeepMind开发人员蒂姆·罗克塔谢尔(TimRockt??schel)表示,Genie学习各种潜在动作,以一致性控制角色。Genie习得潜动作空间不仅具有多样性和一致性,并且具有可解释性。此外,Genie模型是通用的,并不局限于2D。DeepMind在官方声明中也表示,Genie“专注于2D平台类游戏和机器人...

...推出 Genie 模型:110 亿个参数,基于图片和提示词生成 2D 游戏

IT之家2月27日消息,谷歌旗下的DeepMind团队近日推出Genie的全新AI模型,共有110亿个参数,能够基于用户输入的一张图片和提示词,生成一款较为完整的2D平台游戏(www.e993.com)2024年11月14日。Genie通过了网络上超过20万小时的2D游戏视频训练,目前只是一个研究预览版,这些游戏更像是2D平台游戏,而不是完全的VR游戏...

人工智能AI:计算机视觉-通用领域2D全身关键点检测模型

人工智能AI：计算机视觉-通用领域2D全身关键点检测模型关键词：目标检测、目标跟踪、图像识别、图像分类、视频分析、自然语言处理、自然语言分析、计算机视觉、人工智能、AIGC、AI、大模型、多模态大模型、API、Docker、镜像、API市场、云市场、国产软件、信创内容摘要：行人图像特征表示提取，图像的特征表示可以用于计算...

AnimatableDreamer:2D视频素材一键转换成4D动态立体模型

这一框架能够直接将2D视频素材一键转换成动态立体模型,同时支持通过文字输入进行个性化角色生成。简单的说,「AnimatableDreamer」的提出直接打通文本到4D骨骼动画的生成,建模、贴图、骨骼绑定、动作驱动。输入自然语言描述,自动输出立体动画视频,普通人也能直接上手,轻松定制动画内容。以下为生成的动物模型:...

Vidu升级其 AI 视频模型…

Vidu升级其AI视频模型,支持让任意主体保持一致??支持参照任意单一角色、物体生成视频??支持多种画风的角色可控,真人角色、2D角色、3D角色,保持一致不在话下??支持角色的面容、半身、全身的一致性可控????支持单一物体的较高细节还原????

Meta推出AI新模型VFusion3D,微美全息布局AIGC+3D内容加速产业转型...

AI新模型VFusion3D来袭据悉，VFusion3D界面简单直观，允许用户自己上传或从一系列预加载的示例中选择图像，预加载的示例表现非常出色，生成的3D模型和渲染视频以显著的准确性捕捉了原始2D图像的本质和细节。该研究团队利用预训练的视频人工智能模型生成合成3D数据，使他们能够训练更强大的3D生成系统，解决了长久以来的3D...