开源3D医学大模型SAT,性能超越72个nnU-Nets,上交大团队发布
近日,上海交通大学与上海人工智能实验室联合团队发布3D医学图像分割大模型SAT(SegmentAnythinginradiologyscans,drivenbyTextprompts),在3D医学图像(CT、MR、PET)上,基于文本提示实现对人体497种器官/病灶的通用分割。所有数据和代码、模型均已开源。论文链接:httpsarxiv/abs/2312.17183代码链接:htt...
...谷歌前高管任CEO,打造AI健身教练;上海交大开源3D医学大模型...
上交大团队发布开源3D医学大模型SAT,支持497类器官,性能超越72个nnU-Nets近日,上海交通大学与上海人工智能实验室联合团队发布3D医学图像分割大模型SAT(SegmentAnythinginradiologyscans,drivenbyTextprompts)。该研究首次探索将人体解剖学知识注入文本编码器,构建了第一个包含6K+人体解剖...
Stability.ai开源3D模型,仅需0.5秒就能快速生成
著名开源大模型平台Stability.ai开源了3D生成模型——StableFast3D(以下简称“SF3D”)。用户通过图片仅需0.5秒就能快速生成高质量3D模型,还包括UV展开网格、材质参数、具有减少照明烘焙的反照率颜色,以及可选的四边形或三角形重网格等,这也是目前最快的3D生成模型。在传统的3D重建模型中,变换器通常输出较低分辨...
字节跳动推出新型语音生成模型Seed-TTS;腾讯混元开源文生图大模型...
2.腾讯混元开源文生图大模型混元DiT加速库腾讯发布了针对其混元文生图开源大模型(简称混元DiT模型)的专用加速库,显著提升了模型的推理效率,使生图时间大幅缩减75%。此举不仅优化了模型性能,还降低了用户的使用门槛。通过采用知识蒸馏技术和TensorRT高性能推理框架,腾讯实现了DiT模型的采样步数压缩与高效推理部署。蒸...
AI日报:字节推王炸级语音生成模型Seed-TTS;Suno新功能被Udio抢跑...
5、腾讯混元发布开源文生图大模型混元DiT加速库腾讯混元发布了针对开源文生图大模型混元DiT的加速库,可将推理时间缩短75%,生图时间大幅缩短。用户可通过三行代码调用模型,无需下载原始代码。腾讯混元表示将继续优化混元DiT的开源生态,共建视觉生成开源生态,推动大模型行业发展。
Stability AI开源上新:3D生成引入视频扩散模型,质量一致性up,4090...
StableVideoDiffusion(SVD)是StabilityAI此前推出的高分辨率视频生成模型(www.e993.com)2024年10月17日。也就是说,此番登场的SV3D首次将视频扩散模型应用到了3D生成领域。官方表示,基于此,SV3D大大提高了3D生成的质量和视图一致性。模型权重依然开源,不过仅可用于非商业用途,想要商用的话还得买个StabilityAI会员~...
AI视野:Pika1.0正式向所有人开放;阿里开源文生3D模型
阿里开源文生3D模型阿里通义实验室的XR实验室开源了文生3D新模型,能通过文本描述生成对应的3D模型及纹理,包括Text-to-ND和Text-to-ND-MV两个大模型。为满足不同需求,开源了基础版本和Multi-View版本,并提供了优化代码,实现文本直接到3D模型的生成。Text-to-ND、Text-to-ND-MV大模型:httpsmodelscope....
如何看待 Three.js / WebGL 等前端 3D 技术呢?
1、简化开发流程:数字孪生工具提供了可视化的界面和预设的功能模块,可以更快地构建和调整3D模型及场景,无需从头编写代码。2、集成和兼容性:数字孪生工具已经集成了多种功能,如数据交互、实时渲染和动态更新等,减少了技术集成的复杂性和时间成本。3、提高效率:借助现有的工具和模板,可以更高效地完成项目开发,避免...
开源!DressCode:只需文本输入即可生成精美3D服装
开源!DressCode:只需文本输入即可生成精美3D服装最近,上海科技大学与宾夕法尼亚大学、Deemos科技和NeuDim科技的研究团队联合开发了一款创新模型——DressCode。这个模型支持用户只需输入一段简单的文本描述,就能生成各种精美的3D服装模型,比如说,一件法式蕾丝边连衣裙,或者一套红色丝绸睡衣,简直是设计师们的...
横扫16大榜单,最强开源单目深度估计算法来了,精度可以直接用于3D...
对比其它基线方法ZoeDepth和OmniData(v2),Metric3Dv2能给出更高细粒度的带尺度深度和法向。2、单目场景三维重建即使像Marigold、DepthAnythingv2这样的高精度相对深度模型,也需要在特定数据上拟合、或手动挑选出一组合适的仿射参数后,才能得到三维点云。