...上海交大开源3D医学大模型,构建超大规模3D医学图像分割数据集
同时,该研究还构建了当前最大规模的3D医学图像分割数据集,名为SAT-DS。它汇集了72个公开数据集,来自CT、MR和PET三种模态的22K+图像,302K+分割标注,涵盖了人体8个主要部位中的497个分割目标,实现了通过文本提示的放射学影像通用医疗分割模型。相关研究以「OneModeltoRulethemAll:...
MICCAI 2024 | 开创性Point-Image Diffusion助力医学图像公平分割
面对医学眼底图像分割中针对少数群体的偏见问题,团队通过合成数据与真实数据相结合的方案,提升了医学图像分割模型的公平性。论文题目:FairDiff:FairSegmentationwithPoint-ImageDiffusion论文链接:httpsarxiv/abs/2407.06250代码链接:httpsgithub/wenyi-li/FairDiff一、背景介绍公平性在医...
定位和分割任务,智源等联合提出首个多功能3D医学多模态大模型
(2)M3D-LaMed是目前最多功能的3D医学多模态大模型,能够解决文本(疾病诊断、图像检索、视觉问答、报告生成等),定位(目标检测、视觉定位等)和分割(语义分割、指代分割、推理分割等)三类医学分析任务。(3)M3D-Bench能够全面和自动评估8种任务,涵盖文本、定位和分割三个方面,并提供人工校验后的测试数据。
开源3D医学大模型SAT,性能超越72个nnU-Nets,上交大团队发布
近日,上海交通大学与上海人工智能实验室联合团队发布3D医学图像分割大模型SAT(SegmentAnythinginradiologyscans,drivenbyTextprompts),在3D医学图像(CT、MR、PET)上,基于文本提示实现对人体497种器官/病灶的通用分割。所有数据和代码、模型均已开源。论文链接:httpsarxiv/abs/2312.17183代码...
Meta开源“分割一切”2.0模型,视频也能分割了
Meta多次强调了最新模型SAM2是首个用于实时、可提示的图像和视频对象分割的统一模型,它使视频分割体验发生了重大变化,并可在图像和视频应用程序中无缝使用。SAM2在图像分割准确率方面超越了之前的功能,并且实现了比现有工作更好的视频分割性能,同时所需的交互时间为原来的1/3。
深圳大学香港理工发布MemSAM:「分割一切」模型用于医学视频分割
三个传统的图像分割模型分别是基于CNN的UNet、基于Transformer的SwinUNet和CNN-Transformer混合的H2Former(www.e993.com)2024年7月31日。适用于医学领域的SAM模型包括MedSAM、MSA、SAMed、SonoSAM和SAMUS。其中,SonoSAM和SAMUS专注于超声图像。首先是定量比较结果,如下表所示:在CAMUS-Semi和EchoNet-Dynamic数据集上...
...深圳大学联手香港理工发布MemSAM:将 「分割一切」模型用于医学...
三个传统的图像分割模型分别是基于CNN的UNet、基于Transformer的SwinUNet和CNN-Transformer混合的H2Former。适用于医学领域的SAM模型包括MedSAM、MSA、SAMed、SonoSAM和SAMUS。其中,SonoSAM和SAMUS专注于超声图像。首先是定量比较结果,如下表所示:...
刚刚,Meta开源「分割一切」2.0模型,视频也能分割了
下方两个模型都是用第一帧中的T恤蒙版初始化的。对于baseline,Meta使用来自SAM的蒙版,问题是过度分割并包括人的头部,而不是仅跟踪T恤。相比之下,SAM2能够在整个视频中准确跟踪对象部分。为了创建统一的图像和视频分割模型,Meta将图像视为单帧视频,在图像和视频数据上联合训练SAM2。团队利用了...
中德医学人工智能大会圆满闭幕
基于面部对齐和临床可解释模型的面神经麻痹人工智能测量首都医科北京天坛医院李德岭教授标注高效医学图像分割杜伊斯堡-埃森大学MerlinEngelke教授智能超声:从临床研究到多场景转化复旦大学附属中山医院徐辉雄教授人工智能在视网膜脉络膜疾病中的研究进展及应用前景...
大语言模型之后,计算机视觉是不是下个风口?
SAM本身是图像的语义分割,该模型掌握了“对象”的概念,可以为任何图像或视频中的任何对象生成遮罩,即使是它在训练中没有见过的对象。SAM模型和GPT-4V的出现,能够将大语言模型安装上“眼睛”,也正如OpenAI在为GPT-4V生成前所做的部署准备,其中包括BeMyEyes,这是一个为视障用户构建工具的组织,在模型生成前夕...