合作专线:17362615757
行业资讯

AI科技

当前位置:首页 > 行业资讯 > AI科技

腾讯优图开源业界首个3d技术医疗健康影象大最终数据预训练时相关模型


整理 | Jane出品 | AI科技大本营(ID:rgznai100)
近日,腾讯优图首个医疗AI深度学习预训练模型 MedicalNet 正式对外开源。这也是全球第一个提供多种 3D 医疗影像专用预训练模型的项目,将为全球医疗AI发展提供基础。 许多研究表明,深度学习的发展非常依赖数据量。自然图像领域中存在着许多海量数据集,如 ImageNet,MSCOCO。基于这些数据集产生的预训练模型推动了分类、检测、分割等应用的进步。不同于自然图像,医疗影像大部分都是 3D 结构形态的,同时,由于数据获取和标注难度大,数据量稀少,目前尚未存在海量数据集及对应的预训练模型。 MedicalNet 是腾讯优图首个专为3D医疗影像在深度学习应用上所开发的一系列预训练模型,为任何3D医疗影像AI应用起到“打地基”的作用,加快模型收敛,减轻模型对数据量的依赖,MedicalNet具备以下特性: 1、MedicalNet提供的预训练网络可迁移到任何3D医疗影像的AI应用中,包括但不限于分割、检测、分类等任务;2、尤其适用小数据医疗影像AI场景,能加快网络收敛,提升网络性能;3、通过简单配置少量接口参数值,即可进行微调训练;4、项目提供多卡训练以及测试评估代码,接口丰富,扩展性强;5、提供不同深度3D ResNet预训练模型,可供不同数据量级应用使用。 为了产生3D医疗影像的预训练模型,MedicalNet聚集多个来自不同3D医疗领域的语义分割小规模数据集,并提出了基于多分支解码器的多域联合训练模型来解决数据集中的标注缺失问题。我们的预训练模型可以迁移到任何3D医疗影像应用的深度学习模型中。整个系统的工作流程如下图所示:  我们将MedicalNet模型迁移到预训练时未接触过的Visceral和LIDC数据集中,完成全新的肺部分割和肺结节分类任务,并与目前常用的从零训练(train from scratch)以及Kinetics视频3D预训练模型在性能以及收敛速度上做了比较。 性能提升:在肺部分割应用上,相比于Train from Scratch,MedicalNet在Dice上有16%到33%幅度的提升,相比于Kinetics有4%到7%幅度的提升。在肺结节良恶性分类应用上,相比于Train from Scratch,MedicalNet有6%到23%幅度的预测正确率(Acc)提升,相比于Kinetics有7%到20%幅度的提升。 收敛速度:实验证明,无论是在肺分割任务还是肺结节分类任务上,MedicalNet均能为模型提供一个较低的初始化损失值,明显加快损失下降速度,下图为MedicalNet性能的一个简单示例,展示了在全器官分割应用中,不同预训练方式在一定训练迭代次数下的测试结果。可以看出,基于我们的预训练模型(MedicalNet)的结果最接近标签(ground truth),且远优于从零训练(train from scratch)的结果,更多细节请参考论文。  随着人工智能的火热化,医疗影像AI也成为了当前各应用领域中最热门的版块。区别于其他人工智能应用,人工智能在医疗领域的应用门槛最高,最大的原因在于标注数据的匮乏。医疗影像数据的获取通常需要经历重重关卡,同时,由于领域的专一性,数据通常需要资深医师标注,而每个3D数据的标注耗时耗力。在当前紧张的医护资源下,医疗影像数据的获取战线将非常漫长,阻碍了应用落地的进程。再者,标注数据量相当有限,大部分医疗部门都需要面临数据量稀少和深度学习之间的鸿沟。 
专有领域专有模型,MedicalNet为各个3D医疗影像应用准备了具备临床通用知识的数据库。即使在小数据量中,该数据库的有效特征也能帮助落地应用取得较好的医疗检测性能,这减轻医疗影像AI应用对数据量的依赖,实现了落地需求,加快落地速度。 
MedicalNet是腾讯在医疗AI领域的首个开源项目Github 地址:
【END】
◆精彩推荐◆

AI ProCon 2019 邀请到了亚马逊首席科学家@李沐,在大会的前一天(9.5)亲授「深度学习实训营」,通过动手实操,帮助开发者全面了解深度学习的基础知识和开发技巧。  距离「培训+会议」优惠票 2149 元(3.5折)限时抢购结束仅剩 2 天,扫描下方二维码购票,即享折扣。 3.5 折最后倒计时 2 天,8 月 12 日将开启 5 折票
社群福利扫码添加小助手,回复:大会,加入2019 AI开发者大会福利群,每周一、三、五 更新学习资源、技术福利,还有抽奖活动~
推荐阅读
连续亏损6年,负债超10亿美元,DeepMind靠烧钱模式能走多远?在线教育公司的硬件雄心:1秒查词,网易有道发布词典笔二代 七夕大礼包:26个AI学习资源送给你玩王者荣耀用不好英雄?两阶段算法帮你精准推荐精彩视频突发!Python再次第一,Java和C下降,凭什么?白话中台战略:中台是个什么鬼?伟创力回应扣押华为物资;谷歌更新图片界面;Python 3.8.0b3 发布 | 极客头条沃尔玛也要发币了,Libra忙活半天为他人做了嫁衣?知名饮料制造商股价暴涨500%惊动FBI,只因在名字中加入了"区块链" ?你点的每个“在看”,我都认真当成了喜欢
粤ICP备19111974号