亚星游戏

医学影像是通过扫描照射方式所获得的人体器官内部组织影像，蕴含CT图像、MRI图像以及超声成像等。随着医疗技术的发展，医学影像在疾病诊断、评估医治等方面阐扬着重要作用。医学影像检索指从已有的医学影像数据中找到与输入的影像最类似或最有关的影像集，该步骤对于疾病的辅助诊断和医治拥有重要意思。传统的医学影像检索步骤只能抽取单尺度的图像数据特点，目前的深度哈希检索步骤能进建复杂的特点表征，但医学影像的多模态性和有限的样本量影响了检索正确性和有效性。

近日，国度生物信息中心赵文化团队开发了深度把稳力融合哈希模型的医学影像检索步骤DAFH（Deep Attention Fusion Hashing Model，简称DAFH），并以“Deep Attention Fusion Hashing (DAFH) Model for Medical Image Retrieval”为题在学术期刊Bioengineering?在线颁发。

DAFH通过使用多模态的医学影像数据进行训练，并使用三元网络模型融合把稳力特点和中央层特点，提高医学影像的检索机能。DAFH网络了公共癌症影像归档库（The Cancer Imaging Archive，TCIA）中913个病人10种分歧癌症类型的535,948张医学影像数据，通过对影像数据进行体式转化、数据洗濯，获得高质量的医学影像数据，并进行图像数据加强。DAFH使用EfficientNet为骨干网，提取初步图像特点，同时使用卷积把稳力？椋–onvolutional Block Attention Module, CBAM）提取图像的空间特点信息和中央层特点，并进行特点融合，最后将这些陆续的图像特点映射成哈希码，实现基于深度哈希算法的影像检索步骤。该模型的前10次均匀正确率均值MAP@10在哈希码长度为16，32和48时，别离达到0.711，0.754和0.762，均高于已有的医学影像检索步骤。初次检索均匀正确率均值MAP@1在32哈希码长度时可达到0.745；旌暇卣蠓治鱿允，DAFH在肺腺癌,导管腺癌, 宫颈鳞癌和腺癌上拥有很高的MAP@1检索正确率，能够达到85%以上。

DAFH已整合利用至赵文化团队于2023年10月颁布的医学影像归档库OBIA中。用户上传一张医学影像图片，即可在OBIA库中检索得到类似的医学影像了局集。

国度生物信息中心硕士钻研生吴港澳为本文第一作者，唐碧霞高级工程师和赵文化正高级工程师为共同通讯作者。本工作得到国度重点研发打算，亚星游戏先导项目赞助。

DAFH模型框架图

论文链接