科研进展

深圳先进院开发基于物理信息的高效复值注意力mixer架构用于彩色无透镜全息重建

发布时间:2023-11-01 来源:深圳先进技术研究院

  近日,中国科学院深圳先进技术研究院医工所秦文健博士团队在JCR一区期刊Optics and Lasers in Engineering上发表了题为Fast physic-informed mixer architecture for color Lensfree holographic reconstruction的研究。该团队提出了一种基于物理信息的无监督复值网络架构,用于高效、高质量彩色无透镜全息重建。本研究中,王家乾博士生和曾光工程师为共同第一作者,秦文健博士为通讯作者,中国科学院深圳先进技术研究院为第一单位。 

  从多波长全息图精确重建彩色图像在生物医学成像应用中至关重要。当前数据驱动的深度学习方法在生物医学图像重建性能方面已经取得了重要进展。尤其是未经训练的神经网络方法可以有效解决成像模型对数据集样本数量要求和泛化问题。然而,现有方法依然需要更多的迭代计算来提高重建质量,这使得模型需要更长的收敛时间。  

  为了应对这一挑战,该团队提出了一种高效的复值注意力混合器(ECA-Mixer)架构,用于快速准确的物理信息彩色全息重建。该架构由三个核心模块组成:编码器、非线性变换器和解码器,每个模块都结合了高效的注意力机制和混合器层,用于通道特征提取和空间信息转换。为了保留高频信息,该团队还引入了 2D Haar 小波及其逆变换来编码和解码特征。  

  该研究成果在大量仿真和实验样本上的结果表明,该方案在计算时间和图像质量方面实现了极佳的彩色重建结果。更重要的是,该成果方案能够在短短几分钟内以更高分辨率对大尺寸宽视场样本进行快速成像。本论文技术成果为计算全息成像在生物医学显微成像方面应用提供了新的解决思路和方法。  

骨组织病理大视场彩色全息重建结果展示  

论文链接 

    


附件下载: