清华开启物理驱动光场显微AI革命,首次活体三维高清监测超30万帧
近期,清华大学团队开发了一种新型自监督学习网络 SeReNet(Self-supervised Reconstruction Network),用于光场显微镜及其变体的快速、高分辨率、鲁棒的 3D 重建。
4D 信息先验赋予 SeReNet 在强噪声、光学像差、样本运动等不利条件下,实现了比现有深度学习方法更具优势的泛化能力。而且,相比于传统迭代方法,SeReNet 将处理速度提高了 700 倍,达到毫秒级处理速度。
作为新一代显微镜技术,这一技术突破有望用于细胞生物学、神经科学、免疫学等生物医学成像领域,为活体生物样本的高速、高精度三维成像提供了全新解决方案。
值得注意的是,SeReNet 仅需估计点扩散函数即可适配应用,这种高度通用的特性使其应用范围远超生物医学领域,在高速摄影、天文成像、水下探测等依赖计算成像技术的专业领域同样展现出巨大的应用潜力。
日前,相关论文以《基于物理驱动的自监督学习实现光场显微镜快速、高分辨、鲁棒的三维重建》(Physics-driven self-supervised learning for fast high-resolution robust 3D reconstruction of light-field microscopy)为题发表在 Nature Methods[1],目前相关代码已完全开源。
清华大学博士后卢志和复旦大学博士生金满昌是共同第一作者,清华大学戴琼海院士、吴嘉敏副教授和天津大学杨敬钰教授担任共同通讯作者。

图丨相关论文(来源:Nature Methods)
该课题组长期致力于基于光场的活体介观显微镜研究,近年来已开发了一系列成果计算成像仪器成果,包括 SLiM1100 扫描光场显微镜 [2] 和 SLiM2000 共聚焦扫描光场显微镜 [3]、RUSH3D 活体介观显微仪 [4] 等。
然而,领域内的共性问题体现在:早期的方法依赖硬件与算法的松散耦合,重建过程需复杂数学运算,尽管重建质量尚可但速度慢;后期发展的有监督深度学习方案在速度方面提升显著,却受限于特定样本的训练数据需求,这导致泛化能力与成像保真度难以兼顾。
“这些方法需要用户为每种新的样本,重新训练神经网络来学习显微成像与重建过程。”卢志对 DeepTech 解释道。

图丨卢志博士参加生医工交叉方向的学术会议(来源:卢志)
为解决上述问题,该团队在 2021 年 9 月时萌生了创新思路,最终发展出“物理信息嵌入神经网络”的方案。这种自监督深度学习算法无需依赖大量成对训练数据,即可实现更高效的三维重建。

图丨 SeReNet 设计原理(来源:Nature Methods)
SeReNet 主要由三个模块组成:深度分解模块、卷积神经网络模块和自监督模块。卢志指出,该网络通过结合物理先验信息与多视角图像变化,实现三维体积的高效重建。
这种设计使模型无需标注数据即可学习光场成像的本质物理规律。深度分解模块采用固定点卷积和方向复制策略,用极少参数(169 个)实现精准的深度定位;卷积神经网络模块利用 3D 卷积层恢复高分辨率结构;自监督模块则通过 4D 波前光学点扩散函数约束网络训练,将微观光学衍射物理方程建模到神经网络,使光场三维重建耗时从迭代算法的分钟级缩短至 50 毫秒。
该技术进一步成功解决了针对实际应用中的五大实用性挑战:噪声环境下的鲁棒重建、样本快速运动导致的伪影(motion artifacts)、光学像差校正、跨样本泛化能力(如斑马鱼、小鼠、果蝇等不同生物样本),以及全自动化重建(无需人工超参数干预)。
具体来说,研究人员专门设计了新的噪声鲁棒损失函数,引入 preDAO 方法校正光学像差,并开发轻量级网络抑制样本运动伪影,同时通过优化的数据集和训练策略实现从仿真数据到真实生物样本的泛化。“这些改进旨在确保技术能在真实场景中实用,而不仅仅停留在论文层面。”卢志强调。

动图丨斑马鱼幼虫剪尾手术后全身免疫细胞活动记录和重建分析(来源:课题组)
在斑马鱼断尾带来的炎症损伤实验中,研究团队观察到一个持续 48 小时的免疫风暴现象,其中中性粒和巨噬两种免疫细胞的动态活动被以每秒 1 个体积的速率完整记录,共获取超过 34 万帧高分辨率数据,首次在国际上清晰呈现了损伤后大规模免疫细胞迁移的完整动力学特征。
需要了解是,传统迭代处理方法需要近两年(约 500 天)才能完成这些数据的重建,而采用新型 SeReNet 技术仅需不到 5 天即可完成。重建视频清晰显示,断尾后数小时内斑马鱼体内的巨噬细胞(绿色标记)和中性粒细胞(黄色标记)数量显著增加并呈现高度活跃状态。
该技术获得审稿人高度评价:“我们对系统的整体性能、作者解决的问题数量以及广泛的应用范围印象深刻。”

动图丨斑马鱼幼虫剪尾手术和对照组全身免疫细胞活动路径追踪(来源:课题组)
SeReNet 技术还展现出对光学像差和样本运动的卓越鲁棒性,这一特性在活体成像中具有关键价值。在小鼠肝损伤模型研究中,研究人员利用该技术成功捕捉到中性粒细胞与 Kupffer 细胞间的精细相互作用以及细胞信号传递过程,这些发现为深入理解哺乳动物先天免疫系统的修复机制提供了全新视角。
据介绍,该技术目前将该技术已嵌入荷湖科技公司产品软件,以提升重建效率,为生命科学研究提供更便捷的工具。
此外,该技术的应用潜力远不止于当前展示的光场成像(基于多视角点扩散函数)。研究人员近期发现,这种方法同样适用于单视角成像系统,原则上只要能够估计点扩散函数,就可以拓展到任意计算成像领域。

图丨小鼠肝损伤实验中免疫细胞和内皮细胞之间的招募行为(来源:Nature Methods)
在这项研究基础上,该课题组计划在两个方向继续探索:首先是扩大成像尺度,目前技术可覆盖几百微米范围,未来计划扩展至数十毫米级活体介观成像,实现小鼠全器官(如脑、肝脏)的细胞级追踪;其次是结合具身智能技术,让显微镜具备“人”的思维能力,能够对介观世界自主理解和分析,高通量揭示生物规律,助力药物筛选等应用。
参考资料:
1.Lu, Z., Jin, M., et al. Physics-driven self-supervised learning for fast high-resolution robust 3D reconstruction of light-field microscopy. Nature Methods (2025). https://doi.org/10.1038/s41592-025-02698-z
2.Wu, J., et al. Iterative tomography with digital adaptive optics permits hour-long intravital observation of 3D subcellular dynamics at millisecond scale. Cell 184, 3318-3332 (2021).https://doi.org/10.1016/j.cell.2021.04.029
3.Lu, Z., et al. Long-term intravital subcellular imaging with confocal scanning light-field microscopy. Nature Biotechnology 43, 569–580 (2025).https://doi.org/10.1038/s41587-024-02249-5
4.Zhang, Y., et al. Long-term mesoscale imaging of 3D intercellular dynamics across a mammalian organ. Cell 187, 6104-6122 (2024).https://doi.org/10.1016/j.cell.2024.08.026
运营/排版:何晨龙
清华清申科技申请基于多级密钥衍生的密钥获取方法等专利,降低密钥暴露风险
金融界2025年6月6日消息,国家知识产权局信息显示,清华大学;上海清申科技发展有限公司申请一项名为“基于多级密钥衍生的密钥获取方法、装置、电子设备及存储介质”的专利,公开号CN120110653A,申请日期为2025年02月。
专利摘要显示,本发明提供一种基于多级密钥衍生的密钥获取方法、装置、电子设备及存储介质,涉及卫星测控安全技术领域。该方法包括三级密钥衍生:运控中心与卫星基于相同的第一、二永久身份密钥及第一衍生信息,分别生成相同的第一、二短期身份密钥;运控中心将所述第一短期身份密钥传输至测控中心;测控中心与卫星基于所述的第一和第二短期身份密钥及第二衍生信息,分别生成相同的第一和第二数据密钥。该方法通过预存密钥和传输衍生信息,实现多级密钥的非传输化获取,降低密钥暴露风险。同时通过密钥控用分离和多方分级管控,在保持测控加解密独立性的同时,增强其受控性和安全性,为多主体协同的卫星测控场景提供兼顾密钥自主性与全局可控性的密码架构。
本文源自金融界
相关问答
为什么我们把清华科技院称为高校双创生态圈构建的旗帜?
因为清华科技园出的双创成果最多。因为清华科技园出的双创成果最多。
中科大科技创新班是干嘛的?
中国科学技术大学创新班就是俗称的少年班,聘请国内外著名教授,是专门培养具有特长青年才俊,国家栋梁。中国科学技术大学是科技部直属公办重点大学,工科强校,...
电子科学与技术专业清华和电子科技大学保研选择哪所学校好,如果都能保研成功情况下?
如果两所学校都能保研成功,我觉得清华大学更好。理由如下:一、专业水平相差无几。教育部第四轮学科评估,在电子科学与技术学科,电子科技大学获A+评级,是全...理...
国防科技大学,清华,北大这三所大学你会选择哪所?有啥优势?
国防科技大学是985/211双一流军事院校。2020年的本一录取分数线在626分。不了解国防科技大学的肯定以为,上了国防科技大学未来就可以报效祖国,能在部队,甚至...
北京科技大学占地面积多少?
地理位置占地约80.46万平方米,校舍建筑总面积84.49万平方米。北京科技大学位于高校云集的北京市海淀区学院路,校园内保存完好的苏联氏建筑群与现代化建筑错落...
中科大分数线和清华北大谁高?
据我所知,每年高考录取新生中科大分数线,一般都是要比清华北大的低一些。这也跟我国目前高校的划分档次相符合的。我们都知道,清华和北大是同属我国高校的最高...
中科大厉害还是清华厉害?
清华大学应该比中国科大更厉害一些。清华大学是国内公认的理工类大学的头牌,和北京大学一起长期稳居中国大学排行榜前两名。不论是从历史、师资、学科建设、社...
全国一本科技大学排名?
近日,校友会公布了2021年中国科技类大学排名,华中科技大学雄居2021中国科技类大学排名榜首,是2021年中国科技类高校中综合实力最强的大学。中国科学技术大学第...
武汉清华科技王太阳能维修咋样-一起装修网
[回答]武汉清华科技王太阳能这个牌子我觉得还不错,因为我家都是用的这个牌子的太阳能热水器,型号为清华阳光神童系列(16支)太阳能热水器,价格也算适中...
如果考上清北奖励50万,那考上国防科大也会奖励这么多吗?
我认为一样奖励比较合理。当然,世界排名清北靠前,清华优势更明显,我的出发点在为国贡献上,不必靠名气。现在,更突出的是人才为谁用的问题,目下我相信国人...
