作者简介:李巧巧(1988—),副教授,从事图像处理与深度学习研究;E-mail:liqq@xbmu.edu.cn
基金资助:
摘要: 本文提出了一种线框引导与Transformer增强U-Net(LDG-TEUN)的敦煌壁画图像修复方法。首先,在编码端嵌入融合轴向注意力与二维位置编码的交叉注意力模块,通过有效建模全局结构与长距离依赖关系,缓解大范围缺损造成的结构信息缺失问题。其次,设计双域部分卷积(DPConv)单元,联合对空间域与频率域特征进行建模,以此增强模型对复杂纹理和边缘细节的刻画能力,解决细节还原困难的问题。最后,构建复合损失函数,从结构一致性、纹理保真度与色彩分布合理性三个维度协同约束训练,进而提升整体修复效果,尤其在色彩复原方面更有助于贴近壁画的历史原貌。实验结果表明本方法在结构连贯性和色彩复原方面均取得了更优性能,验证了其在敦煌壁画数字化修复中的有效性和实用价值。
中图分类号:
李巧巧1, 谭秋林1, 刘泓材1, 王维兰2, 赵东东3. 线框引导与Transformer增强U-Net方法[J]. 上海交通大学学报, doi: 10.16183/j.cnki.jsjtu.2025.164.
LI Qiaoqiao1, TAN Qiulin1, LIU Hongcai1, WANG Weilan2, ZHAO Dongdong3. A Line-Drawing-Guided and Transformer-Enhanced U-Net Method[J]. Journal of Shanghai Jiao Tong University, doi: 10.16183/j.cnki.jsjtu.2025.164.
| [1] | . 基于Transformer对比学习的自动睡眠分期方法[J]. J Shanghai Jiaotong Univ Sci, 2025, 30(4): 720-732. |
| [2] | . CT-MFENet:基于全局-局部特征融合的用于视网膜血管分割的上下文Transformer和多尺度特征提取网络[J]. J Shanghai Jiaotong Univ Sci, 2025, 30(4): 668-682. |
| [3] | 孙欣, 王思敏, 谢敬东, 江海林, 王森. 考虑多维影响因素的改进Transformer-PSO短期电价预测方法[J]. 上海交通大学学报, 2024, 58(9): 1420-1431. |
| [4] | 王宝坤, 王如路, 陈锦剑, 潘越, 王鲁杰. 基于深度学习的盾构隧道表观病害自动检测方法[J]. 上海交通大学学报, 2024, 58(11): 1716-1723. |
| [5] | 秦菁, 文渊博, 高涛, 刘瑶. 面向多天气退化图像恢复的自注意力扩散模型[J]. 上海交通大学学报, 2024, 58(10): 1606-1617. |
| [6] | 薛永波a,刘 钊b,李泽阳a,朱 平a. 基于改进分水岭算法和U-net神经网络模型的复合材料CT图像分割方法[J]. J Shanghai Jiaotong Univ Sci, 2023, 28(6): 783-792. |
| [7] | 李擎, 皇甫玉彬, 李江昀, 杨志方, 陈鹏, 王子涵. UConvTrans:全局和局部信息交互的双分支心脏图像分割[J]. 上海交通大学学报, 2023, 57(5): 570-581. |
| [8] | 狄子琦, 王翔宇, 吴双, 周宇 . 基于Transformer架构的高超声速飞行器轨迹生成与预测算法[J]. 空天防御, 2023, 6(4): 35-41. |
| [9] | SONG Simeng (宋思蒙), CHEN Xiaoxin (陈孝信), QIAN Yong (钱勇), WANG Hui (王辉), ZHANG. Research on Time-Domain Transfer Impedance Measurement Technology for High Frequency Current Transformers in Partial Discharge Detection of Cables[J]. J Shanghai Jiaotong Univ Sci, 2020, 25(1): 10-17. |
| [10] | REN Fang-yu (任方宇), SI Shu-bin* (司书宾), CAI Zhi-qiang (蔡志强), ZHANG Shuai (张帅). Transformer Fault Analysis Based on Bayesian Networks and Importance Measures[J]. 上海交通大学学报(英文版), 2015, 20(3): 353-357. |
| 阅读次数 | ||||||
|
全文 |
|
|||||
|
摘要 |
|
|||||