SynthLight通过两项关键技术确保细节保留:
- 无分类器指导的推理采样:在扩散过程的每个去噪步骤中,模型会交叉参考原始图像的低频信息,这样既能接受新光照条件的高层指导,又不会破坏原有面部细节
- 多尺度特征融合:网络架构中包含专门的skip-connection模块,将编码器提取的局部纹理特征(如睫毛、唇纹)直接传递给解码器
技术论文数据显示,这种设计使SynthLight在LPIPS感知相似度指标上比基准模型提高了23%。实际操作中用户会注意到,即使大幅改变光照方向,人物特有的痣、疤痕等微特征也能完整保留。
本答案来源于文章《SynthLight:对肖像图像进行自然光照渲染(未发布)》