Universal Style Transfer via Feature Transforms（WCT）-ANIPS

摘要

论文下载地址
论文代码链接
论文引用格式：

@inproceedings{li2017universal,
  title={Universal style transfer via feature transforms},
  author={Li, Yijun and Fang, Chen and Yang, Jimei and Wang, Zhaowen and Lu, Xin and Yang, Ming-Hsuan},
  booktitle={Advances in neural information processing systems},
  pages={386--396},
  year={2017}
}

整体流程图

WCT变换

白化变换（Whitening transform）
首先通过减去它的均值向量中心化内容图像的特征，然后通过下面的变换得到不相关的特征图

颜色变换
首先对风格图像的特征图进行中心化处理，然后利用风格图像的对角矩阵和相应的正交矩阵对白化变换得到的特则图进行下面变换，最后将得到的特征图和风格图像特征图的中心向量相加得到回到中心位置的特征图。

重构操作

将内容特征和WCT变换得到的特征融合

然后将得到的新特征图输入到重构解码网络得到风格化后的图像。

重构解码器的损失函数设计

多层粗到细风格化