深兰科技|计算机视觉+艺术处理，现实场景秒变动漫大片
2020-06-11 08:44
深兰科技
关注
2．2 损失函数
卡通图像具有锐利边缘，顺滑的色彩偏差，纹理也相对简单，所以作者定义了新的loss来完成这个需求。
作者提出了损失函数L（G，D），由两部分组成，第一部分为普通的GAN损失，第二部分为保证原真实图像内容的内容损失，如公式所示：
可以看到公式②中比普通GAN损失多加了一个，也就多了一个数据集。那这个数据集怎么来的，它是通过对原始卡通图像进行边缘模糊后得到的（边缘模糊图片见图2－2，左边为原图，右边位边缘模糊图），目的是为了让生成网络G生成边缘清晰的图片，所以判别为假数据。而公式③中的就是Neural Style（风格迁移）里面的内容损失，只不过把L2损失改为L1损失，在这里我们可以看成是一个正则化。
图2－2清晰动漫图（左）、边缘模糊图（右）
2．3 初始化技巧
作者引入一个初始化技巧，用公式③中的损失先来单独训练G，大概训练10个epoch。这样做的目的是为了生成的图片初始后就能保证原真实场景的内容，因为普通的单向GAN要是没有加入一些限制很难稳定保证原始图片的内容，大多会出现扭曲或更严重的情况。
3．总结
经过上述的技术细节来训练CartoonGAN，就可以将现实的场景完美的转换成漫画风格。
最后，我们就来欣赏一些漂亮的转换结果。
分享
声明：
本文由入驻维科号的作者撰写，观点仅代表作者本人，不代表OFweek立场。如有侵权或其他问题，请联系举报。
最新活动更多
-
5月10日立即下载>> 【是德科技】精选《汽车 SerDes 发射机测试》白皮书
-
5月28日立即观看>> 【在线研讨会】Ansys镜头点胶可靠性技术及方案
-
5月31日立即报名>> 【线下论坛】新唐科技2024未来创新峰会
-
6月18日立即报名>> 【线下会议】OFweek 2024（第九届）物联网产业大会
-
8月27-29日马上报名>>> 2024（第五届）全球数字经济产业大会暨展览会
-
8月27日立即报名>>> 2024先进激光技术博览展
推荐专题
-
4 钉钉自己挤上牌桌
发表评论
请输入评论内容...
请输入评论/评论长度6~500个字
暂无评论
暂无评论