典型文献
基于参考图语义匹配的花卉线稿工笔效果上色算法
文献摘要:
研究基于参考图像的花卉线稿图的工笔效果上色问题.现有的基于参考图像的线稿图上色算法对工笔花卉画特有的色彩渐变的特点难以学习和模拟;此外通常还要求参考图像与线稿图具有相似的几何布局结构,这也限制了算法的适用性,故而直接采用现有算法难以实现线稿图的工笔效果上色.基于条件生成对抗网(conditional generative adversarial network,CGAN)框架,提出了一种将参考图像与线稿图进行语义匹配的花卉线稿图工笔效果上色算法RBSM-CGAN.该算法在网络结构设计方面,以U型网络(简称U-Net)为生成器基础,设计了 2个附加子模块:1)语义定位子模块.该模块预训练了一个语义分割网络,以生成花卉线稿图的语义标签图,该标签图编码后作为自适应实例归一化的仿射参数引入到上色模型中,提升对不同语义区域的识别能力,进而提高颜色定位的准确性.2)颜色编码子模块.该模块提取参考图像的颜色特征,而后将该特征拼接到生成网络解码层的前3层,利用这种方式将颜色信息注入上色模型,与语义定位模块相配合加强算法对渐变色的学习和模拟.另外,算法在网络训练方面改变传统的"工笔花卉原作-花卉线稿图"数据对的训练方式,通过打乱原作的几何结构等摄动操作生成原作摄动图,采用"原作摄动图-花卉线稿图"数据对进行网络训练,降低了模型对原作空间几何结构的依赖性,提升了算法的适用性.实验结果表明:该算法对用户选择的参考图像的颜色语义具有正确的响应,所引入的"语义定位+颜色编码"的结构设计提升了对渐变色的模拟效果,实现了在不同参考图像指导下的花卉线稿图的工笔效果上色,可快速生成多样化的上色结果.
文献关键词:
工笔花卉上色;语义匹配;条件生成对抗网络;语义分割网络;自适应实例归一化
中图分类号:
作者姓名:
李媛;陈昭炯;叶东毅
作者机构:
福州大学计算机与大数据学院 福州 350108
文献出处:
引用格式:
[1]李媛;陈昭炯;叶东毅-.基于参考图语义匹配的花卉线稿工笔效果上色算法)[J].计算机研究与发展,2022(06):1271-1285
A类:
RBSM,语义定位,工笔花卉上色
B类:
基于参考,语义匹配,线稿,参考图像,花卉画,布局结构,故而,难以实现,conditional,generative,adversarial,network,CGAN,网络结构设计,结构设计方面,Net,生成器,子模块,位子,预训练,语义分割网络,成花,语义标签,图编码,自适应实例归一化,仿射,识别能力,颜色编码,码子,颜色特征,特征拼接,接到,生成网络,解码,颜色信息,定位模块,相配合,渐变色,网络训练,改变传统,原作,训练方式,打乱,几何结构,摄动,动图,空间几何,用户选择,快速生成,色结,条件生成对抗网络
AB值:
0.286444
相似文献
机标中图分类号,由域田数据科技根据网络公开资料自动分析生成,仅供学习研究参考。