生成式对抗网络及其计算机视觉应用研究综述

被引:73
作者
曹仰杰
贾丽丽
陈永霞
林楠
李学相
机构
[1] 郑州大学软件与应用科技学院
关键词
生成式对抗网络; 计算机视觉; 图像生成; 图像风格迁移; 图像修复;
D O I
暂无
中图分类号
TP391.41 [];
学科分类号
080203 ;
摘要
目的生成式对抗网络(GAN)的出现为计算机视觉应用提供了新的技术和手段,它以独特零和博弈与对抗训练的思想生成高质量的样本,具有比传统机器学习算法更强大的特征学习和特征表达能力。目前在机器视觉领域尤其是样本生成领域取得了显著的成功,是当前研究的热点方向之一。方法以生成式对抗网络的不同模型及其在计算机视觉领域的应用为研究对象,在广泛调研文献特别是GAN的最新发展成果基础上,结合不同模型的对比试验,对每种方法的基本思想、方法特点及使用场景进行分析,并对GAN的优势与劣势进行总结,阐述了GAN研究的现状、在计算机视觉上的应用范围,归纳生成式对抗网络在高质量图像生成、风格迁移与图像翻译、文本与图像的相互生成和图像的还原与修复等多个计算机视觉领域的研究现状和发展趋势,并对每种应用的理论改进之处、优点、局限性及使用场景进行了总结,对未来可能的发展方向进行展望。结果 GAN的不同模型在生成样本质量与性能上各有优劣。当前的GAN模型在图像的处理上取得较大的成就,能生成以假乱真的样本,但是也存在网络不收敛、模型易崩溃、过于自由不可控的问题。结论 GAN作为一种新的生成模型具有很高的研究价值与应用价值,但目前存在一些理论上的桎梏亟待突破,在应用方面生成高质量的样本、逼真的场景是值得研究的方向。
引用
收藏
页码:1433 / 1449
页数:17
相关论文
共 7 条
[1]   生成式对抗网络GAN的研究进展与展望 [J].
王坤峰 ;
苟超 ;
段艳杰 ;
林懿伦 ;
郑心湖 ;
王飞跃 .
自动化学报, 2017, 43 (03) :321-332
[2]  
PessimalPrint: a reverse Turing test[J] . Henry S. Baird,Allison L. Coates,Richard J. Fateman.International Journal on Document Analysis and Recognition . 2003 (2-3)
[3]   Fair end-to-end window-based congestion control [J].
Mo, JH ;
Walrand, J .
IEEE-ACM TRANSACTIONS ON NETWORKING, 2000, 8 (05) :556-567
[4]   Gradient-based learning applied to document recognition [J].
Lecun, Y ;
Bottou, L ;
Bengio, Y ;
Haffner, P .
PROCEEDINGS OF THE IEEE, 1998, 86 (11) :2278-2324
[5]   Backpropagation Applied to Handwritten Zip Code Recognition [J].
LeCun, Y. ;
Boser, B. ;
Denker, J. S. ;
Henderson, D. ;
Howard, R. E. ;
Hubbard, W. ;
Jackel, L. D. .
NEURAL COMPUTATION, 1989, 1 (04) :541-551
[6]  
Image Net Classification with Deep Convolutional Neural Networks .2 Krizhevsky A,Sutskever I,Hinton GE. Proceedings of the 25th International Conference on Neural Information Processing . 2012
[7]  
Image-to-image translation with conditional adversarial networks .2 Isola P,Zhu J Y,Zhou T H,et al. Proceedings of the IEEE Conference on Computer Vision and Pattern Recognition . 2017