焦点日报：GAN卷土重来：10亿参数的GigaGAN效果堪比扩散模型-现在运动网

焦点日报：GAN卷土重来：10亿参数的GigaGAN效果堪比扩散模型

来源：程序员客栈｜时间： 2023-04-23 05:45:43 ｜

(相关资料图)

点蓝色字关注“机器学习算法工程师”

设为星标，干货直达！

自从 DALL·E 2 之后，在图像生成方面扩散模型替代GAN成了主流方向，比如开源的文生图模型stable diffusion也是基于diffusion架构的。近日， Adobe研究者在论文Scaling up GANs for Text-to-Image Synthesis提出了参数量为10亿（1B）的GAN模型：GigaGAN，其在文生图效果上接近扩散模型效果，而且推理速度更快，生成512x512大小图像只需要0.13s，生成16M像素图像只需要 3.66s。同时GigaGAN也支持latent空间的编辑功能，比如latent插值，风格混合，以及向量运算等。

GigaGAN

改进了StyleGAN架构，采用两阶段训练策略：一个是64x64的图像生成器和一个512x512的图像超分2器，其图像生成器架构如下所示（这里也是采用CLIP text encoder来引入text condition）：

GigaGAN

在 LAION2B-en和 COYO-700M数据集上训练，其在COCO数据集上的FID达到9.09，超过stable diffusion 1.5，推理速度比stable diffusion快20倍多（2.9s vs 0.13s）：

GigaGAN

除了文生图能力，还可以实现可控的合成，比如风格混合，如下图所示：

更多效果图和技术细节见论文https://arxiv.org/abs/2303.05511和网站https://mingukkang.github.io/GigaGAN/

关键词：

焦点日报：GAN卷土重来：10亿参数的GigaGAN效果堪比扩散模型

热文推荐

焦点日报：GAN卷土重来：10亿参数的GigaGAN效果堪比扩散模型

2006年公务员法释义 2006年公务员法-头条焦点

美太空探索技术公司“星舟”火箭发射升空后爆炸今日最新

天天观察：《命运2 XUR 老九试炼情报》23/04/22丨黑夜擦撞丨BUG修复丨下周预览

竞争本田思域，2023款长安UNI-V正式上市，售价10.89万元起

天天观焦点：工信部道路机动车辆查询入口官网在哪?

全球今热点：俄罗斯国防部22日发布战报称，俄军经过激战控制了巴赫穆特市西部的三个街区

俄原子能电力公司：扎波罗热核电站四号机组建筑玻璃因乌方使用无人机被打碎天天热推荐

每日动态!潮汐周期_关于潮汐周期介绍

天天热议:脊灰疫苗是打针还是吃糖丸比较好_脊灰疫苗是打针还是吃糖丸

白河法院开展廉政监督员“八个一”暗访调研活动-当前通讯

世界动态:券商减持潮来临？国信证券或遭“清仓式”减持，一汽投资变现超40亿

cf新版本的自定义喷图在哪里_cf自定义喷图怎么弄

湖南日报案例入选中国报协先进工作者优秀案例_新消息

讲好中国故事，不断扩大国际“朋友圈”！河南广播电视台分享海外传播经验|资讯推荐

复仇者联盟2百度云网盘资源_复仇者联盟2百度云-新要闻

智能金属结构单模光纤宏弯温度传感原理及特性研究_对于智能金属结构单模光纤宏弯温度传感原理及特性研究简单介绍

金徽酒一季度营收增长26.61%，高质量增长延续环球微速讯

泛舟游顺义潮白河的美好愿景何时能实现？答案来了！

复制cad图到word_cad图怎么复制到word 环球要闻

资讯

行业

热文：男女患性病的表现不同吗？小心这5种情况引发性病

热点

我国在两种物理体系实现量子计算优越性

新主流网络视听崛起，开启主流价值社交传播之门

蔬菜价格波动电商平台加强直采保供保价

去境外搞电信诈骗赚快钱？结局可能是被打断手脚甚至抑郁

广东江门中院宣判一侵犯知识产权犯罪案

说好“一梯一户”却成了“两梯两户”，买方能否解除合同