前沿热点：GAN卷土重来：10亿参数的GigaGAN效果堪比扩散模型-华中技术网

前沿热点：GAN卷土重来：10亿参数的GigaGAN效果堪比扩散模型

2023-04-25 22:03:24 | 来源：程序员客栈

(相关资料图)

点蓝色字关注“机器学习算法工程师”

设为星标，干货直达！

自从 DALL·E 2 之后，在图像生成方面扩散模型替代GAN成了主流方向，比如开源的文生图模型stable diffusion也是基于diffusion架构的。近日， Adobe研究者在论文Scaling up GANs for Text-to-Image Synthesis提出了参数量为10亿（1B）的GAN模型：GigaGAN，其在文生图效果上接近扩散模型效果，而且推理速度更快，生成512x512大小图像只需要0.13s，生成16M像素图像只需要 3.66s。同时GigaGAN也支持latent空间的编辑功能，比如latent插值，风格混合，以及向量运算等。

GigaGAN

改进了StyleGAN架构，采用两阶段训练策略：一个是64x64的图像生成器和一个512x512的图像超分2器，其图像生成器架构如下所示（这里也是采用CLIP text encoder来引入text condition）：

GigaGAN

在 LAION2B-en和 COYO-700M数据集上训练，其在COCO数据集上的FID达到9.09，超过stable diffusion 1.5，推理速度比stable diffusion快20倍多（2.9s vs 0.13s）：

GigaGAN

除了文生图能力，还可以实现可控的合成，比如风格混合，如下图所示：

更多效果图和技术细节见论文https://arxiv.org/abs/2303.05511和网站https://mingukkang.github.io/GigaGAN/

上一篇下一篇

相关新闻

前沿热点：GAN卷土重来：10亿参数的GigaGAN效果堪比扩散模型

励志连载传记《当今奇人周兴和》连载之二十三：苦不堪言再创业

正海生物(300653)：短期业绩承压全年业绩修复可期

讯息：助推百亿级产业高质量发展！浦东首个食品产业园正式挂牌

「第一书记驻村记」渤海镇洞台村：吴尚军环球观点

全球首款500米热成像手机！AGM G2 GT首发5999元起|焦点速读

AI体育助教旷视运动猿助力教育数字化发展_聚看点

全球车载OLED市场4年增长3.5倍，车载电视会成为汽车标配？-世界资讯

欧阳询墨迹选_世界资讯

【天天快播报】又大跌！原因找到！私募大佬都跌懵了葛卫东：搞不懂了！

环旭电子：拟对墨西哥厂增资6000万美元计划新建第二座工厂-天天快消息

6股获基金调研精测电子最受关注-世界百事通

4月25日安井食品涨停分析：大消费，食品，预制菜概念热股_天天微速讯

且看吉林春来早——从企业用电量透视全省经济发展活力

【环球聚看点】直播预告｜探访省级“双优”建设校武汉市石牌岭高级职业中学

最新新闻

前沿热点：GAN卷土重来：10亿参数的GigaGAN效果堪比扩散模型

励志连载传记《当今奇人周兴和》连载之二十三：苦不堪言再创业

正海生物(300653)：短期业绩承压全年业绩修复可期

讯息：助推百亿级产业高质量发展！浦东首个食品产业园正式挂牌

「第一书记驻村记」渤海镇洞台村：吴尚军环球观点

全球首款500米热成像手机！AGM G2 GT首发5999元起|焦点速读

AI体育助教旷视运动猿助力教育数字化发展_聚看点

全球车载OLED市场4年增长3.5倍，车载电视会成为汽车标配？-世界资讯

欧阳询墨迹选_世界资讯

【天天快播报】又大跌！原因找到！私募大佬都跌懵了葛卫东：搞不懂了！

环旭电子：拟对墨西哥厂增资6000万美元计划新建第二座工厂-天天快消息

6股获基金调研精测电子最受关注-世界百事通

4月25日安井食品涨停分析：大消费，食品，预制菜概念热股_天天微速讯

且看吉林春来早——从企业用电量透视全省经济发展活力

【环球聚看点】直播预告｜探访省级“双优”建设校武汉市石牌岭高级职业中学

股市今想2023425 全球百事通

督促退赔损失近5000万！宁波检察持续加大知产司法保护力度

金冬雁：没有证据表明二次感染对身体伤害更严重，现在应以平常心看待新冠病毒天天新消息

资讯：细致打磨品牌，精心钻研文化，漫心为“城市探索”提质赋能

牛皮癣是什么牛皮癣的初期症状是什么

每日速读!AI美女｜舞蹈房里的开心时光

2座MPV14万左右哪款好？要性价比还是要口碑？购车指数告诉你

高质量研制职业本科人才培养方案|世界播报

公募基金一季报披露完毕最新前十大重仓股浮出水面

一封信，跨越山海传递浙甘情

森麒麟：目前公司欧美市场订单暴增，公司产品供不应求_天天快播报

天天热资讯！呼伦贝尔爱心公益协会组织志愿者开展巡河净滩活动

全球简讯:国家税务总局：今年一季度累计免征新能源车辆购置税212亿元

焦点速递！万达商管招股书失效，此前消息称上市推迟至11月

8岁小女孩独坐路边，幸亏民警多看了一眼天天最资讯