GAN卷土重来：10亿参数的GigaGAN效果堪比扩散模型

来源：程序员客栈时间：2023-04-24 19:04:06

(资料图片仅供参考)

点蓝色字关注“机器学习算法工程师”

设为星标，干货直达！

自从 DALL·E 2 之后，在图像生成方面扩散模型替代GAN成了主流方向，比如开源的文生图模型stable diffusion也是基于diffusion架构的。近日， Adobe研究者在论文Scaling up GANs for Text-to-Image Synthesis提出了参数量为10亿（1B）的GAN模型：GigaGAN，其在文生图效果上接近扩散模型效果，而且推理速度更快，生成512x512大小图像只需要0.13s，生成16M像素图像只需要 3.66s。同时GigaGAN也支持latent空间的编辑功能，比如latent插值，风格混合，以及向量运算等。

GigaGAN

改进了StyleGAN架构，采用两阶段训练策略：一个是64x64的图像生成器和一个512x512的图像超分2器，其图像生成器架构如下所示（这里也是采用CLIP text encoder来引入text condition）：

GigaGAN

在 LAION2B-en和 COYO-700M数据集上训练，其在COCO数据集上的FID达到9.09，超过stable diffusion 1.5，推理速度比stable diffusion快20倍多（2.9s vs 0.13s）：

GigaGAN

除了文生图能力，还可以实现可控的合成，比如风格混合，如下图所示：

更多效果图和技术细节见论文https://arxiv.org/abs/2303.05511和网站https://mingukkang.github.io/GigaGAN/

上一篇：可再生能源制氢增长潜力巨大垃圾制氢开启新赛道

下一篇：最后一页

X 关闭

导航

GAN卷土重来：10亿参数的GigaGAN效果堪比扩散模型

推荐

GAN卷土重来：10亿参数的GigaGAN效果堪比扩散模型

可再生能源制氢增长潜力巨大 垃圾制氢开启新赛道

【原耽双男主小说推荐】《陪我》by无虞txt|短讯

.NET Web入门到高级路线（新版本） 焦点快看

网易再“撕”暴雪：还钱 3亿！_今热点

今日热搜：中国星辰丨宇宙级考验，在太空中“盖房子”需要满足什么条件？

水泥稳定碎石组价_水泥稳定碎石

拒绝承担国服玩家退款 暴雪欠款3亿遭网易起诉

吉宏股份（002803）4月24日主力资金净卖出413.98万元-环球播报

一个子女和两个子女扣税是一样吗？2个小孩个税可以给一个人扣吗？

押注美国经济将避免衰退 对冲基金大举做空十年期美债-热门

环球实时：遍赏春色，细嗅书香！世界读书日·书香黄浦体验活动举行

法国持续抗议声中，马克龙警告：勒庞可能在2027年掌权

【世界报资讯】a股与b股的区别是什么？股市a股和b股有什么区别？

看热讯：中青网评：构建青年话语体系，让网络表达更懂“Z世代”

现代主义之后的艺术史_关于现代主义之后的艺术史介绍

锦江酒店（中国区）携多元品牌亮相2023HFE 引领酒店行业投资热潮 天天消息

@温州市民 这三类违法行为即日起开展专项整治_每日聚焦

中盐化工：2022年年度净利润约18.72亿元 同比增加26.75%

真兰仪表：一季度归母净利润4950.95万元，同比增长23.85%|世界报资讯

世界简讯:华中大学生团队修复千名走失儿童旧照

《灌篮高手》预热“最卷五一档”，如果必须18选一…… 全球观点

东港股份：4月21日融资买入4157.41万元，融资融券余额3.94亿元

排卵试纸一直是弱阳是怎么回事_排卵试纸一直是弱阳的原因_焦点

首届全国野生动植物保护监测培训班举办_热门

央行广州分行发力稳外贸：争取将跨境贸易投资高水平开放试点相关措施推广至广东全省

天天热点！经济日报：进一步改善市场预期

全球消息！中信建投陈果：A股休整期，在低位品种中寻找机会

萨巴蒂尼：穆里尼奥创造了奇迹 他总是很清楚知道自己在做什么

跨越百亿！东鹏饮料以绿色和创新引领行业发展

品书香 诵昭君

2023年1-3月中国汽车销量前十企业集团排行榜|热点聚焦

女性护肤品品牌档次分类_女性护肤品品牌排行榜

天天简讯:乳腺炎的症状及治疗

内娱普男聚会？北京这场红毯，欧豪发福，陈飞宇嘴凸，胡先煦变丑

powerpoint 2000利用大纲工具栏可以_powerpoint 2000-通讯

环球最资讯丨建行分期通合法吗_建设银行分期通骗局

天天头条：手机换个屏幕多少钱_vivox20换个屏幕多少钱

武汉小军山深入推进主动探索 为社区注清风推廉力 天天快资讯

TMT一骑绝尘，游资活跃助力上行，机构怎么看后市

当前视讯！河南夫妻开粮油店，3个月就收回成本，真是小看了粮油店的利润

小卡中方经纪人爆料：确实想上场却再次受伤 昔日离开马刺因队医误诊-每日看点

崩坏星穹铁道崇高道德的赞许获取方法是什么 每日观点

长沙发布23条稳经济促发展措施，将发放4000万元数字人民币消费券、400万元文旅消费券促消费 世界热消息

环球资讯：铜陵广播电视大学校长是谁2014年 铜陵广播电视大学

益阳桃江11家企业通过2023年湖南省专精特新中小企业认定

天天短讯！广东技术师范学院天河学院是公办还是民办_广东技术师范学院天河学院怎么样

冠军赛将迎大结局：马龙难赢王楚钦，陈梦14胜6负，预定女单冠军

杭州西湖边一棵500年樟树被撞断，相关负责人：将在取证后进一步追责

宋树芬

北京朝阳区职教名师车菲：深耕课堂 争做新时代“大先生” 环球热点评

随行付收银台下载安装_随行付收银台 全球焦点

基层现场|表扬信里的活案例

世界新动态：公明街道奔赴部队驻地开展新兵跟踪教育工作

不买就是“等死”？基金迅速调换重仓，偏债混基也超纲配置TMT了！

文化强省 版权护航 | 长沙版权工作的湘韵悠悠路-环球讯息

全球百事通！怎么给视频配音解说_怎么给视频配音

维生素b12的作用及功能及副作用有哪些_维生素b12的作用及功能及副作用

摩根大通：仍预计日本央行将在6月调整或放弃YCC

spss回归分析控制变量怎么添加_spss回归分析控制变量

数码宝贝tri第六章后续二

让运动氛围更浓-天天快看

办公室坐姿减肥法_办公室减肥坐姿 环球报资讯

4月24日起百里杜鹃高铁机场直通车停运|世界时讯

杭州滨江区级人才有什么待遇福利？

2023五一天津向海乐活节中新生态城活动攻略

西藏阿里玛旁雍错进入冰融期_全球今日报

天天热点！武汉出台十项柔性监管举措助力经营主体合规经营

“双碳”目标下的矿业绿色发展新答卷

京口瓜洲一水间钟山只隔数重山_京口瓜洲

广交会第二期今天开展 白云机场多措并举保障通关 天天即时

黄埔文冲提前交付西南海运首制5000方LPG运输船

天天看热讯：“超级大脑”进万家要过三关

社会心理学：为什么违反劳动法的加班能大行其道？看完你就明白了

【这里是湖北】你的家乡是哪种 “国色” ？

压轴登场原意是指最后一个节目吗？压轴节目一般是第几位？-环球头条

情绪稳了，路就宽了 当前信息

可再生能源制氢增长潜力巨大垃圾制氢开启新赛道

.NET Web入门到高级路线（新版本）焦点快看

拒绝承担国服玩家退款暴雪欠款3亿遭网易起诉

押注美国经济将避免衰退对冲基金大举做空十年期美债-热门

锦江酒店（中国区）携多元品牌亮相2023HFE 引领酒店行业投资热潮天天消息

@温州市民这三类违法行为即日起开展专项整治_每日聚焦

中盐化工：2022年年度净利润约18.72亿元同比增加26.75%

萨巴蒂尼：穆里尼奥创造了奇迹他总是很清楚知道自己在做什么

品书香诵昭君

武汉小军山深入推进主动探索为社区注清风推廉力天天快资讯

小卡中方经纪人爆料：确实想上场却再次受伤昔日离开马刺因队医误诊-每日看点

崩坏星穹铁道崇高道德的赞许获取方法是什么每日观点

长沙发布23条稳经济促发展措施，将发放4000万元数字人民币消费券、400万元文旅消费券促消费世界热消息

环球资讯：铜陵广播电视大学校长是谁2014年铜陵广播电视大学

北京朝阳区职教名师车菲：深耕课堂争做新时代“大先生” 环球热点评

随行付收银台下载安装_随行付收银台全球焦点

文化强省版权护航 | 长沙版权工作的湘韵悠悠路-环球讯息

办公室坐姿减肥法_办公室减肥坐姿环球报资讯

广交会第二期今天开展白云机场多措并举保障通关天天即时

情绪稳了，路就宽了当前信息

孕产保健必读环球通讯

天天短讯！川酒第五大产区露脸“川酒全国行”，沱牌舍得系列走俏江城是什么情况?

德亚牛奶怎么样感觉好便宜德亚牛奶怎么样

贵州新时代闯新路人才高端论坛在贵阳举行短讯