首页 资讯 > > 正文

GAN卷土重来：10亿参数的GigaGAN效果堪比扩散模型-环球百事通

来源：程序员客栈 发布日期：2023-04-21 23:49:53 分享到：


(资料图)

点蓝色字关注“机器学习算法工程师”

设为星标，干货直达！

自从 DALL·E 2 之后，在图像生成方面扩散模型替代GAN成了主流方向，比如开源的文生图模型stable diffusion也是基于diffusion架构的。近日， Adobe研究者在论文Scaling up GANs for Text-to-Image Synthesis提出了参数量为10亿（1B）的GAN模型：GigaGAN，其在文生图效果上接近扩散模型效果，而且推理速度更快，生成512x512大小图像只需要0.13s，生成16M像素图像只需要 3.66s。同时GigaGAN也支持latent空间的编辑功能，比如latent插值，风格混合，以及向量运算等。

GigaGAN改进了StyleGAN架构，采用两阶段训练策略：一个是64x64的图像生成器和一个512x512的图像超分2器，其图像生成器架构如下所示（这里也是采用CLIP text encoder来引入text condition）：GigaGAN在 LAION2B-en和 COYO-700M数据集上训练，其在COCO数据集上的FID达到9.09，超过stable diffusion 1.5，推理速度比stable diffusion快20倍多（2.9s vs 0.13s）：GigaGAN除了文生图能力，还可以实现可控的合成，比如风格混合，如下图所示：更多效果图和技术细节见论文https://arxiv.org/abs/2303.05511和网站https://mingukkang.github.io/GigaGAN/

关键词：

上一篇:

下一篇:

推荐阅读

更多

墨迹天气亮相国际级论坛，以精细化服务打造B端行业“新气象”

近日， Asia Climate Forum 2023（2023年亚洲气候论坛）在新加坡正式拉开帷幕，并于同期开设展览。世界气象组织(WMO)、国家气象水文部

百科问答 姿可以组什么词语

姿字组词：二字词：姿色、坐姿、姿质、娇姿、舞姿、姿势、天姿、丽姿、英姿、姿态等;四字词：婀娜多姿、多姿多彩、搔首弄姿、风姿绰约、雄

知识课堂 2020拜早年祝福语

1、酒越久越醇，朋友相交越久越真;水越流越清，世间沧桑越流越淡。祝新年快乐，时时好心情!2、美丽的烟花是那一瞬间的快乐，夜空的流行是那

字词小课堂 玫瑰花多少朵有什么寓意呢

一朵玫瑰代表的是唯一这个含义，可以送给恋人。三朵玫瑰代表的是我爱你，同样可以送给爱人或者恋人。四朵玫瑰代表的是至死不渝。五朵玫瑰代

网络百科全书 车臣分子是什么意思

舆论对车臣恐怖分子的简称。车臣是俄罗斯联邦领土，位于高加索山脉北侧，与格鲁吉亚隔山为邻，面积约1、 5万平方公里。首府格罗兹尼是在18

精彩推荐

更多

墨迹天气亮相国际级论坛，以精细化服务打造B端行业“新气象”

近日， Asia Climate Forum 2023（2023年亚洲气候论坛）在新加坡正式拉开帷幕，并于同期开设展览。世界气象组织(WMO)、国家气象水文部

百科问答 姿可以组什么词语

姿字组词：二字词：姿色、坐姿、姿质、娇姿、舞姿、姿势、天姿、丽姿、英姿、姿态等;四字词：婀娜多姿、多姿多彩、搔首弄姿、风姿绰约、雄

知识课堂 2020拜早年祝福语

1、酒越久越醇，朋友相交越久越真;水越流越清，世间沧桑越流越淡。祝新年快乐，时时好心情!2、美丽的烟花是那一瞬间的快乐，夜空的流行是那

字词小课堂 玫瑰花多少朵有什么寓意呢

一朵玫瑰代表的是唯一这个含义，可以送给恋人。三朵玫瑰代表的是我爱你，同样可以送给爱人或者恋人。四朵玫瑰代表的是至死不渝。五朵玫瑰代

网络百科全书 车臣分子是什么意思

舆论对车臣恐怖分子的简称。车臣是俄罗斯联邦领土，位于高加索山脉北侧，与格鲁吉亚隔山为邻，面积约1、 5万平方公里。首府格罗兹尼是在18

x 广告

资讯

经济

知识分享 为什么犹太人不过圣诞节

犹太人不过圣诞节，主要是因为犹太人信奉犹太教，圣诞节在犹太教里面没有任何的意义，所以犹太人不过圣诞节。犹太人(希伯来语:יְהוּד

百科 什么是种畜禽概念

所谓种畜禽是指能用来繁殖配种的的家畜家禽，包括家养的猪、牛、羊、马、驴、驼、兔、犬、鸡、鸭、鹅、鸽、鹌鹑等及其卵、精液、胚胎等遗传

复原民国旧菜单 一批“消失的名菜”重现羊城

　　中新网广州12月5日电 (记者 程景伟)“粤宴中国·消失的名菜”活动4日晚在广州博物馆镇海楼广场举行，一批业已失传或十分罕见的传统粤

青海再度“双清零”：战“疫”催生定点救治医院反思与成长

　　中新网西宁12月5日电 题：青海再度“双清零”：战“疫”催生定点救治医院反思与成长　　作者 潘雨洁　　全面停诊、四下无人；火线冲

世界海拔最高高铁客运站山丹马场站运营

　　中新网兰州12月5日电 (记者 杨艳敏)记者从中国铁路兰州局集团有限公司获悉，12月5日10时29分随着嘉峪关南至西安北D2696次动车组列车

千年古都洛阳为何要建青年友好型城市？

　　中新网洛阳12月5日电 题：千年古都洛阳为何要建青年友好型城市？　　记者 肖开霖 李贵刚　　千年古都洛阳日前公布《洛阳市建设青年

甘肃万余河长公示牌拥有“电子身份证” 局地启“千里眼”治水

　　中新网兰州12月5日电 (记者 冯志军)记者5日从甘肃省水利厅获悉，今年以来，甘肃全面推动河长公示牌信息化建设，为全省河流换发“电子

满洲里市向呼伦贝尔市“手递手”异地转运3批次隔离人员

　　(抗击新冠肺炎)满洲里市向呼伦贝尔市“手递手”异地转运3批次隔离人员　　中新网呼伦贝尔12月5日电 (记者 张玮)5日，内蒙古自治区呼

科普
x 广告

Copyright   2015-2022 世界海洋网版权所有  备案号：琼ICP备2022009675号-1   联系邮箱：435 227 67@qq.com