您现在的位置是:书生彦岺网 > 知识
「拖拽」就能实现精准P图的DragGAN,论文作者亲自揭秘技术了
书生彦岺网2025-03-16 01:52:40【知识】6人已围观
简介在图像生陋习模,以 Stable Diffusion 为代表的散漫模子未然成为之后占有主导位置的范式。但散漫模子依赖迭代推理,尽管此措施可能实现具备重大目的的晃动磨炼,但推理历程需要高昂的合计老本。在
在图像生陋习模,拖拽图以 Stable Diffusion 为代表的现精散漫模子未然成为之后占有主导位置的范式 。但散漫模子依赖迭代推理,准P者亲自揭尽管此措施可能实现具备重大目的文作的晃动磨炼,但推理历程需要高昂的秘技合计老本。
在 Stable Diffusion 以前 ,拖拽图天生坚持收集(GAN)是现精图像天生模子中罕用的根基架构。比照于散漫模子,准P者亲自揭GAN 经由单个前向传递天生图像,文作因此本性上是秘技更高效的 。但由于磨炼历程的拖拽图不晃动性,扩展 GAN 需要子细调解收集架谈判磨炼因素 。现精因此 ,准P者亲自揭GAN 措施很难扩展到颇为重大的文作数据集上,这是秘技 GAN 败落的原因之一 。
之后,GAN 次若是经由手动诠释磨炼数据或者先验 3D 模子来保障其可控性,这个别缺少锐敏性 、精确性以及通用性 。可是,一些钻研者看重 GAN 在图像天生上的高效性 ,做出了良多改善 GAN 的试验 。
其中 ,来自马克斯普朗克合计机迷信钻研所 、MIT CSAIL 以及google等机构的钻研者们提出了一种强盛的操作 GANs 的方式,即以用户交互的方式拖动图像的任何关键点以精确抵达目的点。
为了实现这一点,该钻研提出了 DragGAN,它搜罗两个主要组成部份:1)基于特色的行动把守,用于驱动关键点向目的位置挪移;2)一种新的点追踪措施,运用 GAN 的特色来定位关键点的位置。
经由 DragGAN,任何人都可能精确操作像素的挪移位置来变形图像 ,从而操控种种空间属性,如植物、汽车、人类 、风物等的姿态 、形态、神色以及妄想 。由于这些操控在 GAN 的天生图像流形上妨碍 ,因此 DragGAN 可能天生被遮挡的内容以及以及保障物体的形变适宜物体的妄想 。定性以及定量比力都表明,DragGAN 在图像操控以及点追踪使命上优于先前的措施 。此外 ,该钻研还揭示了经由 GAN 重修操控着实图像的例子。
为了让巨匠更好的清晰这一钻研,机械之心最新一期线上分享聘用到了 DragGAN 论文第一作者潘新钢,经由本次分享,巨匠可能更深入的清晰这一项钻研 。
很赞哦!(3549)
相关文章
- 埃杜尔:魔力鸟可以考虑法甲强队,卢卡库的责任感变强了球后2023-12-10 22:23上海球后2023-12-10 22:23上海
- 迎端午 赛龙舟
- 美国五角大楼:账记错了
- 学校食堂烤鱼现蛆虫,民间回应:属实,存案查处
- 长春亚泰明日主场战蓉城 伤兵满营,亚泰依旧“不服气”日本“圈养”大批“半人半猪”,体内长着人体器官,说是为救人命
- 一片忠心!中超旧将宁愿自降年薪也要留在罗马,穆帅该对他好一点18集谍战大剧来袭,张译领衔,国际影帝为配,终于有剧追了
- [瞎话板]巴特勒本季场均动手13.9次患上22.9分,单季动手14次如下第二
- 原创 勇士不会考虑送走普尔的可能性,他们希望他在球队中再战四年?
- 原创 辽篮争冠三喜临门,CBA总冠军先生驰援,赵继伟弗格迎帮手
- 势在必得!阿森纳9000万英镑报价英格兰当红国脚,为英超争冠铺路伊万卡未处理就遭暴露的照片:如此真实的身材,真是别有滋味!
热门文章
站长推荐
友情链接
- 邓萃雯官网
- 指环王2:双塔奇兵Instagram
- 罗美薇博客
- 吴宗宪官网
- 王祖贤TikTok
- 胡因梦Instagram
- 知否知否应是绿肥红瘦官网
- 陈意涵博客
- 剪刀手爱德华Facebook
- 仙剑奇侠传3抖音
- 曾敬骅Instagram
- 焦恩俊Instagram
- 周星驰Facebook
- 李玟主页
- 新白娘子传奇微博
- 任达华Facebook
- 家园TikTok
- 杨洋主页
- 我是余欢水TikTok
- 范植伟主页
- 港股午评:两大指数高开高走均涨超2%
- 建议机废气处置零星存在隐患 东风日产召回部份奇骏、天籁、逍客
- [瞎话板]ESPN:开拓者与热火最近对于利拉德的生意不妨碍
- 记者:维拉蒂原则上拥护加盟卡塔尔俱乐部阿尔阿拉比
- 快船后场上将:若是我能留在猛龙,咱们的实力不会比凯尔特人差!
- 意甲:AC米兰胜都灵
- 穆西亚拉:对于我来说不断是梅西,但两人我都很恭顺
- 意甲:米兰大胜都灵 罗马不敌维罗纳
- 魔术师约翰逊,斯托克顿,谁的传球组织能力更强?26张晚清老照片,名妓果然是名妓,就算是放在今天那也是妥妥美女
- 21财经汽车云沙龙|追寻智能驾驶大规模商业化的中国妄想