网易首页 > 网易号 > 正文 申请入驻

开源Editable-Design,让AI生图终于能改字、拖图层

0
分享至



AI 生图很好看,但一个字都改不了:这个开源项目想把设计稿重新 “拆开”

一张海报,从「看起来不错」到「真的能交付」,中间到底差了什么?

可能只差一句临时改掉的文案。

如今的图像生成模型,已经很会做设计了。给它一段提示词,构图、配色、光影和氛围很快就能到位。但当运营同学说「价格改一下」,品牌方要求「Logo 往右挪一点」,或者编辑发现标题里有一个错字,麻烦就来了:画面里的文字、人物和背景早已压在同一张图上,改一个局部,常常意味着整张重来。

换成代码生成呢?文字是真的,图层也能动,但成品往往更像一个规整的网页,而不是经过设计师推敲的视觉作品。

一个有审美但改不动,一个改得动却未必好看。最近开源的 Editable Design,想解决的正是这个有点尴尬的二选一。



视频链接:https://mp.weixin.qq.com/s/lI5gjhpTM1sCUKF2qPSw7Q

图 1|同一设计需求下,像素生成、直接代码生成与可编辑设计的结果对比

  • 项目地址:https://github.com/yejy53/Editable-Design
  • 论文地址:https://huggingface.co/papers/2609.04034

01

好看和好改,为什么总要二选一?

传统 AI 生图交付的是像素。模型可以一次性决定画面中所有元素的位置和质感,却不会把「标题」「价格」「人物插画」「背景纹理」作为可以继续操作的对象交出来。

这也是为什么,AI 生成的第一版可能很惊艳,后续修改却格外费劲。文字一旦画进图片,就可能出现错字、乱码和字体不统一;想改局部,只能涂抹、重绘,或者重新生成整张图。新结果即使修好了文字,也可能顺手改掉原本满意的构图。

直接让 Coding Agent 写 HTML,问题恰好相反。HTML 天生有结构,文字可以选中,元素可以移动,样式也能逐项修改。但「有结构」不等于「有设计」。复杂海报涉及视觉重心、留白、字体层级、材质和空间关系,单靠代码一步到位,很容易得到一张功能正确、审美平庸的页面。

Editable Visual Design 的思路并不复杂:让视觉模型负责它擅长的艺术指导,让代码负责它擅长的结构化表达,再让一个持续工作的 Agent 把两者接起来。

02

不是把图片塞进网页,而是把设计重新做一遍

这套方法里,视觉模型先给出构图、层级、色彩和空间关系。它更像一位负责定方向的艺术指导,帮助 Agent 看清「这张图应该长什么样」。

但参考图的像素不会直接进入最终交付物。

Agent 会重新生成干净的独立素材,再用 HTML 重建文字和布局。标题仍然是真实文字,插画、背景和装饰元素则各自处在独立图层中。最终得到的不是一张被嵌入网页的图片,而是一份可以继续编辑的设计文件。



图 2|从需求理解、视觉模拟、结构化重建到可编辑交付的完整工作流

整个过程可以概括为几步:

  • 理解需求,确定画布、信息层级和视觉方向;
  • 调用视觉模型探索构图,而不是直接交付生成图;
  • 生成独立、干净的视觉素材;
  • 用语义化 HTML 重建版式和真实文字;
  • 实际渲染成图,观察问题,再继续修正;
  • 通过检查后,连同编辑器和过程记录一起交付。

这里最关键的变化是,生成不再止于「出图」。同一个 Agent 从理解需求开始,一直负责到渲染、检查和修复。它既做设计决策,也要面对浏览器里真正渲染出来的结果。

如果标题挤出了边界、字体没有正确加载、某个图层没有对齐,Agent 需要继续调整,而不是把第一版当作答案。

03

文字能改、图层能拖,设计过程也能回放

打开最终文件后,用户可以直接双击修改文字,也可以单独选择和拖动插画、背景、装饰与文本图层。因为交付物保留了语义结构,局部修改不需要重新生成整张图。



图 3|三组设计从最终画面展开为可独立选择、移动和修改的图层

项目还提供了一个很有意思的 Agent Design Replay。

它记录的不是简单的聊天日志,而是从需求理解、构图规划、素材生成,到 HTML 实现、渲染观察和局部修复的完整路径。用户不仅能看到成品,也能知道 Agent 为什么这样排版、发现过什么问题,以及它后来怎样修正。

对于今天的生成式设计工具,这一点并不常见。我们通常只能看到输入和输出,中间发生了什么几乎是黑盒。而当生成结果要进入真实生产流程时,「可追溯」和「可修改」往往与第一眼的视觉效果同样重要。

为了避免「看着差不多」的结果直接交付,Editable Visual Design 还设置了确定性检查,包括画布尺寸、字体、图层约定、实际渲染以及编辑器往返操作等。换句话说,编辑能力不是展示视频里的特效,而是交付格式本身的一部分。

04

14 组案例,覆盖的不只是营销海报

目前,项目仓库展示了 14 组案例,覆盖 6 类视觉设计任务:营销活动、信息设计、文字型设计、海报、学术海报与艺术设计。

其中既有茶饮新品、电商护肤品这样的商业海报,也有小熊猫百科、纽约三日攻略、腹肌训练计划等高信息密度内容;还有《滕王阁序》全文海报、学术研究海报和艺术化视觉作品。



图 4|项目覆盖营销、长文本、海报与信息图等多类视觉任务

这些例子刻意选择了 AI 生图最容易露怯的场景:大量中文、密集信息、价格数字、表格化模块,以及需要保持严格层级关系的长文案。

以传统生成图片的方式处理这类任务,最难的往往不是画得够不够漂亮,而是文字能否准确、信息能否完整、后续能否改动。结构化交付正好把问题从「要求模型一次画对所有字」变成「让文字从一开始就保持为文字」。

每组案例都同时提供最终渲染、可编辑演示和 Agent 设计回放。对于想复现流程的开发者,仓库已经提供 Editable Design Codex Skill;如果源文件结构允许,还可以通过配套工具进一步导出为元素独立可选的 PowerPoint。

05

AI 设计的下一步,可能不是生成更大的图片

过去两年,图像生成模型一直在比拼分辨率、真实感和指令遵循。Editable Visual Design 提出的则是另一个问题:一张图生成之后,能不能自然地进入接下来的工作?

真实的设计流程很少在第一次出图时结束。文案会改,素材会换,比例要适配不同渠道,同一套视觉还要衍生出多个版本。只交付像素,意味着模型完成了创作的前半程,却把后半程重新留给人类。

结构化、可编辑的生成式设计,试图把这条链路继续往后推一步。

视觉模型不再承担所有工作,而是提供审美先验;代码也不再单独决定画面,而是承接结构;Agent 则在两者之间持续观察和修正,直到产出一份可以真正接着用的设计稿。

它未必会取代专业设计软件,也不是要把每个设计师都变成前端工程师。更现实的意义在于:当 AI 参与设计时,交付物终于不必只有一张 PNG。

从「帮我画一张图」到「给我一份还能继续改的设计」,也许才是 AI 设计真正走向生产环节的开始。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
一场亿元项目罗生门:少给1.5亿还是超付5700多万?为讨债老板买信息获刑,出狱再打官司

一场亿元项目罗生门:少给1.5亿还是超付5700多万?为讨债老板买信息获刑,出狱再打官司

红星新闻
2026-09-19 13:22:21
江西女教师回娘家探亲失联12年,连续三天托梦哥哥:我在香炉里

江西女教师回娘家探亲失联12年,连续三天托梦哥哥:我在香炉里

悬案解密档案
2025-05-17 14:08:37
颠覆认知!科学家发现:最佳休息方式非睡眠,10分钟帮你恢复精力

颠覆认知!科学家发现:最佳休息方式非睡眠,10分钟帮你恢复精力

39健康网
2026-07-07 18:02:55
硫磺熏笋已失控!市监局证实:已发往全国多地,二氧化硫超标百倍

硫磺熏笋已失控!市监局证实:已发往全国多地,二氧化硫超标百倍

行者聊官
2026-09-18 19:32:09
西贝被曝将彻底倒闭:贾国龙将揽下绝大部分债务,放弃股份

西贝被曝将彻底倒闭:贾国龙将揽下绝大部分债务,放弃股份

DoNews
2026-09-19 15:08:08
彻底炸锅!黄秋生陈冠希时隔 21 年合体拍片,片方顶风操作遭全网抵制

彻底炸锅!黄秋生陈冠希时隔 21 年合体拍片,片方顶风操作遭全网抵制

内地那鱼线场
2026-09-19 19:48:04
985大学退学率出炉!复旦大学总人数最多,国防科大退学率最高

985大学退学率出炉!复旦大学总人数最多,国防科大退学率最高

史海流年号
2026-09-18 22:47:35
因为调休,这个中秋假期,等于没放假

因为调休,这个中秋假期,等于没放假

News脑洞
2026-09-19 18:05:23
不查不知道一查吓一跳!44岁一家人住北京豪宅的陈婷,私下有多壕

不查不知道一查吓一跳!44岁一家人住北京豪宅的陈婷,私下有多壕

冷紫葉
2026-09-19 12:41:16
开油车的突然笑了,开电车的真要慌了!2026油电新政落地实锤!税费规则都要变了

开油车的突然笑了,开电车的真要慌了!2026油电新政落地实锤!税费规则都要变了

小怪吃美食
2026-09-19 00:24:11
私吞上亿善款终于尘埃落定?官方正式宣布,54岁韩红身份迎来转变

私吞上亿善款终于尘埃落定?官方正式宣布,54岁韩红身份迎来转变

阿伧说事
2026-09-15 15:58:58
2026年8月青年失业率已经高达至18.9%!

2026年8月青年失业率已经高达至18.9%!

黯泉
2026-09-19 19:08:49
中国银行浙江省分行原行长程军被开除党籍和公职

中国银行浙江省分行原行长程军被开除党籍和公职

政知新媒体
2026-09-18 23:24:10
黎姿大变样!剪短卷发穿条纹西装,褪去港星滤镜,活成豪门女总裁

黎姿大变样!剪短卷发穿条纹西装,褪去港星滤镜,活成豪门女总裁

明星私服穿搭daily
2026-09-19 18:15:16
住集装箱、男女混住、机场干等6小时?别再骂亚运会日本主办方了,真没故意坑外国选手

住集装箱、男女混住、机场干等6小时?别再骂亚运会日本主办方了,真没故意坑外国选手

可达鸭面面观
2026-09-18 13:22:17
胡塞武装大败,王牌旅长当场阵亡

胡塞武装大败,王牌旅长当场阵亡

烽火观天下
2026-09-19 16:23:21
俄罗斯天然气谈判陷僵局!中国反手签下美国20年大单,太解气

俄罗斯天然气谈判陷僵局!中国反手签下美国20年大单,太解气

共工之锚
2026-09-19 00:31:38
国乒在918当天5场对阵日本球员全败 一天输了12场外战:男女单6场

国乒在918当天5场对阵日本球员全败 一天输了12场外战:男女单6场

风过乡
2026-09-19 08:22:12
中央气象台:今晚到明天,青海、陕西、河南、湖北、四川、黑龙江等地有中到大雨,局地暴雨;吉林、河北、重庆等局地将有雷暴大风或冰雹

中央气象台:今晚到明天,青海、陕西、河南、湖北、四川、黑龙江等地有中到大雨,局地暴雨;吉林、河北、重庆等局地将有雷暴大风或冰雹

鲁中晨报
2026-09-19 18:07:01
货车压坏20余棵白菜被索赔1万元!保险公司评估损失约三四百元 司机最后赔偿1300元了事

货车压坏20余棵白菜被索赔1万元!保险公司评估损失约三四百元 司机最后赔偿1300元了事

闪电新闻
2026-09-19 06:38:40
2026-09-19 21:03:00
机器之心Pro incentive-icons
机器之心Pro
专业的人工智能媒体
14030文章数 142734关注度
往期回顾 全部

科技要闻

要走650亿,智谱的理想越来越贵

头条要闻

两名女高中生坐顺风车 半路被司机赶下车:不坐滚下去

头条要闻

两名女高中生坐顺风车 半路被司机赶下车:不坐滚下去

体育要闻

2026亚运会开幕式 胡明轩吴愉担任旗手

娱乐要闻

自毁前途5年赵薇露面!家境被扒出

财经要闻

江西首富破产:一张927万商票压垮千亿帝国

汽车要闻

大块头的从容 红旗G919如何兼顾豪华与越野能力

态度原创

旅游
手机
艺术
房产
游戏

旅游要闻

甘肃敦煌:体验丝路风情 感受文化魅力

手机要闻

荣耀学习空间App手机版上线:Magic8、WIN系列等机型率先适配

艺术要闻

吴冠中 一幅画287.5万,仅比A4纸大一点!

房产要闻

海口房价,降不动了!

《三国志15》确认!涩泽光放话 态度强硬

无障碍浏览 进入关怀版