企业需求从产品、设计流转到研发,常常需要反复确认交互细节和业务规则。设计稿能表达页面样式,却未必能完整说明这些要求;已有的规范、组件和模板,也不容易被准确找到和使用。Agent 参与设计后,同样需要理解这些业务知识,才能生成符合要求的结果。
本次分享将结合淘天 TaoDesign 的实践,讨论设计 Agent 的产品与架构选择、业务知识的组织和使用,以及设计资产与修复经验的蒸馏方法。重点介绍如何让 Agent 在生成和修改时用对规范与模板,如何将任务中的修复经验整理为后续可用的知识,以及如何通过人工复核和回归评测判断这些改进是否有效。
演讲提纲
- 企业需求交付的挑战:设计环节为何反复澄清与返工
- 需求尚未想清楚就开始做稿、已有设计资产难以复用、交互逻辑在交接时遗漏,都可能让问题拖到研发阶段才被发现。讨论这些问题在设计环节的具体表现,以及如何借助可交互设计稿、业务规范和结构化标注,更早确认需求,传递设计知识
- TaoDesign:面向设计领域的产品与 Agent 设计
- 围绕设计师和产品人员生成、修改及交付设计稿的工作过程,介绍 TaoDesign 的产品设计与端—云—沙箱架构。重点讨论哪些操作适合直接修改源码,哪些需要 Agent 处理,以及业务知识如何参与生成、编辑和研发交接
- 知识组织与使用:让 Agent 用对规范、模板和素材
- 设计规范、组件、模板和素材如何组织,Agent 才能找到适合当前任务的内容?结合资源检索、知识摘要和按需读取的实现,介绍如何精简输入,同时保留必须遵守的规则;通过风格约束和模板复用,减少选错资源、漏读规范和重复生成的问题
- 资产与经验蒸馏:将存量材料和执行经验转化为知识
- 结合两类材料介绍知识蒸馏的做法:一类是已有设计稿、规范和业务文档,用于整理风格、模板与使用规则;另一类是生成和修复记录,用于总结问题原因、修改方法及适用条件。讨论如何蒸馏总结多个案例并形成通用规则
- 评测驱动的自进化:用任务反馈改进知识
- 介绍 TaoDesign 如何收集真实任务中的问题,通过评测分析原因,将有效修复经验经人工复核后更新到知识库,供后续任务使用。再通过版本回归检查原问题是否解决、其他场景是否受到影响,让知识更新有依据,改进效果可验证
听众收益
- 了解设计 Agent 的产品与架构选择,以及业务知识如何参与设计和交付
- 学习设计规范、模板与素材的组织和检索方法,以及从设计材料、修复记录中提取可复用知识的做法
- 了解如何结合任务反馈、人工复核和回归评测更新知识,判断改进是否有效、是否影响其他场景
演讲亮点
- 以淘天设计工作台 TaoDesign 的真实设计实践,讲清企业已有的规范、模板和设计经验,如何转化为 Agent 用得上的知识,并在实际使用中持续改进
- 把知识工程的效果展示在具体产物上
- 结合设计稿生成与修改,分析模板找不到、规范未遵循、相同问题反复出现等现象,展示知识组织和使用方式如何影响最终结果。
- 分享两类知识蒸馏的具体做法
- 从存量设计稿和规范中提取风格、模板与使用规则,从成功和失败的修复记录中总结方法与适用条件,让已有资产和执行经验都能被后续任务复用。
- 讲清自进化如何得到验证
- 通过真实问题回流、人工复核和回归评测,判断新增知识是否解决了问题、能否用于其他任务、是否引入退化,为企业建设持续更新的 Agent 知识体系提供实践参考。