|
用户只需要输入一段话，20秒上下，就能生成两版UI设计稿......9月20日，在云栖大会现场，Motiff妙多开发负责人樊锴演讲分享了AI生成UI功能的最新发展及研发历程，强调尽快找到TPF（技术制品契合度）、注重数据累积、完善后台研发体系，都是AI功能落地的关键原因。
Motiff妙多开发负责人樊锴演讲现场
生成式AI是2024年云栖大会最受关注的议题之一，Motiff妙多AI生成UI功能的落地，标志着设计工具从效率工具向生产力工具的转变。“咱们期盼 Motiff妙多不止于设计行业的 Copilot， 更能作为 Autopilot，能直接完成平常设计任务，乃至生成完整的设计稿。”樊锴暗示。
Motiff妙多于今年6月面向全世界发布，开创了界面设计行业的多个AI功能。研发全世界领先的AI功能面临许多技术挑战：怎样让AI作为真正可用的生产力、创作兼具规律性和艺术性的UI设计稿？大模型的能力边界在哪、怎样扬长避短？樊锴在演讲中仔细分享了背面的工程难点和经验。
Motiff妙多能生成用户所需的各式各样的界面，生成的设计稿还可在Motiff妙多的编辑器中持续调节优化。
锁定应用场景，加速达成技术制品契合度
在AIGC行业，区别于平常的文本生成或照片生成任务，UI 生成非常独特。这是由于UI设计既需要保准严谨的制品规律，又要具备像素级的精确程度，还要兼具美观的视觉效果。这对技术能力提出了相当高的需求。
AI生成UI可由AI从零起始创建所有页面内容，这背面有多种技术路径，但生成效果均不睬想。樊锴举例叫作，基于扩散模型的文生图技术能够生成设计照片，但在像素级别的布局掌控和内容生成能力上相对欠缺。另有些办法，如生成HTML网页代码再转为设计稿，一样面临细节处理能力不足的问题。
针对AI应用来讲，尽快找到TPF（技术制品契合度）尤为关键。“相比于传统软件研发，AI应用的底层技术不确定性高，战略上用户需要驱动，但在战术上制品设计严重依赖于技术可行性。”樊锴在会上暗示，关键在于尽快找到最有可能被实质运用的场景，更早得到用户反馈。
生成一张设计稿，需要兼顾整体结构、页面内容和UI细节三大方面。设计稿需要包括导航栏、搜索框、内容列表等模块，并匹协同适的文字、照片、图标等内容，同期呈现良好的视觉效果。通用大模型广泛善于生成整体结构和页面内容，但针对 UI 细节掌控还有所不足。
因此呢，为大模型寻找合适的任务作为处理问题的关键。“让大模型专注于其善于的行业，即生成页面的整体结构和内容。在细节把控上，经过预定义的组件库来保准美观。”樊锴暗示。组件库是海量组件和设计规范的集合，基于组件库的生成方法亦更易支持自定义组件。这不仅能够覆盖大部分UI设计场景，还能满足用户对个性化和灵活性的需要。
这亦是面向将来的技术方法。“随着软件研发的成本降低，将来应用场景会更个性化，亦需要更灵活的交互设计，信息庞杂的交互设计页面反而会减少。”樊锴判断。
筑成数据护城河，率先实现设计Autopilot
即使是基于组件库的方法，现有通用大模型仍难以生成高质量的UI设计稿。这是由于通用大模型并不善于UI设计，亦难以理解组件库。为了呈现多样化的效果，组件库包括海量区别类型的组件。以列表为例，就有上百种类似的样式，通用大模型难以分辨其细微差别。
“核心还是在于让大模型充分理解UI设计，需要有专门的行业大模型。“樊锴暗示。Motiff妙多近期正式发布了其自研的国内首个UI多模态大模型，经过海量UI行业的优秀数据训练，该模型在多个UI任务表现上明显超越GPT-4o等通用大模型，能灵活地按照上下文理解界面元素，达到“设计专家”水平，最接近人类对UI界面的理解和表述结果。
在自研大模型加持下，Motiff妙多有效结合了自研大模型的生成能力和组件库的表现力，在多轮行业盲评中取得了第1的生成效果，优于此前业内领先的AI生成UI工具Galileo AI、设计工具Uizard和文生图工具Ideogram。
Motiff在AI生成UI功能中取得的成功，还得益于长时间的专业数据累积。“将来，数据是最重要的护城河。“樊锴暗示，“随着大模型能力持续加强、成本持续降低，专业数据将作为更稀缺的资源，为AI应用的质量供给坚实保证。”
在研发AI功能的工程实施中，Motiff妙多累积了宝贵的经验。针对大部分繁杂任务，Motiff妙多发掘Flow Engineering（流程工程）比Prompt Engineering（提示工程）更为有效。相比于单次模型调用的黑箱运行，FLow Engineering将任务分解为多个过程，实现整体功能的协同，对团队协作和工程化更为友好。
为了更好地应对AI应用研发中的不确定性，Motiff妙多搭建了一个有效的实验平台。平台不仅支持便捷地定制流程和参数，还能仔细记录实验的中间结果，从而帮忙团队快速尝试和迭代。
日前，Motiff妙多AI生成UI功能在指令遵循和设计美观性上均处在行业领先水平，并在海外社交媒介导致海量讨论。樊锴在会上透露，Motiff妙多还将连续迭代技术方法，有望于年内发布新的AI功能。
— 完 —
量子位 QbitAI · 头条号签约
关注咱们，第1时间获知前沿科技动态
| 
发表于 2024-9-28 06:40:51