2026 · 会议已接收

从视觉组件到界面代码:借助工具证据的高效生成

From Visual Widgets to UI Code: Efficient Tool-Grounded Generation

WidgetGen 将组件截图重建为 React JSX,利用 OCR 文本框与调色板支持整体布局推理及可选图表生成,最后渲染一次;生成的渲染图与代码配对还用于模型微调。

研究范围与局限

主要对比使用六个模型与单一数据集中的 1,000 个测试组件。九项图像指标不检验交互、无障碍或可维护性;监督学习实验仅覆盖六个 Qwen 系列模型,更多界面分布与模型系列的泛化尚未确定。

与本合集的关联

研究根据紧凑视觉参考与工具证据恢复可执行界面代码。

发表与复核详情

发表载体
MUCG @ ECCV 2026
发表状态
会议已接收
出版/提交日期
2026 年(具体日期未核实)
日期依据
MUCG 2026 官方研讨会日程确认收录,尚未核实正式论文集的出版日期。
arXiv 首次提交
2026 年 8 月 12 日
arXiv
2608.12611
已复核的 arXiv 版本
v1
DOI
10.48550/arXiv.2608.12611

MUCG 2026 官方日程列出本论文,但未核实正式论文集出版;OpenReview 页面要求浏览器验证。arXiv 论文采用 CC BY 4.0。所审论文及日程未给出专门的实现或权重链接,Widget2Code 是另行引用的基准来源。本次未执行产物。

来源复核于

本合集仅做来源复核,未重新运行论文实验。请通过原始论文或 BibTeX 引用原作者。

一手来源

  1. https://arxiv.org/abs/2608.12611v1
  2. https://arxiv.org/html/2608.12611v1
  3. https://mllm-mucg.github.io/ECCV2026/