检索结果-内蒙古大学图书馆

DropMismatch: removing mismatched ui elements for better pixel to code generation

APPLIED INTELLIGENCE 2025年第6期55卷 1-17页

作者： Li, Ming Lin, Tao Sichuan Univ Coll Comp Sci 24South Sect 11st Ring Rd Chengdu 610207 Sichuan Peoples R China

Automating the generation of user interface (ui) code from design images has gained significant attention due to its potential to streamline application development. However, the effectiveness of deep learning models in this domain is often hindered by mismatches between ui images and their corresponding layout code, a common issue in image-text datasets. In this paper, we introduce a framework that locates and removes these mismatches, thereby improving the accuracy of ui code generation models. Our approach leverages a convolutional neural network to predict the alignment between ui components and layout code nodes, coupled with a tree-based heuristic algorithm to localize mismatches. Through extensive evaluation, we demonstrate that our method enhances the accuracy of ui code generation by approximately 15%, while significantly reducing the need for costly manual annotations. The proposed framework not only advances the state of automated ui code generation but also lays the foundation for creating high-quality, large-scale ui datasets, essential for future research and development in this field.

关键词： ui code generation Image captioning Data denoising Mismatch localization

来源：评论

学校读者我要写书评

暂无评论

建议与咨询留下您的常用邮箱和电话号码，以便我们向您反馈解决方案和替代方法

时间限定

文献类型

馆藏选择

核心期刊

语言

文献类型

帮助

文字说明：

检索规则说明：

检索范例：

分类表

所选分类

限定检索结果

文献类型

馆藏范围

日期分布

学科分类号

主题

机构

作者

语言

请选择保存的检索档案：

请选择收藏分类：

通借通还

建议与咨询 留下您的常用邮箱和电话号码，以便我们向您反馈解决方案和替代方法

时间限定

文献类型

馆藏选择

核心期刊

语言

文献类型

帮助

文字说明：

检索规则说明：

检索范例：

分类表

所选分类

限定检索结果

文献类型

馆藏范围

日期分布

学科分类号

主题

机构

作者

语言

请选择保存的检索档案： 新增检索档案 确定 取消

请选择收藏分类： 新增自定义分类 确定 取消

通借通还

建议与咨询留下您的常用邮箱和电话号码，以便我们向您反馈解决方案和替代方法

请选择保存的检索档案：

请选择收藏分类：