Measure Twice, Click Once: Co-evolving Proposer and Visual Critic via Reinforcement Learning for GUI Grounding
两次测量,一次点击:通过强化学习共进化提议者和视觉评论者进行GUI定位
机构 * Zhejiang University(浙江大学) ; Tencent AI Lab(腾讯AI实验室) ; The University of Hong Kong(香港大学)
专题命中 GUI与屏幕智能体 :grounding(title,abstract);分类 cs.CV、cs.AI、cs.LG
AI总结 本文提出通过强化学习共进化提议者和视觉评论者,以提升GUI定位的准确性和鲁棒性,通过动态平衡训练目标,增强模型在复杂界面布局中的泛化能力。