PreView: Enhancing GUI Grounding with Preprocessed Views and Cues 封面
HuggingFace
论文2026-10-2…

PreView: Enhancing GUI Grounding with Preprocessed Views and Cues

GUI grounding requires locating small controls in cluttered screenshots and identifying which control a natural-language instruction refers to. Cropping and enlargement can expose local detail, but the resulting image m…

来源:HuggingFace Papers收录于 2026年10月30日

站内导读

中文

定位:PreView 是面向 GUI grounding 的预处理方案,通过裁剪放大与视觉线索增强小控件定位,适合需要从截图理解界面的 Agent 场景。

核心能力

  • 先裁剪目标区域再放大,让密集界面中的小控件在输入图像中占据更多像素。
  • 用视觉线索标注候选控件位置,把定位问题从全图搜索收窄到局部判断。
  • 预处理与模型推理解耦,可套在现有 GUI grounding 流程前,不改模型结构。

适用人群:做 GUI Agent、屏幕理解或多模态定位的研究与工程人员,需具备 Python 环境与多模态模型调用权限。

注意:裁剪会丢失全局上下文,需与全图信息配合使用。

相关项目 · HuggingFace

查看全部「HuggingFace」项目 →