DeskForge论文:桌面密集监督数据集与训练
Get the story
2026年10月5日,arXiv计算机视觉方向发布DeskForge论文。DeskForge是一个可控桌面环境,通过组合与探索真实应用生成大规模监督数据,并融合截图、可访问性树与窗口几何信息形成密集元素标注。研究者据此构建DeskForge-1M数据集,包含1.2M条标注桌面观察与159.7M个元素实例,并在200K grounding样本上微调四个视觉语言模型,用于训练计算机使用智能体。目前报道仅涉及数据集构建与微调设置,未披露具体模型效果或后续实验结果。
Generated from reports · updated 16 hr ago
Timeline
Follow the coverage from different angles.
- arXiv · Computer VisionDeskForge:用桌面环境的密集监督训练计算机使用智能体
DeskForge 是一个可控桌面环境,通过组合与探索真实应用生成大规模监督数据,并融合截图、可访问性树与窗口几何信息形成密集元素标注。研究者据此构建 DeskForge-1M,包含 1.2M 条标注桌面观察与 159.7M 个元素实例,并在 200K grounding 样本上微调四个视觉语言模型。
Heat trend
Current heat 6·Comparable peak 10(Oct 5)·Comparable change over 24 hours –
The trend compares only the same participants observed continuously; its range may be smaller than the current heat count. Move or click on the chart to inspect hourly heat; use the left and right arrow keys to switch.