gui-wm/gui-visual-delta

GUI Visual Delta — a11y 트리가 표현하지 못하는 시각 변화 라벨 GUI 월드모델(WM) 학습용. a11y 트리(OSWorld AT-SPI 7컬럼 / GUI-360 UIA)가 구조적으로 담지 못하는 시각 변화 — 선택 상태, 포커스, 활성 탭, 열린 메뉴가 가리는 영역(occlusion), 렌더된 내용, 스크롤, 서식 — 을 VLM으로 텍스트 라벨화한 것이다. 트리 diff가 이미 담는 변화는 잔차에서 제외하도록 프롬프트가 지시한다(docs/prompt_v02.txt 전문). 라벨 생성기는 before/after 스크린샷 + 액션 + 트리 diff를 모두 보지만, 이 라벨을 쓰는 WM은 before 상태 + 액션만 입력으로 받는다 (privileged information 구조). 구성 경로 행수 내용 residuals/osworld/residuals_full_graded.jsonl 20… See the full description on the dataset page: https://huggingface.co/datasets/gui-wm/gui-visual-delta.

<iframe src="https://silytics.si/embed/item/caadd391-c637-41ef-bac7-0a71c361046d" width="420" height="190" style="border:0" loading="lazy" title="Silytics entry"></iframe>

Silytics shows public metadata from Hugging Face and links to the original. Information may be incomplete or out of date. Last refreshed 17 October 2026. Licenses and terms of the original apply to the work itself. Not financial, legal or professional advice.