목록으로
📄논문

GUIDE: Designer-in-the-loop Authoring of Conformant Generative User Interfaces

Lee H. et al.
2026-09

소개

생성된 인터페이스를 디자이너의 의도에 맞게 조정하는 Figma 기반 환경을 소개하는 2026년 9월 HCI 논문입니다. GUIDE는 캔버스 편집을 프롬프트 갱신으로 전환하고, 프로젝트의 참조 디자인과 비교하여 후보 화면의 순위를 정하는 디자인 적합도 평가기를 조정합니다.

요약

GUIDE가 새롭게 보여주는 점:

1. 디자인 단계의 통제: 디자이너가 생성된 화면을 확인하고 수정한 뒤, 그 선택이 이후 결과에 반영되도록 합니다
2. 학습을 통한 적합도 향상: 참조 디자인, 프롬프트 최적화, 적응형 점수 모델을 결합합니다
3. 측정된 의도 정합성: 평가용으로 분리한 애플리케이션 화면으로 평가기를 검증하고, 예시와 design.md를 함께 제공하는 기준 방식과 결과를 비교합니다
4. 실무자 연구: UI/UX 참여자 12명은 블라인드 비교에서 의도에 맞게 조정된 결과를 선호했습니다. 모델과 데이터는 아직 오픈소스로 공개되지 않았습니다

태그

generative-uidesign-conformancedesigner-in-the-loopfigmaevaluation

관련 글

📄논문

ControlAnything: Generative UI and On-Demand Device Integration in Mixed Reality

November 2026 preprint generating both spatial controls and the connector code for physical devices when a Quest 3 wearer requests them. A coding agent tests connections over hand-written MIDI, Bluetooth, and key-press transports, then returns AR widgets, a per-frame hand program, or both.

generative-uimixed-realitydevice-integration
작성자 Bektur Ryskeldiev · 2026-11-05
자세히 보기
📄논문

Interface Quilt: Modifying Applications with Computer Use Agents and Generative UI

November 2026 preprint from Autodesk Research combining computer-use agents and GenUI to build persistent interface patches over existing applications. It recovers controls from rendered pixels, generates new interaction surfaces, and synchronizes them with the underlying app without requiring source code, APIs, or accessibility data.

generative-uicomputer-use-agentsinterface-patches
작성자 Qiu L. et al. · 2026-11-01
자세히 보기
📄논문

ABRA: Agent-Bound UI for Human-Agent Communication beyond Chat with Reusable Views

재사용 가능한 그래프·표·텍스트·표시 뷰와 작업별 상호작용 의미를 분리하는 2026년 10월 EMNLP 시스템 데모입니다. ABRA는 이러한 바인딩을 공유 캔버스 상태로 공개하여 사용자와 다른 에이전트가 작업별 동작을 확인하고 호출할 수 있게 합니다.

generative-uishared-canvasesinteraction-semantics
작성자 Kim S. G. and Kim H. · 2026-10-22
자세히 보기

Generative UI와 Intelligent UI 리소스를 엄선한 모음입니다.

정성을 담아 ❤️ 커뮤니티가 만들었습니다