목록으로
📄논문

Macaron-A2UI: A Model for Generative UI in Personal Agents

Kong F. et al.
2026-05

소개

개인용 에이전트의 런타임 Generative UI에 초점을 맞춘 2026년 arXiv 논문입니다. 저자들은 단순 채팅이 복잡한 에이전트 작업의 병목이 된다고 주장하며, 대규모 Generative UI 코퍼스와 A2UI-Bench를 소개합니다. 확인, 선호 조정, 다중 목표 조율을 위해 자연어와 경량의 실행 가능한 UI 동작을 함께 생성하는 모델을 학습합니다.

요약

이 논문이 차별화되는 점:

1. 에이전트 중심의 관점: Generative UI를 개인용 에이전트에 부족한 상호작용 계층으로 다룹니다
2. 새로운 벤치마크: 생성된 에이전트 UI 동작을 통제된 조건에서 평가하기 위한 A2UI-Bench를 소개합니다
3. 행동 중심 UI: 시각적 레이아웃 생성뿐 아니라 실행 가능한 UI 동작에 초점을 맞춥니다
4. 모델 측면의 기여: 프롬프트만 사용하는 기준 방식 대신 지도 미세 조정과 강화 학습으로 전용 모델을 학습합니다
5. 유용한 시사점: 구조화된 사용자 입력, 확인, 계획 흐름이 필요한 에이전트를 만드는 팀에 유용한 참고 자료입니다

태그

agentsa2uibenchmarkgenui

관련 글

📄논문

ControlAnything: Generative UI and On-Demand Device Integration in Mixed Reality

November 2026 preprint generating both spatial controls and the connector code for physical devices when a Quest 3 wearer requests them. A coding agent tests connections over hand-written MIDI, Bluetooth, and key-press transports, then returns AR widgets, a per-frame hand program, or both.

generative-uimixed-realitydevice-integration
작성자 Bektur Ryskeldiev · 2026-11-05
자세히 보기
📄논문

Interface Quilt: Modifying Applications with Computer Use Agents and Generative UI

November 2026 preprint from Autodesk Research combining computer-use agents and GenUI to build persistent interface patches over existing applications. It recovers controls from rendered pixels, generates new interaction surfaces, and synchronizes them with the underlying app without requiring source code, APIs, or accessibility data.

generative-uicomputer-use-agentsinterface-patches
작성자 Qiu L. et al. · 2026-11-01
자세히 보기
📄논문

ABRA: Agent-Bound UI for Human-Agent Communication beyond Chat with Reusable Views

재사용 가능한 그래프·표·텍스트·표시 뷰와 작업별 상호작용 의미를 분리하는 2026년 10월 EMNLP 시스템 데모입니다. ABRA는 이러한 바인딩을 공유 캔버스 상태로 공개하여 사용자와 다른 에이전트가 작업별 동작을 확인하고 호출할 수 있게 합니다.

generative-uishared-canvasesinteraction-semantics
작성자 Kim S. G. and Kim H. · 2026-10-22
자세히 보기

Generative UI와 Intelligent UI 리소스를 엄선한 모음입니다.

정성을 담아 ❤️ 커뮤니티가 만들었습니다