목록으로
📄논문

BISCUIT: Scaffolding LLM-Generated Code with Ephemeral UIs in Computational Notebooks

Cheng R. et al.
2024-08

소개

사용자 의도와 LLM 생성 코드 사이에 임시 UI 계층을 삽입하는 JupyterLab 워크플로 BISCUIT을 소개하는 Apple 연구진의 VL/HCC 2024 논문입니다. 프롬프트에서 곧바로 소스 파일로 넘어가는 대신, 사용자는 코드가 출력되기 전에 임시로 생성된 컨트롤과 먼저 상호작용하면서 선택지를 이해하고 요청을 구체화하며 변수를 탐색합니다.

요약

BISCUIT이 차별화되는 점:

1. 단계별 지원을 위한 임시 UI: 코드 생성 전 중간 단계로 임시 생성 인터페이스를 사용합니다
2. 노트북에 맞춘 워크플로: 일반적인 채팅이나 웹 데모 대신 계산용 노트북 환경에 GenUI를 적용합니다
3. 프롬프트 작성 부담 감소: 사용자가 모든 구현 세부 사항을 하나의 큰 요청에 담아야 할 필요를 줄입니다
4. 연구로 뒷받침된 근거: 초보자 대상 사용자 연구에서 이해, 탐색, 반복 개선에 대한 이점을 보고합니다
5. 이 컬렉션에서의 의미: GenUI, 상호작용형 프로그래밍, 인터페이스를 매개로 한 AI 지원을 연결하는 유용한 연구입니다

태그

notebooksephemeral-uiprogramminghci

관련 글

📄논문

ControlAnything: Generative UI and On-Demand Device Integration in Mixed Reality

November 2026 preprint generating both spatial controls and the connector code for physical devices when a Quest 3 wearer requests them. A coding agent tests connections over hand-written MIDI, Bluetooth, and key-press transports, then returns AR widgets, a per-frame hand program, or both.

generative-uimixed-realitydevice-integration
작성자 Bektur Ryskeldiev · 2026-11-05
자세히 보기
📄논문

Interface Quilt: Modifying Applications with Computer Use Agents and Generative UI

November 2026 preprint from Autodesk Research combining computer-use agents and GenUI to build persistent interface patches over existing applications. It recovers controls from rendered pixels, generates new interaction surfaces, and synchronizes them with the underlying app without requiring source code, APIs, or accessibility data.

generative-uicomputer-use-agentsinterface-patches
작성자 Qiu L. et al. · 2026-11-01
자세히 보기
📄논문

ABRA: Agent-Bound UI for Human-Agent Communication beyond Chat with Reusable Views

재사용 가능한 그래프·표·텍스트·표시 뷰와 작업별 상호작용 의미를 분리하는 2026년 10월 EMNLP 시스템 데모입니다. ABRA는 이러한 바인딩을 공유 캔버스 상태로 공개하여 사용자와 다른 에이전트가 작업별 동작을 확인하고 호출할 수 있게 합니다.

generative-uishared-canvasesinteraction-semantics
작성자 Kim S. G. and Kim H. · 2026-10-22
자세히 보기

Generative UI와 Intelligent UI 리소스를 엄선한 모음입니다.

정성을 담아 ❤️ 커뮤니티가 만들었습니다