📄

Paper Generative UI - Google Research, PAGEN, A2UI & Studi HCI

Baca paper dasar untuk memahami cara kerja Generative UI, termasuk riset LLM UI generator dari Google Research, dataset PAGEN, riset personal agent A2UI, studi HCI CHI/DIS, dan definisi GenUI.

27 item
📄Paper

LEGOUI: Designing with UI-DSL Bricks for Transparent, Controllable Generation

Paper HCI Agustus 2026 yang memperkenalkan framework Generative UI bertahap untuk ideasi desain awal. LEGOUI mencatat keputusan dari prompt dan inferensi model dalam UI DSL yang melacak asal keputusan, memungkinkan pengguna menerima, menolak, atau menambahkan keputusan pada tahap layout, interaksi, relasi, dan style, lalu melakukan rendering dari spesifikasi yang terus berkembang.

genuiui-dsldesign-time
oleh Zhou Y. et al. · 2026-08
Baca Selengkapnya
📄Paper

Beyond a Single Judge: Simulating Social Persona Panels for Generative UI Evaluation

Paper Juli 2026 yang memperkenalkan ESPP, metode evaluasi yang mengganti satu LLM judge dengan panel persona yang beragam secara psikologis dan berpijak pada bukti. Setiap panelis menilai screenshot interface yang dihasilkan secara independen, bertukar pendapat melalui mekanisme bounded-confidence, lalu hasilnya digabungkan menggunakan pembobotan sosial.

genuiui-evaluationhuman-preferences
oleh Wu Z. et al. · 2026-07
Baca Selengkapnya
📄Paper

Design Theater: A Benchmark for Generative UI

Paper Juli 2026 yang memperkenalkan benchmark untuk memeriksa apakah tool Generative UI benar-benar menerapkan alasan desain yang disampaikan kepada pengguna. Melalui 120 interface dari lima tool dan 24 tugas struktural, styling, serta fungsional, studi ini mengukur kesenjangan antara keputusan desain yang diklaim dan hasil yang dibuat.

genuiui-evaluationdesign-rationale
oleh Imteyaz K. et al. · 2026-07
Baca Selengkapnya
📄Paper

MV-Bench: Benchmarking MLLMs for Coordinated Multi-View Interface Construction

Benchmark Juli 2026 untuk menguji apakah multimodal language model dapat membuat interface visualisasi multi-view yang dapat dieksekusi dari desain visual. MV-Bench memakai workbook Tableau sebagai structured ground truth dan mengevaluasi fidelity visual, data binding, interaksi terkoordinasi, serta kemampuan kode untuk dieksekusi.

ui-generationmultimodal-modelsdata-visualization
oleh Zhao Y. et al. · 2026-07
Baca Selengkapnya
📄Paper

Learning to Detect UI Principle Violations via Reinforcement Learning

Paper Juli 2026 tentang vision-language critic ringan untuk interface web yang dihasilkan. Para penulis menyatukan 19 prinsip yang mencakup accessibility WCAG 2.2, deceptive design, dan cognitive usability, lalu melatih model pada sekitar 10.000 halaman hasil generasi dengan pelanggaran sintetis yang telah diverifikasi.

ui-evaluationaccessibilitydesign-quality
oleh Mehta N. et al. · 2026-07
Baca Selengkapnya
📄Paper

TaskArtisan: Designing Composable Generative Widgets for LLM-Assisted Analysis

Paper HCI Juli 2026 yang meneliti bagaimana Generative UI membuat workflow analisis chatbot yang panjang dan bertahap lebih mudah dikunjungi kembali dan digunakan ulang. TaskArtisan memungkinkan pengguna membuat widget analisis dan menyusunnya menjadi workflow berurutan atau fan-out, lalu membandingkan pendekatan ini dengan chatbot konvensional dalam studi 12 peserta.

generative-widgetsanalysiscomposition
oleh Chen M. and Pavel A. · 2026-07
Baca Selengkapnya
📄Paper

AI Prototyper: A Figma Plugin for Decomposition-Based GUI Prototyping with LLMs

Paper Juli 2026 yang memperkenalkan AI Prototyper, plugin Figma open-source yang mengubah deskripsi layar dalam bahasa alami menjadi prototype yang sepenuhnya dapat diedit. Pipeline-nya menguraikan permintaan menjadi fitur yang dapat ditinjau, mengambil component dari library tetap berisi 32 primitive, membuat instance dengan batasan schema, dan merender layer native Figma dengan auto-layout.

figmadesign-timegui-prototyping
oleh Salangsingha T. et al. · 2026-07
Baca Selengkapnya
📄Paper

Spatula: Exploring On-Demand In-Situ Interfaces and Interaction for Attribute Control

Paper HCI Juli 2026 yang memperkenalkan Spatula, sistem berbasis LLM yang membuat control kontekstual langsung pada canvas motion graphics. Elastic attribute control space miliknya mendukung progressive discovery, beberapa tingkat presisi, pengeditan kelompok secara semantik, dan control baru sesuai kebutuhan.

on-demand-uicreative-toolsdirect-manipulation
oleh Li B. et al. · 2026-07
Baca Selengkapnya
📄Paper

Rethinking the UI of GenUI: A Tale of Two Designs

Paper HCI Juni 2026 yang membandingkan pola prompt-first, depth-first, dan high-fidelity yang umum pada tool Generative UI dengan alternatif terstruktur yang breadth-first dan low-fidelity. Studi bersama 24 UX designer dan product manager mengungkap trade-off konkret untuk eksplorasi desain tahap awal.

ux-designdesign-explorationgenui
oleh Chen X. et al. · 2026-06
Baca Selengkapnya
📄Paper

The Missing Layer: Why EdTech Needs Design-Time Generative UI, Not Just Runtime Personalization

Paper arXiv Juni 2026 yang diterima di AIED NextGen Learning Interfaces Workshop. Paper ini berargumen bahwa pendidikan adaptif perlu memakai Generative UI pada authoring time, bukan hanya saat runtime pembelajar, agar instruktur dapat memverifikasi representasi yang accessible dan spesifik untuk setiap modalitas sebelum digunakan siswa.

educationdesign-timeaccessibility
oleh Neshaei S. P. et al. · 2026-06
Baca Selengkapnya
📄Paper

TaskLens: Generating Task-Conditioned Scaffolded Interfaces for Learning Professional Creative Software

Paper DIS 2026 / arXiv yang memperkenalkan TaskLens, metode berbasis LLM untuk membuat scaffolded UI sesuai tugas pada tool kreatif yang kompleks. Sistem ini mengenali tahap workflow dan konsep domain, memilih tool yang relevan, membuat kode implementasi, serta menghasilkan interface yang menampilkan fitur lanjutan secara bertahap di software seperti Blender.

scaffolded-uicreative-softwaregenui
oleh Liu Y. et al. · 2026-06
Baca Selengkapnya
📄Paper

FlowEval: Reference-Based Evaluation of Generated User Interfaces

Riset yang berafiliasi dengan Apple tentang evaluasi kemampuan interface hasil generasi dalam mendukung user journey yang realistis. FlowEval menjalankan tugas tervalidasi pada website referensi dan hasil generasi yang setara, membandingkan navigation trace dengan metrik kemiripan berbasis referensi, lalu menguji keselarasan skor tersebut dengan penilaian pakar UI.

ui-evaluationinteraction-flowscomputer-use-agents
oleh Wu J. et al. · 2026-05
Baca Selengkapnya
📄Paper

Macaron-A2UI: A Model for Generative UI in Personal Agents

Paper arXiv terbaru tahun 2026 yang berfokus pada runtime Generative UI untuk personal agents. Para penulis berargumen bahwa chat biasa menjadi bottleneck untuk tugas agent yang kompleks, memperkenalkan corpus Generative UI berskala besar beserta A2UI-Bench, dan melatih model yang menghasilkan bahasa alami bersama executable UI actions ringan untuk konfirmasi, refinement preferensi, dan koordinasi multi-goal.

agentsa2uibenchmark
oleh Kong F. et al. · 2026-05
Baca Selengkapnya
📄Paper

Efficient Personalization of Generative User Interfaces

Paper arXiv terbaru tentang salah satu masalah inti GenUI yang belum terpecahkan: personalisasi. Para penulis mengumpulkan penilaian berpasangan dari designer terlatih terhadap 600 UI yang sama, menunjukkan bahwa preferensi desain sangat beragam, dan mengusulkan preference model yang sample-efficient untuk mempersonalisasi interface hasil generasi secara lebih baik daripada evaluator baseline dan direct prompting.

personalizationgenuiarxiv
oleh Peng Y.-H. et al. · 2026-04
Baca Selengkapnya
📄Paper

MAIC-UI: Making Interactive Courseware with Generative UI

Paper arXiv terbaru yang memperkenalkan sistem GenUI zero-code untuk materi pembelajaran. MAIC-UI mengubah buku teks, PPT, dan PDF menjadi halaman belajar interaktif, memakai pipeline generate-verify-optimize untuk akurasi pedagogis, serta mendukung pengeditan inkremental click-to-locate sebagai pengganti regenerasi penuh yang mahal.

educationcoursewaregenui
oleh Tu S. et al. · 2026-04
Baca Selengkapnya
📄Paper

Generative UI as an Accessibility Bridge: Lessons from C2C E-Commerce

Paper workshop arXiv / CHI 2026 yang berargumen bahwa runtime Generative UI dapat menutup kesenjangan accessibility pada konten marketplace buatan pengguna. Berdasarkan enam studi dengan pengguna tunanetra, low-vision, dan lansia, paper ini menempatkan interface adaptif, panduan audio, dan HTML hasil regenerasi sebagai intervensi accessibility berbasis kebijakan, bukan variasi UI kosmetik.

accessibilityruntime-adaptationecommerce
oleh Bektur Ryskeldiev · 2026-04
Baca Selengkapnya
📄Paper

What does Generative UI mean for HCI Practice?

Paper workshop CHI EA 2026 dari Microsoft Research dan peneliti HCI akademis tentang cara interface buatan AI dapat mengubah metode desain, workflow, dan pengalaman pengguna. Paper ini berguna karena menempatkan GenUI sebagai perubahan pada tingkat praktik bagi peneliti, designer, developer, dan tim produk, bukan sekadar teknik output model.

chi-2026hci-practicedesign-workflows
oleh Lindley S. et al. · 2026-04
Baca Selengkapnya
📄Paper

Software as Content: Dynamic Applications as the Human-Agent Interaction Layer

Paper arXiv 2026 yang berargumen bahwa chat saja bukan medium yang baik untuk pekerjaan manusia-agent yang terstruktur dan stateful. Para penulis mengusulkan Software as Content, yakni aplikasi agentic yang dibuat secara dinamis menjadi interaction layer utama, bertahan antargiliran, dan menyediakan control yang dapat ditindaklanjuti alih-alih memaksa semuanya melewati teks linear.

agentic-appsgenuistateful-ui
oleh Xie M. and Xie Y. · 2026-03
Baca Selengkapnya
📄Paper

The Keyhole Effect: Why Chat Interfaces Fail at Data Analysis

Paper arXiv 2026 yang berargumen bahwa chat bukan permukaan default yang baik untuk pekerjaan analisis bertahap dan stateful. Paper ini menjelaskan melalui cognitive science bagian percakapan linear yang gagal, lalu menempatkan Generative UI dan pola interaksi hybrid lainnya sebagai cara praktis untuk memulihkan visibilitas, spatial memory, dan kontrol pengguna.

genuihybrid-uianalysis
oleh Mohan Reddy · 2026-02
Baca Selengkapnya
📄Paper

Gradual Generation of User Interfaces as a Design Method for Malleable Software

Paper arXiv 2026 yang mengusulkan "Gradually Generating User Interfaces", metode desain GenUI yang menyisipkan layer interface perantara selama proses generasi agar pengguna dapat menemukan dan mengendalikan opsi kustomisasi tanpa kewalahan oleh kotak prompt raksasa atau sistem menu yang padat.

malleable-softwaregenuihci
oleh Min B. et al. · 2026-01
Baca Selengkapnya
📄Paper

AlignUI: A Method for Designing LLM-Generated UIs Aligned with User Preferences

Paper arXiv 2026 tentang penyelarasan interface buatan LLM dengan tugas dan preferensi pengguna. Para penulis mengumpulkan 720 preferensi control UI dari 50 pengguna dalam tugas pengeditan gambar, memakai dataset tersebut untuk memandu reasoning model, lalu mengevaluasi UI yang dihasilkan bersama 72 pengguna tambahan.

preference-alignmentllm-generated-uihci
oleh Liu Y. et al. · 2026-01
Baca Selengkapnya
📄Paper

Generative UI: LLMs are Effective UI Generators

Paper Google Research yang pertama kali merumuskan konsep Generative UI secara sistematis. Paper ini mendefinisikan Generative UI sebagai "model AI yang tidak hanya menghasilkan konten, tetapi seluruh pengalaman pengguna". Eksperimen menunjukkan bahwa dengan prompt dan tool yang tepat, LLM dapat membuat interface interaktif khusus berkualitas tinggi yang jauh lebih disukai pengguna manusia, dengan 44% kasus dinilai setara pakar manusia. Paper ini juga merilis dataset PAGEN untuk mengevaluasi interface hasil generasi.

googlegenerative-uillm
oleh Leviathan et al. (Google) · 2025-11
Baca Selengkapnya
📄Paper

Improving User Interface Generation Models from Designer Feedback

Paper riset tentang pelatihan generator UI berbasis LLM dengan feedback yang sesuai dengan praktik desain profesional. Para penulis membandingkan ranking, komentar, sketch, dan revisi langsung dari 21 designer, lalu memakai data tersebut untuk meningkatkan model kode yang menghasilkan interface siap rendering.

ui-generationdesigner-feedbackmodel-alignment
oleh Wu J. et al. · 2025-09
Baca Selengkapnya
📄Paper

Generative Interfaces for Language Models

Paper ACL 2026 Findings yang mengusulkan paradigma ketika LLM secara proaktif membuat interface khusus tugas, bukan hanya membalas dengan teks. Riset ini memadukan representasi khusus interface dengan refinement iteratif dan melaporkan bahwa evaluator manusia lebih memilih generative interface daripada interface percakapan hingga 72% pada tugas padat informasi dan eksploratif.

acl-2026evaluationgenui
oleh Chen J. et al. · 2025-08
Baca Selengkapnya
📄Paper

Towards a Working Definition of Designing Generative User Interfaces

Paper konferensi DIS 2025 yang mengusulkan working definition pertama untuk Generative UI (GenUI) melalui tinjauan literatur dan analisis kasus. Riset ini mendefinisikan GenUI sebagai paradigma baru pembuatan interface ketika "manusia dan AI berkolaborasi saat design-time untuk menghasilkan interface, lalu pengguna berinteraksi dengan interface buatan AI saat runtime". Paper ini merangkum lima karakteristik utama GenUI: co-creation, perluasan design space, fluiditas representasi, adaptasi kontekstual, dan generation-first.

dis-2025genuidefinition
oleh Lee K.-H. · 2025-05
Baca Selengkapnya
📄Paper

Generative and Malleable User Interfaces with Generative AI

Paper CHI 2025 yang mengusulkan penggunaan AI untuk membuat "generative and malleable user interfaces" berdasarkan tugas pengguna. Para penulis merancang data model berbasis tugas, dengan LLM yang mengurai prompt pengguna dan membuat spesifikasi UI sebelum memetakannya ke interface konkret. Eksperimen menunjukkan bahwa metode ini dapat membuat elemen interface seperti form dan visualisasi secara dinamis, serta mendukung pengguna dalam mengubah interface melalui bahasa alami.

chi-2025malleable-uitask-driven
oleh Cao Y. et al. · 2025-03
Baca Selengkapnya
📄Paper

BISCUIT: Scaffolding LLM-Generated Code with Ephemeral UIs in Computational Notebooks

Paper VL/HCC 2024 dari peneliti Apple yang memperkenalkan BISCUIT, workflow JupyterLab yang menyisipkan layer ephemeral UI di antara intent pengguna dan kode buatan LLM. Alih-alih langsung berpindah dari prompt ke file sumber, pengguna terlebih dahulu berinteraksi dengan control sementara hasil generasi untuk memahami opsi, melakukan refinement permintaan, dan mengeksplorasi variabel sebelum kode dibuat.

notebooksephemeral-uiprogramming
oleh Cheng R. et al. · 2024-08
Baca Selengkapnya

Kumpulan terkurasi berisi resource Generative UI untuk designer dan developer.

Dibuat dengan ❤️ oleh komunitas