Kembali ke Daftar
📄Paper

Design Theater: A Benchmark for Generative UI

Imteyaz K. et al.
2026-07

Tentang

Paper Juli 2026 yang memperkenalkan benchmark untuk memeriksa apakah tool Generative UI benar-benar menerapkan alasan desain yang disampaikan kepada pengguna. Melalui 120 interface dari lima tool dan 24 tugas struktural, styling, serta fungsional, studi ini mengukur kesenjangan antara keputusan desain yang diklaim dan hasil yang dibuat.

Ringkasan

Mengapa Design Theater Memberi Perspektif Baru:

1. Evaluasi rationale-to-interface: Menguji apakah penjelasan desain yang dihasilkan benar-benar terlihat pada UI aktual
2. Tiga kelas kebutuhan: Memisahkan kualitas implementasi struktural, styling, dan fungsional
3. Benchmark lintas tool: Mengevaluasi 120 interface yang dihasilkan oleh lima tool Generative UI
4. Bukti kegagalan yang konkret: Menemukan bahwa rata-rata lebih dari 25% alasan yang dinyatakan tidak diimplementasikan, dan angkanya naik menjadi 34% untuk kebutuhan fungsional
5. Cakupan prinsip UX: Mengukur apakah tool mengenali dan menerapkan prinsip desain yang tertanam dalam prompt

Tag

genuiui-evaluationdesign-rationaleux-principlesbenchmark

Artikel Terkait

📄Paper

Toward Frontier-Quality Declarative UI Generation at Small-Model Cost

September 2026 Harness4GenUI paper studying whether small language models can generate production-oriented A2UI from approved component catalogs. Across task-management and cloud-console domains, the authors compare training-data strategies, model sizes, catalog sizes, cost, latency, binding correctness, and rendered quality.

a2uismall-language-modelssupervised-fine-tuning
oleh Yang Y. et al. · 2026-09
Baca Selengkapnya
📄Paper

EvoGenUI-Bench: Evaluating Multi-Turn Generative UI Assistants

August 2026 benchmark testing whether LLM assistants can maintain one executable web interface as user requirements evolve. EvoGenUI-Bench contains 150 five-turn tasks across information presentation, stateful interaction, and tool-grounded external state, with browser-based evaluation over screenshots, DOM and source evidence, actor traces, and runtime logs.

generative-uimulti-turnbenchmark
oleh Peng Y. et al. · 2026-08
Baca Selengkapnya
📄Paper

Maru: Information Architecture for Aligned, Persistent Generative UI

August 2026 HCI paper introducing information architecture as shared state for Generative UI. Maru captures how users partition, order, name, and prioritize information, turns those choices into persistent rules, and applies them across successive interface generations instead of rebuilding structure from each prompt.

generative-uiinformation-architecturepersonalization
oleh Kim E. et al. · 2026-08
Baca Selengkapnya

Kumpulan terkurasi berisi resource Generative UI untuk designer dan developer.

Dibuat dengan ❤️ oleh komunitas