Automating HCI Principles: Skills for On-Demand UI Construction
Position paper proposing machine-readable skills that guide agents as they generate task-specific interfaces. Its shared Human-AI workspace connects dialogue, task decomposition, and UI state, while inspectable skill files encode usability heuristics, accessibility criteria, cognitive-load guidance, and mixed-initiative interaction principles.
AUV-Bench: Aesthetic Understanding and Generation Evaluation for User Interfaces
September 2026 benchmark connecting aesthetic scoring, diagnosis, repair, and text-to-UI generation across 1,395 executable web interfaces. It pairs diagnosis and repair on 660 controlled-degradation cases to test whether models can translate design judgments into effective interface changes.
Elicitive User Interfaces: Designing How Users Shape Generative Interfaces
September 2026 HCI paper proposing that generated interfaces should also generate ways to ask users about unstated preferences. Its six-axis design space and Ditto prototype cover questions, alternatives, editable panels, and other prompts embedded in the interface, with findings from two user studies.
GUIDE: Designer-in-the-loop Authoring of Conformant Generative User Interfaces
September 2026 HCI paper introducing a Figma-based environment for steering generated interfaces toward a designer's intent. GUIDE turns canvas edits into prompt updates and adapts a design-conformance scorer that ranks candidate screens against project references.
Harnessing Generative UI for Education: Tailored Learning Interactives
September 2026 Google Research paper on generating customized STEM simulations with Gemini. Its teacher-led pipeline turns learning objectives into scaffolded, multi-level interfaces, then checks rendered HTML and JavaScript for visual, solution, telemetry, and mechanical failures before refining the result.
IWC-Bench: Evaluating Web Application Generation from a Software Testing Perspective
2026 benchmark for evaluating runnable LLM-generated web applications through coverage-guided browser exploration. IWC-Bench instruments each app, turns interaction traces into state-transition graphs, and scores visual aesthetics, usability, and requirement alignment across 369 real-world requirements and 5,088 acceptance criteria.
Toward Frontier-Quality Declarative UI Generation at Small-Model Cost
September 2026 Harness4GenUI paper studying whether small language models can generate production-oriented A2UI from approved component catalogs. Across task-management and cloud-console domains, the authors compare training-data strategies, model sizes, catalog sizes, cost, latency, binding correctness, and rendered quality.
EvoGenUI-Bench: Evaluating Multi-Turn Generative UI Assistants
August 2026 benchmark testing whether LLM assistants can maintain one executable web interface as user requirements evolve. EvoGenUI-Bench contains 150 five-turn tasks across information presentation, stateful interaction, and tool-grounded external state, with browser-based evaluation over screenshots, DOM and source evidence, actor traces, and runtime logs.
Maru: Information Architecture for Aligned, Persistent Generative UI
August 2026 HCI paper introducing information architecture as shared state for Generative UI. Maru captures how users partition, order, name, and prioritize information, turns those choices into persistent rules, and applies them across successive interface generations instead of rebuilding structure from each prompt.
SchemaGUI: A Schema-Driven Benchmark for Controllable GUI Generation
August 2026 benchmark for evaluating LLM-generated interfaces with deterministic annotations instead of noisy human labels. SchemaGUI synthesizes bilingual instructions and function-call references from parameterized UI schemas, then measures feasibility, geometry, and layout complexity across six scenarios and five models.
RAGE-Vis: A Relation-Aware Generative Editing Interface for Chart Editing
ChinaVis 2026 paper introducing a Generative UI for natural-language chart editing. RAGE-Vis turns bitmap charts into editable parameterized representations, parses composite requests, and generates hierarchical panels with coordinated global and local controls for underspecified editing intents.
LEGOUI: Designing with UI-DSL Bricks for Transparent, Controllable Generation
August 2026 HCI paper introducing a staged Generative UI framework for early design ideation. LEGOUI records prompt-derived and model-inferred decisions in a provenance-aware UI DSL, lets users accept, reject, or add decisions across layout, interaction, relation, and style stages, and renders from the evolving specification.
Beyond a Single Judge: Simulating Social Persona Panels for Generative UI Evaluation
July 2026 paper introducing ESPP, an evaluation method that replaces one LLM judge with a panel of evidence-grounded, psychologically diverse personas. Panelists independently rate generated-interface screenshots, exchange opinions through a bounded-confidence mechanism, and are combined with social weighting.
Design Theater: A Benchmark for Generative UI
July 2026 paper introducing a benchmark for checking whether Generative UI tools implement the design rationales they present to users. Across 120 interfaces from five tools and 24 structural, styling, and functional tasks, the study measures gaps between claimed design decisions and the generated result.
MV-Bench: Benchmarking MLLMs for Coordinated Multi-View Interface Construction
July 2026 benchmark for testing whether multimodal language models can generate executable multi-view visualization interfaces from visual designs. MV-Bench uses Tableau workbooks as structured ground truth and evaluates visual fidelity, data bindings, coordinated interactions, and code executability.
Learning to Detect UI Principle Violations via Reinforcement Learning
July 2026 paper on a lightweight vision-language critic for generated web interfaces. The authors unify 19 principles spanning WCAG 2.2 accessibility, deceptive design, and cognitive usability, then train on roughly 10,000 generated pages with verified synthetic violations.
TaskArtisan: Designing Composable Generative Widgets for LLM-Assisted Analysis
July 2026 HCI paper examining how Generative UI can make long, multi-step chatbot analysis workflows easier to revisit and reuse. TaskArtisan lets people create analysis widgets and compose them into sequential or fan-out workflows, then compares the approach with a conventional chatbot in a 12-participant study.
AI Prototyper: A Figma Plugin for Decomposition-Based GUI Prototyping with LLMs
July 2026 paper introducing AI Prototyper, an open-source Figma plugin that turns natural-language screen descriptions into fully editable prototypes. Its pipeline decomposes a request into reviewable features, retrieves components from a fixed 32-primitive library, generates schema-constrained instances, and renders native Figma layers with auto-layout.
Spatula: Exploring On-Demand In-Situ Interfaces and Interaction for Attribute Control
July 2026 HCI paper introducing Spatula, an LLM-powered system that generates context-aware controls directly on a motion-graphics canvas. Its elastic attribute control space supports progressive discovery, multiple levels of precision, semantic group editing, and new controls on demand.
Rethinking the UI of GenUI: A Tale of Two Designs
June 2026 HCI paper comparing the prompt-first, depth-first, high-fidelity pattern common in Generative UI tools with a structured, breadth-first, low-fidelity alternative. A study with 24 UX designers and product managers surfaces concrete trade-offs for early-stage design exploration.
The Missing Layer: почему EdTech нужен design-time Generative UI, а не только runtime personalization
arXiv paper июня 2026 года, принятый на AIED NextGen Learning Interfaces Workshop. Авторы доказывают, что adaptive education должна использовать Generative UI на этапе authoring, а не только на learner runtime, чтобы преподаватели могли заранее проверять доступные и modality-specific представления.
TaskLens: генерация обучающих интерфейсов под задачу для профессионального креативного ПО
DIS 2026 / arXiv paper о TaskLens: методе на базе LLM, который генерирует scaffolded UI под конкретную задачу для сложных креативных инструментов. Система определяет этапы рабочего процесса и доменные понятия, выбирает нужные инструменты, генерирует код реализации и создает интерфейсы, постепенно раскрывающие продвинутые функции в ПО вроде Blender.
FlowEval: Reference-Based Evaluation of Generated User Interfaces
Apple-affiliated research on evaluating whether generated interfaces support realistic user journeys. FlowEval runs validated tasks on reference websites and generated analogs, compares their navigation traces with reference-based similarity metrics, and tests how well those scores align with expert UI judgments.
Macaron-A2UI: модель Generative UI для персональных агентов
Свежий arXiv paper 2026 года о runtime Generative UI для персональных агентов. Авторы показывают, что обычный чат становится узким местом для сложных агентных задач, вводят крупный корпус Generative UI и A2UI-Bench, а также обучают модели, которые генерируют естественный язык вместе с легкими исполняемыми UI-действиями для подтверждения, уточнения предпочтений и координации нескольких целей.
Эффективная персонализация Generative User Interfaces
Недавний arXiv paper об одной из ключевых нерешенных задач GenUI: персонализации. Авторы собирают парные оценки обученных дизайнеров для одних и тех же 600 сгенерированных UI, показывают существенное расхождение дизайн-предпочтений и предлагают sample-efficient preference model, который персонализирует сгенерированные интерфейсы лучше базовых оценщиков и прямого prompting.
MAIC-UI: создание интерактивных учебных материалов с Generative UI
Недавний arXiv paper о zero-code GenUI системе для образовательных материалов. MAIC-UI превращает учебники, PPT и PDF в интерактивные учебные страницы, использует generate-verify-optimize pipeline для педагогической точности и поддерживает инкрементальные правки click-to-locate вместо дорогой полной регенерации.
Generative UI as an Accessibility Bridge: уроки C2C e-commerce
arXiv / CHI 2026 workshop paper о том, как runtime Generative UI может закрывать accessibility-разрывы в marketplace-контенте, который создают пользователи. На основе шести исследований с незрячими, слабовидящими и пожилыми пользователями автор рассматривает адаптированные интерфейсы, audio guidance и regenerated HTML как policy-driven accessibility interventions.
Что Generative UI значит для HCI-практики?
CHI EA 2026 workshop paper от Microsoft Research и академических HCI-исследователей о том, как AI-generated interfaces могут менять методы дизайна, рабочие процессы и пользовательский опыт. Работа полезна тем, что рассматривает GenUI как сдвиг на уровне практики для исследователей, дизайнеров, разработчиков и продуктовых команд, а не только как технику вывода модели.
Software as Content: динамические приложения как слой взаимодействия человек-агент
arXiv paper 2026 года, доказывающий, что одного чата недостаточно для структурированной, stateful работы человека с агентом. Авторы предлагают Software as Content: динамически сгенерированные агентные приложения становятся основным слоем взаимодействия, сохраняются между ходами и показывают actionable controls вместо того, чтобы загонять все в линейный текст.
The Keyhole Effect: почему чат-интерфейсы плохо подходят для анализа данных
arXiv paper 2026 года о том, почему чат является слабой surface по умолчанию для многошаговой, stateful аналитической работы. Работа дает когнитивно-научное объяснение, где ломаются линейные разговоры, а затем позиционирует Generative UI и другие гибридные паттерны взаимодействия как практичные способы вернуть видимость, spatial memory и контроль пользователя.
Постепенная генерация пользовательских интерфейсов как метод дизайна для malleable software
arXiv paper 2026 года о методе дизайна "Gradually Generating User Interfaces" для GenUI. Метод вставляет промежуточные интерфейсные слои во время генерации, чтобы пользователи находили и контролировали параметры кастомизации без перегрузки огромным prompt box или плотной системой меню.
AlignUI: метод проектирования LLM-generated UI, согласованных с предпочтениями пользователей
arXiv paper 2026 года о согласовании LLM-generated interfaces с задачами и предпочтениями пользователей. Авторы собирают 720 предпочтений по UI controls от 50 пользователей в задачах редактирования изображений, используют этот датасет для направления reasoning модели и оценивают сгенерированные UI с еще 72 пользователями.
Generative UI: LLM эффективно генерируют интерфейсы
Google Research paper, впервые системно формулирующий концепцию Generative UI. Работа определяет Generative UI как AI-модели, создающие не только контент, но и весь пользовательский опыт. Эксперименты показывают, что при правильных prompts и tools LLM могут генерировать качественные кастомные интерактивные интерфейсы, которые люди значительно чаще предпочитают альтернативам; в 44% случаев они сопоставимы с работой human experts. Работа также публикует PAGEN dataset для оценки сгенерированных интерфейсов.
Improving User Interface Generation Models from Designer Feedback
Research paper on training LLM-based UI generators with feedback that matches professional design practice. The authors compare rankings, comments, sketches, and direct revisions from 21 designers, then use the resulting data to improve code models that generate rendered interfaces.
Generative Interfaces для Language Models
ACL 2026 Findings paper, предлагающий парадигму, в которой LLM проактивно генерируют интерфейсы под задачу, а не отвечают только текстом. Работа сочетает interface-specific representations с iterative refinement и сообщает, что human evaluators предпочитали генеративные интерфейсы разговорным до 72% чаще в информационно плотных и исследовательских задачах.
К рабочему определению проектирования Generative User Interfaces
DIS 2025 conference paper, предлагающий первое рабочее определение Generative UI (GenUI) через обзор литературы и анализ кейсов. Исследование определяет GenUI как новую парадигму создания интерфейсов, где люди и AI сотрудничают на design-time для генерации интерфейсов, а пользователи взаимодействуют с AI-generated interfaces на runtime. Работа выделяет пять ключевых характеристик GenUI: co-creation, расширение design space, representational fluidity, contextual adaptation и generation-first.
Generative and Malleable User Interfaces с Generative AI
CHI 2025 paper о применении AI для генерации "generative and malleable user interfaces" на основе задач пользователя. Авторы проектируют task-driven data model, где LLM разбирают prompts пользователя и генерируют UI specifications, а затем сопоставляют их с конкретными интерфейсами. Эксперименты показывают, что метод может динамически генерировать элементы интерфейса вроде forms и visualizations, помогая пользователям менять интерфейсы через natural language.
BISCUIT: временные UI как scaffold для LLM-generated code в computational notebooks
VL/HCC 2024 paper от исследователей Apple о BISCUIT: JupyterLab workflow, который вставляет временный UI-слой между намерением пользователя и LLM-generated code. Вместо прямого перехода от prompt к исходным файлам пользователи сначала работают с временными сгенерированными controls, которые помогают понять варианты, уточнить запросы и исследовать переменные до генерации кода.