📄

Generative UI Papers — исследования генеративного UI и AI интерфейсов

Смотрите академические papers и технические исследования про Generative UI, Генеративный интерфейс, LLM-based UI generation, A2UI, AG-UI, human-AI co-creation и генеративный дизайн интерфейсов.

28 элементов
📄Papers

RAGE-Vis: A Relation-Aware Generative Editing Interface for Chart Editing

ChinaVis 2026 paper introducing a Generative UI for natural-language chart editing. RAGE-Vis turns bitmap charts into editable parameterized representations, parses composite requests, and generates hierarchical panels with coordinated global and local controls for underspecified editing intents.

generative-uidata-visualizationnatural-language-editing
от Kang Z. et al. · 2026-08
Читать дальше
📄Papers

LEGOUI: Designing with UI-DSL Bricks for Transparent, Controllable Generation

August 2026 HCI paper introducing a staged Generative UI framework for early design ideation. LEGOUI records prompt-derived and model-inferred decisions in a provenance-aware UI DSL, lets users accept, reject, or add decisions across layout, interaction, relation, and style stages, and renders from the evolving specification.

genuiui-dsldesign-time
от Zhou Y. et al. · 2026-08
Читать дальше
📄Papers

Beyond a Single Judge: Simulating Social Persona Panels for Generative UI Evaluation

July 2026 paper introducing ESPP, an evaluation method that replaces one LLM judge with a panel of evidence-grounded, psychologically diverse personas. Panelists independently rate generated-interface screenshots, exchange opinions through a bounded-confidence mechanism, and are combined with social weighting.

genuiui-evaluationhuman-preferences
от Wu Z. et al. · 2026-07
Читать дальше
📄Papers

Design Theater: A Benchmark for Generative UI

July 2026 paper introducing a benchmark for checking whether Generative UI tools implement the design rationales they present to users. Across 120 interfaces from five tools and 24 structural, styling, and functional tasks, the study measures gaps between claimed design decisions and the generated result.

genuiui-evaluationdesign-rationale
от Imteyaz K. et al. · 2026-07
Читать дальше
📄Papers

MV-Bench: Benchmarking MLLMs for Coordinated Multi-View Interface Construction

July 2026 benchmark for testing whether multimodal language models can generate executable multi-view visualization interfaces from visual designs. MV-Bench uses Tableau workbooks as structured ground truth and evaluates visual fidelity, data bindings, coordinated interactions, and code executability.

ui-generationmultimodal-modelsdata-visualization
от Zhao Y. et al. · 2026-07
Читать дальше
📄Papers

Learning to Detect UI Principle Violations via Reinforcement Learning

July 2026 paper on a lightweight vision-language critic for generated web interfaces. The authors unify 19 principles spanning WCAG 2.2 accessibility, deceptive design, and cognitive usability, then train on roughly 10,000 generated pages with verified synthetic violations.

ui-evaluationaccessibilitydesign-quality
от Mehta N. et al. · 2026-07
Читать дальше
📄Papers

TaskArtisan: Designing Composable Generative Widgets for LLM-Assisted Analysis

July 2026 HCI paper examining how Generative UI can make long, multi-step chatbot analysis workflows easier to revisit and reuse. TaskArtisan lets people create analysis widgets and compose them into sequential or fan-out workflows, then compares the approach with a conventional chatbot in a 12-participant study.

generative-widgetsanalysiscomposition
от Chen M. and Pavel A. · 2026-07
Читать дальше
📄Papers

AI Prototyper: A Figma Plugin for Decomposition-Based GUI Prototyping with LLMs

July 2026 paper introducing AI Prototyper, an open-source Figma plugin that turns natural-language screen descriptions into fully editable prototypes. Its pipeline decomposes a request into reviewable features, retrieves components from a fixed 32-primitive library, generates schema-constrained instances, and renders native Figma layers with auto-layout.

figmadesign-timegui-prototyping
от Salangsingha T. et al. · 2026-07
Читать дальше
📄Papers

Spatula: Exploring On-Demand In-Situ Interfaces and Interaction for Attribute Control

July 2026 HCI paper introducing Spatula, an LLM-powered system that generates context-aware controls directly on a motion-graphics canvas. Its elastic attribute control space supports progressive discovery, multiple levels of precision, semantic group editing, and new controls on demand.

on-demand-uicreative-toolsdirect-manipulation
от Li B. et al. · 2026-07
Читать дальше
📄Papers

Rethinking the UI of GenUI: A Tale of Two Designs

June 2026 HCI paper comparing the prompt-first, depth-first, high-fidelity pattern common in Generative UI tools with a structured, breadth-first, low-fidelity alternative. A study with 24 UX designers and product managers surfaces concrete trade-offs for early-stage design exploration.

ux-designdesign-explorationgenui
от Chen X. et al. · 2026-06
Читать дальше
📄Papers

The Missing Layer: почему EdTech нужен design-time Generative UI, а не только runtime personalization

arXiv paper июня 2026 года, принятый на AIED NextGen Learning Interfaces Workshop. Авторы доказывают, что adaptive education должна использовать Generative UI на этапе authoring, а не только на learner runtime, чтобы преподаватели могли заранее проверять доступные и modality-specific представления.

educationdesign-timeaccessibility
от Neshaei S. P. et al. · 2026-06
Читать дальше
📄Papers

TaskLens: генерация обучающих интерфейсов под задачу для профессионального креативного ПО

DIS 2026 / arXiv paper о TaskLens: методе на базе LLM, который генерирует scaffolded UI под конкретную задачу для сложных креативных инструментов. Система определяет этапы рабочего процесса и доменные понятия, выбирает нужные инструменты, генерирует код реализации и создает интерфейсы, постепенно раскрывающие продвинутые функции в ПО вроде Blender.

scaffolded-uicreative-softwaregenui
от Liu Y. et al. · 2026-06
Читать дальше
📄Papers

FlowEval: Reference-Based Evaluation of Generated User Interfaces

Apple-affiliated research on evaluating whether generated interfaces support realistic user journeys. FlowEval runs validated tasks on reference websites and generated analogs, compares their navigation traces with reference-based similarity metrics, and tests how well those scores align with expert UI judgments.

ui-evaluationinteraction-flowscomputer-use-agents
от Wu J. et al. · 2026-05
Читать дальше
📄Papers

Macaron-A2UI: модель Generative UI для персональных агентов

Свежий arXiv paper 2026 года о runtime Generative UI для персональных агентов. Авторы показывают, что обычный чат становится узким местом для сложных агентных задач, вводят крупный корпус Generative UI и A2UI-Bench, а также обучают модели, которые генерируют естественный язык вместе с легкими исполняемыми UI-действиями для подтверждения, уточнения предпочтений и координации нескольких целей.

agentsa2uibenchmark
от Kong F. et al. · 2026-05
Читать дальше
📄Papers

Эффективная персонализация Generative User Interfaces

Недавний arXiv paper об одной из ключевых нерешенных задач GenUI: персонализации. Авторы собирают парные оценки обученных дизайнеров для одних и тех же 600 сгенерированных UI, показывают существенное расхождение дизайн-предпочтений и предлагают sample-efficient preference model, который персонализирует сгенерированные интерфейсы лучше базовых оценщиков и прямого prompting.

personalizationgenuiarxiv
от Peng Y.-H. et al. · 2026-04
Читать дальше
📄Papers

MAIC-UI: создание интерактивных учебных материалов с Generative UI

Недавний arXiv paper о zero-code GenUI системе для образовательных материалов. MAIC-UI превращает учебники, PPT и PDF в интерактивные учебные страницы, использует generate-verify-optimize pipeline для педагогической точности и поддерживает инкрементальные правки click-to-locate вместо дорогой полной регенерации.

educationcoursewaregenui
от Tu S. et al. · 2026-04
Читать дальше
📄Papers

Generative UI as an Accessibility Bridge: уроки C2C e-commerce

arXiv / CHI 2026 workshop paper о том, как runtime Generative UI может закрывать accessibility-разрывы в marketplace-контенте, который создают пользователи. На основе шести исследований с незрячими, слабовидящими и пожилыми пользователями автор рассматривает адаптированные интерфейсы, audio guidance и regenerated HTML как policy-driven accessibility interventions.

accessibilityruntime-adaptationecommerce
от Bektur Ryskeldiev · 2026-04
Читать дальше
📄Papers

Что Generative UI значит для HCI-практики?

CHI EA 2026 workshop paper от Microsoft Research и академических HCI-исследователей о том, как AI-generated interfaces могут менять методы дизайна, рабочие процессы и пользовательский опыт. Работа полезна тем, что рассматривает GenUI как сдвиг на уровне практики для исследователей, дизайнеров, разработчиков и продуктовых команд, а не только как технику вывода модели.

chi-2026hci-practicedesign-workflows
от Lindley S. et al. · 2026-04
Читать дальше
📄Papers

Software as Content: динамические приложения как слой взаимодействия человек-агент

arXiv paper 2026 года, доказывающий, что одного чата недостаточно для структурированной, stateful работы человека с агентом. Авторы предлагают Software as Content: динамически сгенерированные агентные приложения становятся основным слоем взаимодействия, сохраняются между ходами и показывают actionable controls вместо того, чтобы загонять все в линейный текст.

agentic-appsgenuistateful-ui
от Xie M. and Xie Y. · 2026-03
Читать дальше
📄Papers

The Keyhole Effect: почему чат-интерфейсы плохо подходят для анализа данных

arXiv paper 2026 года о том, почему чат является слабой surface по умолчанию для многошаговой, stateful аналитической работы. Работа дает когнитивно-научное объяснение, где ломаются линейные разговоры, а затем позиционирует Generative UI и другие гибридные паттерны взаимодействия как практичные способы вернуть видимость, spatial memory и контроль пользователя.

genuihybrid-uianalysis
от Mohan Reddy · 2026-02
Читать дальше
📄Papers

Постепенная генерация пользовательских интерфейсов как метод дизайна для malleable software

arXiv paper 2026 года о методе дизайна "Gradually Generating User Interfaces" для GenUI. Метод вставляет промежуточные интерфейсные слои во время генерации, чтобы пользователи находили и контролировали параметры кастомизации без перегрузки огромным prompt box или плотной системой меню.

malleable-softwaregenuihci
от Min B. et al. · 2026-01
Читать дальше
📄Papers

AlignUI: метод проектирования LLM-generated UI, согласованных с предпочтениями пользователей

arXiv paper 2026 года о согласовании LLM-generated interfaces с задачами и предпочтениями пользователей. Авторы собирают 720 предпочтений по UI controls от 50 пользователей в задачах редактирования изображений, используют этот датасет для направления reasoning модели и оценивают сгенерированные UI с еще 72 пользователями.

preference-alignmentllm-generated-uihci
от Liu Y. et al. · 2026-01
Читать дальше
📄Papers

Generative UI: LLM эффективно генерируют интерфейсы

Google Research paper, впервые системно формулирующий концепцию Generative UI. Работа определяет Generative UI как AI-модели, создающие не только контент, но и весь пользовательский опыт. Эксперименты показывают, что при правильных prompts и tools LLM могут генерировать качественные кастомные интерактивные интерфейсы, которые люди значительно чаще предпочитают альтернативам; в 44% случаев они сопоставимы с работой human experts. Работа также публикует PAGEN dataset для оценки сгенерированных интерфейсов.

googlegenerative-uillm
от Leviathan et al. (Google) · 2025-11
Читать дальше
📄Papers

Improving User Interface Generation Models from Designer Feedback

Research paper on training LLM-based UI generators with feedback that matches professional design practice. The authors compare rankings, comments, sketches, and direct revisions from 21 designers, then use the resulting data to improve code models that generate rendered interfaces.

ui-generationdesigner-feedbackmodel-alignment
от Wu J. et al. · 2025-09
Читать дальше
📄Papers

Generative Interfaces для Language Models

ACL 2026 Findings paper, предлагающий парадигму, в которой LLM проактивно генерируют интерфейсы под задачу, а не отвечают только текстом. Работа сочетает interface-specific representations с iterative refinement и сообщает, что human evaluators предпочитали генеративные интерфейсы разговорным до 72% чаще в информационно плотных и исследовательских задачах.

acl-2026evaluationgenui
от Chen J. et al. · 2025-08
Читать дальше
📄Papers

К рабочему определению проектирования Generative User Interfaces

DIS 2025 conference paper, предлагающий первое рабочее определение Generative UI (GenUI) через обзор литературы и анализ кейсов. Исследование определяет GenUI как новую парадигму создания интерфейсов, где люди и AI сотрудничают на design-time для генерации интерфейсов, а пользователи взаимодействуют с AI-generated interfaces на runtime. Работа выделяет пять ключевых характеристик GenUI: co-creation, расширение design space, representational fluidity, contextual adaptation и generation-first.

dis-2025genuidefinition
от Lee K.-H. · 2025-05
Читать дальше
📄Papers

Generative and Malleable User Interfaces с Generative AI

CHI 2025 paper о применении AI для генерации "generative and malleable user interfaces" на основе задач пользователя. Авторы проектируют task-driven data model, где LLM разбирают prompts пользователя и генерируют UI specifications, а затем сопоставляют их с конкретными интерфейсами. Эксперименты показывают, что метод может динамически генерировать элементы интерфейса вроде forms и visualizations, помогая пользователям менять интерфейсы через natural language.

chi-2025malleable-uitask-driven
от Cao Y. et al. · 2025-03
Читать дальше
📄Papers

BISCUIT: временные UI как scaffold для LLM-generated code в computational notebooks

VL/HCC 2024 paper от исследователей Apple о BISCUIT: JupyterLab workflow, который вставляет временный UI-слой между намерением пользователя и LLM-generated code. Вместо прямого перехода от prompt к исходным файлам пользователи сначала работают с временными сгенерированными controls, которые помогают понять варианты, уточнить запросы и исследовать переменные до генерации кода.

notebooksephemeral-uiprogramming
от Cheng R. et al. · 2024-08
Читать дальше

Подборка ресурсов по Generative UI, GenUI и генеративным интерфейсам.

Сделано с ❤️ сообществом