Torna alla lista
📄Paper

Generative and Malleable User Interfaces with Generative AI

Cao Y. et al.
2025-03

Informazioni

Paper CHI 2025 che propone di usare l'AI per generare "generative and malleable user interfaces" basate sui task degli utenti. Gli autori progettano un data model task-driven in cui gli LLM interpretano i prompt utente e generano specifiche UI, poi le mappano su interfacce concrete. Gli esperimenti dimostrano che il metodo può generare dinamicamente elementi di interfaccia come form e visualizzazioni, supportando gli utenti nella modifica delle interfacce tramite linguaggio naturale.

Sintesi

Approccio di generazione UI task-driven:

1. Concetto centrale: Interfacce "malleable" che gli utenti possono rimodellare tramite linguaggio naturale
2. Data model: Architettura task-driven in cui gli LLM interpretano l'intento utente e generano specifiche UI
3. Elementi dinamici: Supporta la generazione di form, visualizzazioni e componenti interattivi
4. Modifica in linguaggio naturale: Gli utenti possono raffinare iterativamente le interfacce con comandi conversazionali
5. Mapping delle specifiche: Le specifiche UI astratte vengono mappate su implementazioni concrete dell'interfaccia

Innovazione chiave: Colma il gap tra intento utente e realizzazione dell'interfaccia tramite prompting task-centric

Tag

chi-2025malleable-uitask-drivenllm

Articoli correlati

📄Paper

TaskLens: Generating Task-Conditioned Scaffolded Interfaces for Learning Professional Creative Software

Paper DIS 2026 / arXiv che introduce TaskLens, un metodo basato su LLM per generare UI scaffolded condizionate dal task in strumenti creativi complessi. Il sistema identifica fasi del workflow e concetti di dominio, seleziona gli strumenti rilevanti, genera codice di implementazione e produce interfacce che svelano progressivamente funzioni avanzate in software come Blender.

scaffolded-uicreative-softwaregenui
di Liu Y. et al. · 2026-06
Leggi di più
📄Paper

Macaron-A2UI: A Model for Generative UI in Personal Agents

Paper arXiv 2026 focalizzato sulla Generative UI a runtime per personal agent. Gli autori sostengono che la sola chat diventa un collo di bottiglia nei task agentici complessi, introducono un corpus Generative UI su larga scala insieme ad A2UI-Bench e addestrano modelli che generano linguaggio naturale insieme ad azioni UI leggere ed eseguibili per conferma, raffinamento delle preferenze e coordinamento multi-obiettivo.

agentsa2uibenchmark
di Kong F. et al. · 2026-05
Leggi di più
📄Paper

Efficient Personalization of Generative User Interfaces

Paper arXiv recente su uno dei problemi GenUI centrali ancora aperti: la personalizzazione. Gli autori raccolgono giudizi pairwise da designer formati sulle stesse 600 UI generate, mostrano che le preferenze di design divergono in modo significativo e propongono un modello di preferenze sample-efficient che personalizza le interfacce generate meglio di valutatori baseline e prompting diretto.

personalizationgenuiarxiv
di Peng Y.-H. et al. · 2026-04
Leggi di più

Una raccolta curata di risorse Generative UI, GenUI e interfacce AI dinamiche.

Creato con ❤️ dalla community