概要
ユーザーのタスクに応じてAIがmalleable user interfacesを生成する方法を提案したCHI 2025論文です。LLMがpromptからユーザー意図を解析し、UI specificationを生成して具体的なinterfaceへmappingするtask-driven data modelを設計しています。
要約
Task-driven UI generationの要点:
1. Malleableなinterface: ユーザーが自然言語で形を変えられるUIを扱う
2. Data model: LLMが意図を解釈し、UI specを生成するtask-driven architecture
3. 動的要素: form、visualization、interactive componentの生成をサポート
4. 自然言語での修正: 会話的な指示でinterfaceを反復的に改善できる
5. Specification mapping: 抽象UI specを実際のinterface実装へつなぐ
重要な示唆: ユーザー意図とinterface実現の間を、タスク中心のpromptingで橋渡しする
1. Malleableなinterface: ユーザーが自然言語で形を変えられるUIを扱う
2. Data model: LLMが意図を解釈し、UI specを生成するtask-driven architecture
3. 動的要素: form、visualization、interactive componentの生成をサポート
4. 自然言語での修正: 会話的な指示でinterfaceを反復的に改善できる
5. Specification mapping: 抽象UI specを実際のinterface実装へつなぐ
重要な示唆: ユーザー意図とinterface実現の間を、タスク中心のpromptingで橋渡しする
タグ
chi-2025malleable-uitask-drivenllm