Quay lại danh sách
📄Nghiên cứu

LEGOUI: Designing with UI-DSL Bricks for Transparent, Controllable Generation

Zhou Y. et al.
2026-08

Giới thiệu

Bài báo HCI vào tháng 8 năm 2026 giới thiệu một framework Generative UI theo từng giai đoạn để phát triển ý tưởng thiết kế ban đầu. LEGOUI ghi lại các quyết định rút ra từ yêu cầu đầu vào và do mô hình suy ra trong một DSL cho UI có theo dõi nguồn gốc, cho phép người dùng chấp nhận, từ chối hoặc bổ sung quyết định qua các giai đoạn bố cục, tương tác, quan hệ và phong cách, rồi kết xuất từ đặc tả đang được hoàn thiện.

Tóm tắt

Điểm mới đáng chú ý của LEGOUI:

1. Trạng thái trung gian có thể kiểm tra: Làm rõ các giả định thiết kế trước khi chúng được đưa vào giao diện được tạo
2. Kiểm soát ở cấp độ quyết định: Cho phép người dùng chấp nhận, từ chối hoặc bổ sung các mục UI-DSL thay vì liên tục viết lại toàn bộ yêu cầu đầu vào
3. Lưu giữ nguồn gốc lâu dài: Theo dõi từng quyết định bắt nguồn từ yêu cầu đầu vào, suy luận của mô hình hay chỉnh sửa của người dùng
4. Luồng làm việc được bằng chứng hỗ trợ: Đánh giá việc trích xuất yêu cầu trên 40 yêu cầu đầu vào thực tế và so sánh hệ thống với các công cụ tạo một lần trong một nghiên cứu có 15 người tham gia
5. Sự đánh đổi rõ ràng: Báo cáo tính minh bạch, khả năng kiểm soát và mức độ phù hợp với ý định cao hơn, đồng thời thừa nhận chi phí bổ sung để kiểm tra các quyết định theo từng giai đoạn

Thẻ

genuiui-dsldesign-timehuman-in-the-loopprovenance

Bài viết liên quan

📄Nghiên cứu

ControlAnything: Generative UI và kết nối thiết bị theo yêu cầu trong thực tế hỗn hợp

Bản preprint tháng 11 năm 2026 tạo cả thành phần điều khiển trong không gian lẫn mã kết nối thiết bị vật lý khi người đeo Quest 3 đưa ra yêu cầu. AI agent lập trình kiểm tra kết nối qua các kênh MIDI, Bluetooth và thao tác phím được viết sẵn, rồi trả về thành phần điều khiển AR, chương trình tương tác bàn tay chạy theo từng khung hình, hoặc cả hai.

generative-uimixed-realitydevice-integration
bởi Bektur Ryskeldiev · 2026-11-05
Đọc thêm
📄Nghiên cứu

Interface Quilt: Modifying Applications with Computer Use Agents and Generative UI

Bản preprint vào tháng 11 năm 2026 của Autodesk Research kết hợp AI agent sử dụng máy tính với GenUI để tạo các bản vá giao diện tồn tại lâu dài trên ứng dụng hiện có. Hệ thống nhận diện lại các thành phần điều khiển từ pixel đã kết xuất, tạo các bề mặt tương tác mới và đồng bộ chúng với ứng dụng bên dưới mà không cần mã nguồn, API hay dữ liệu hỗ trợ tiếp cận.

generative-uicomputer-use-agentsinterface-patches
bởi Qiu L. et al. · 2026-11-01
Đọc thêm
📄Nghiên cứu

ABRA: Agent-Bound UI for Human-Agent Communication beyond Chat with Reusable Views

Bản trình diễn hệ thống tại EMNLP vào tháng 10 năm 2026, tách các chế độ xem đồ thị, bảng, văn bản và nội dung hiển thị có thể tái sử dụng khỏi ý nghĩa tương tác dành riêng cho từng tác vụ. ABRA công bố các liên kết này dưới dạng trạng thái canvas dùng chung để người dùng và các AI agent khác có thể kiểm tra và gọi những hành động dành riêng cho tác vụ.

generative-uishared-canvasesinteraction-semantics
bởi Kim S. G. and Kim H. · 2026-10-22
Đọc thêm

Tổng hợp tài nguyên chọn lọc về Generative UI và Intelligent UI.

Được xây dựng với ❤️ bởi cộng đồng