Giới thiệu
Thông báo nghiên cứu tháng 8 năm 2026 của Runway giới thiệu Interface World Model tạo các khung hình giao diện theo thao tác nhấp, kéo và nhập liệu. Mô hình ngôn ngữ định hướng hành vi của cảnh, còn mô hình video đã được chưng cất hiển thị tương tác, khám phá GenUI trong thời gian chạy ngoài cách tạo mã hoặc ghép thành phần từ danh mục.
Tóm tắt
1. Hiển thị dựa trên thao tác: Đầu vào đã xảy ra của người dùng định hướng các khung hình tiếp theo; câu lệnh ngôn ngữ tự nhiên xác định hành vi tương tác
2. Kiến trúc thời gian thực: Kết hợp tạo khung hình tự hồi quy, chưng cất với ít bước và huấn luyện trên đầu ra của chính mô hình
3. Đánh giá được báo cáo: Runway so sánh khả năng tái tạo ảnh chụp màn hình và thu thập đánh giá tương tác theo cặp từ 250 người trên 30 ví dụ; đây là nghiên cứu do nhà cung cấp báo cáo, không chứng minh độ tin cậy cho nhiệm vụ nói chung
4. Giới hạn nghiên cứu: Văn bản ổn định, nội dung có căn cứ đã xác minh, tính nhất quán trong phiên dài, khả năng tiếp cận và tích hợp phần mềm vẫn chưa được giải quyết; trang chỉ nhận yêu cầu truy cập sớm