소개
전문적인 디자인 실무에 맞는 피드백으로 LLM 기반 UI 생성기를 학습하는 연구 논문입니다. 저자들은 디자이너 21명의 순위 평가, 의견, 스케치, 직접 수정을 비교하고, 수집한 데이터로 실제 화면으로 렌더링되는 인터페이스를 생성하는 코드 모델을 개선합니다.
요약
1. 디자이너의 작업 방식에 맞는 피드백: 좋아요 표시나 쌍대 순위 평가에만 의존하지 않고 의견 작성, 스케치, 직접 수정을 평가합니다
2. 충실한 데이터셋: 경력 2년부터 30년 이상까지의 디자이너 21명에게서 약 1,500개의 주석을 수집합니다
3. 구체적인 상호작용의 중요성: 스케치와 수정 피드백이 의견이나 순위 평가보다 더 강한 학습 신호를 제공한다는 점을 확인합니다
4. 모델 수준의 근거: 피드백으로 보상 모델과 UI 코드 생성 모델을 학습한 뒤, 사람이 렌더링 결과를 평가합니다
5. 실용적인 GenUI 시사점: 생성된 인터페이스를 개선하려면 디자이너가 실제로 시각적 작업물을 검토하는 방식에 맞는 피드백 도구가 필요함을 보여줍니다