Figma Make의 시간 절감 효과 측정
Figma는 100명, 즉 product designer와 product manager 각 50명이 AI tool 사용 여부를 달리해 표준 social-post 과제를 수행하는 randomized controlled trial을 진행했습니다. 전체 누적 완료 시간은 20%, 보고된 task ease는 16%, perceived usability는 15% 개선됐습니다. Product manager는 23% 빨라지고 작업이 37% 쉬워졌다고 답해 Make 없는 designer와 거의 같아졌습니다. 다만 난이도별 효과는 달라 manager의 가장 어려운 과제에는 유의미한 개선이 없었습니다. Randomization, scripted moderation, 반복 pilot 재설계가 usage log로 제거하기 어려운 confounder를 통제했습니다.

