피드백과 목표가 크라우드소싱 결과물의 질에 미치는 영향

학위논문 (석사)-- 서울대학교 대학원 : 언론정보학과, 2015. 8. 이준환.본 연구는 크라우드소싱 작업에서 커뮤니케이션을 통해 작업 결과물의 질을 높이는 방안을 탐구한다. 이전의 연구들은 보수의 양을 늘리거나 지급 방식을 달리하는 등 작업 결과물에만 초점을 맞추었다. 하지만 본 연구는 작업 자체보다는 작업자에 대해 관심을 갖고, 작업자와의 커뮤니케이션에 주목하였다. 선행연구를 통해 작업 관련 커뮤니케이션은 피드백과 목표로 나뉘며, 피드백은 긍정적, 부정적, 서술적 및 평가적 피드백으로 나뉘었다. 아울러 목표는 단계목표와 최종목표를 함께 주는 경우와 최종목표만 제시하는 경우, 표적형 목표와 성취형 목표 등으로 구분했다. 그리고 피드백과 목표의 효과에 대한 선행연구에 근거하여 가설을 설정하였다. 본 실험에 앞서 작업자와의 커뮤니케이션이 갖는 영향력을 알아보기 위해 예비연구를 실시했는데, 제3자가 결과물을 검토할 것이라는 가능성을 언급한 것 만으로도 작업자들은 작업에 더 많은 시간을 할애하였다. 그러나 작업의 질은 큰 차이가 없어 커뮤니케이션이 보다 구체적일 필요가 있었다. 이에 기반하여 본실험은 제시문의 길이를 줄이는 작업을 실험내용으로 하고, 4개의 피드백과 4개의 목표 등 8개의 보다 구체적인 커뮤니케이션을 작업자에게 제공하였다. 또한 보수의 양의 영향력과 커뮤니케이션의 영향력을 비교하기 위하여 두 가지 보수조건에서 실험을 진행했다. 이때 결과물의 질은 작업 결과물의 작업길이와 시간, 비용 등 3가지로 측정했다. 실험 결과 부정적 피드백을 제시했을 때 긍정적 피드백 조건과 같은 시간 및 비용을 들이고도 작업의 목적에 더 부합하는 결과물이 도출되어, 부정적 피드백이 결과물의 질적 향상에 효과적이었다. 또한 평가적 피드백이 서술적 피드백보다 작업길이 및 비용을 상대적으로 큰 폭으로 줄이고 있어, 평가적 피드백이 보다 효과적인 방식임을 알 수 있었다. 또 단계목표와 최종목표를 함께 제공하여 목표를 세부적으로 제시했을 때 결과물의 질은 최종목표만 제시되었을 때보다 향상되었다. 마지막으로 작업의 이유를 알려주는 성취형 목표가 체크리스트만 제공하는 표적형 목표보다 결과물의 질적 향상에 도움을 주었다. 위와 같은 연구결과에서 부정적 피드백, 평가적 피드백, 단계목표와 최종목표, 성취형 목표가 보다 효과적인 커뮤니케이션 방식임을 알 수 있었다. 그러나 보수의 양은 결과물의 질적 향상에 뚜렷한 영향력을 보이지 않고 커뮤니케이션 방식에 따른 차이가 더 뚜렷하여, 양질의 결과물을 도출하는데에는 커뮤니케이션이 더 효과적임을 알 수 있었다.목 차 1. 서론 1 2. 선행연구 검토 6 2.1 기존 크라우드소싱 품질관리 연구 6 2.2 작업흐름 디자인을 통한 크라우드소싱 품질관리 연구 11 2.3 사회심리학의 반사실적 사고와 행동 연구 14 2.4 피드백의 특성 및 효과 연구 16 2.5 목표의 특성 및 효과 연구 21 3. 예비연구 27 3.1 실험목적 27 3.2 실험내용 30 3.3 실험절차 32 3.4 연구가설 33 3.5 실험결과 34 4. 연구문제 및 가설 36 5. 연구방법 42 5.1 참여자 모집 42 5.2 실험내용 43 5.3 실험절차 45 5.4 실험처치 50 5.5 측정 53 6. 연구결과 55 6.1 데이터 클리닝 55 6.2 기술통계 58 6.3 세부 연구결과 61 6.3.1 커뮤니케이션과 보수의 양의 영향력 비교 61 6.3.2 긍정적 피드백과 부정적 피드백의 효과 비교 65 6.3.3 서술적 피드백과 평가적 피드백의 효과 비교 73 6.3.4 단계목표+최종목표와 최종목표의 효과 비교 83 6.3.5 표적형 목표와 성취형 목표의 효과 비교 92 6.4 연구결과 요약 101 7. 논의 및 시사점 102 8. 결론 110 9. 참 고 문 헌 111 ABSTRACT 119 표 목차 표 1. 피드백의 유형 19 표 2. 목표의 유형 27 표 3. 예비연구 실험 조건 28 표 4. 피드백 조건별 제공 메시지 51 표 5. 목표 조건별 제공 메시지 52 표 6. 키워드 리스트 56 표 7. 조건별 참여자 수 58 표 8. $0.15 조건의 기술통계 58 표 9.$0.3 조건의 기술통계 59 표 10. 통합 품질 기술통계 63 표 11. 이원분산분석 결과표_ 커뮤니케이션 x 보수 63 표 12. 회귀분석 결과 64 그림 목차 그림 1. 어려운 작업 x 검토 조건의 작업 지시 화면 31 그림 2. 쉬운 작업 x 비검토 조건의 작업 지시 화면 31 그림 3. 분류작업 사진 32 그림 4. 예비연구_그룹별 작업시간 비교 35 그림 5. 예비연구_그룹별 작업 정확도 비교 35 그림 6. 작업 가이드라인 46 그림 7. 목표 조건에서의 사전 목표 화면 47 그림 8. 텍스트 단축 작업 화면 47 그림 9. 커뮤니케이션 메시지 예시_표적형 목표 48 그림 10. 긍정적 피드백과 부정적 피드백의 단계별 종속변인 66 그림 11. 긍정적 피드백 vs. 부정적 피드백_종속변인 변화폭($0.15) 70 그림 12. 긍정적 피드백 vs. 부정적 피드백_종속변인 변화폭($0.3) 70 그림 13. 긍정적 피드백_보수조건별 종속변인 변화폭 71 그림 14. 부정적 피드백_보수조건별 종속변인 변화폭 71 그림 15. 서술적 피드백과 평가적 피드백의 단계별 종속변인 74 그림 16. 서술적 피드백 vs. 평가적 피드백_종속변인 변화폭($0.15) 77 그림 17. 서술적 피드백 vs. 평가적 피드백_종속변인 변화폭($0.3) 77 그림 18. 서술적 피드백_ 보수조건별 종속변인 변화폭 80 그림 19. 평가적 피드백_ 보수조건별 종속변인 변화폭 81 그림 20. 단계목표+최종목표와 최종목표의 단계별 종속변인 84 그림 21. 단계목표+최종목표 vs. 최종목표_종속변인 변화폭($0.15) 87 그림 22. 단계목표+최종목표 vs. 최종목표_종속변인 변화폭($0.3) 87 그림 23. 단계목표+최종목표_ 보수조건별 종속변인 변화폭 89 그림 24. 최종목표_ 보수조건별 종속변인 변화폭 90 그림 25. 표적형 목표와 성취형 목표의 단계별 종속변인 93 그림 26. 표적형 목표 vs. 성취형 목표_ 종속변인 변화폭($0.15) 96 그림 27. 표적형 목표 vs. 성취형 목표_ 종속변인 변화폭($0.3) 97 그림 28. 표적형 목표_ 보수조건별 종속변인 변화폭 98 그림 29. 성취형 목표_ 보수조건별 종속변인 변화폭 99Maste