델파이 분석: 전문가 집단지성을 활용한 미래예측 및 의사결정 기법 - 공공정책, 기업전략, 학술연구에의 활용_델파이분석 완전 정복 2편

"사례를 통한 델파이 분석 방법 완전정복"

 

"델파이(Delphi) 분석: 전문가 의견 수렴을 통한 미래 예측 기법"

 

델파이 분석은 전문가 의견을 체계적으로 수렴하는 방법으로, 정량적 분석을 통해 그 타당성을 검증합니다. 정략적 분석 방법은 내용타당도, 합의도, 수렴도, 안정도, 신뢰도가 있다.

 

1. 내용 타당도(CVR: Content Validity Ratio)

● 평가지표의 각 문항이 측정하려고 하는 내용을 얼마나 잘 대표하고 있는지를 CVR 계수로 판단하여 최종 평가항목 확정

● 델파이 조사 결과에서 전문가의 응답 비율이 50% 이상이어야 타당함

● 전문가가 타당하다고 응답한 비율이 50% 미만이면 CVR 값은 음수가 되고, 50%이면 CVR 값은 0, 100%이면 CVR 값은 1이 됨

 

 

2. 합의도(consensus)

● 전문가의 50%가 어느 구간에서 일정한 응답을 하였는지 나타내는 지표

● Q1과 Q3가 일치했을 때 1의 값을 갖고, 의견의 편차가 커질수록 Q1과 Q3가 점점 벌어져 그 수치가 감소

● 합의도는 1에 가까울수록 높아지고, 그 값이 0.75 이상일 때 전문가 의견이 합의점에 이르렀음을 판단

 

 

사분위수는 데이터를 오름차순으로 정렬했을 때 1/4번째, 3/4번째에 위치하는 값을 의미합니다. 1/4분위수는 25%에 해당하고 Q1, 3/4분위수는 75%에 해당하고 Q3로 표기하며, Q1에서 Q3사이의 범위를 사분위수 범위라고 합니다.

합의도 핵심은 사분위수 범위인데, Q3와 Q1의 값의 차이가 적을수록 분자가 작아지고, 중위수가 커질수록 분모가 커져 합의도가 높아집니다. 결국 합의도는 50%의 전문가가 어느 구간에서 비슷한 점수를 주었는지를 의미합니다.

 

3. 수렴도(convergence)

● 전문가의 의견이 어느 정도 수렴해가고 있는지 판단

● 0.5보다 작은 값을 가질 때 긍정적으로 전문가 집단의 의견이 수렴하고 있음을 판단

 

 

4. 안정도(ceofficient of variation)

● 평균을 표준편차로 나눈 변이계수(CV)로 산출되고 0.5보다 작을 경우 전문가 의견이 안정된 것으로 판단

● 안정도 값을 통해 다음 라운드 델파이 진행 혹은 종료 여부 결정

• 변이계수가 0.5 이하(추가적 설문 필요 없음), 0.5~0.8(안정적), 0.8 이상(추가 설문 필요)

 

5. 신뢰도(reliability)

● 델파이조사의 신뢰도는 일반화 가능도 계수로 추정하는데 크론바흐 알파 값과 동일

 

※ 예시를 이용한 델파이 분석 방법

“모바일 학습 어플리케이션에 적합한 기술적

 

 

■ 1차 델파이 조사

● 전문가 24명 선정

• 모바일 학습 및 e-러닝(14), 설문 기획(1), 데이터 분석(1), 소트프웨어 개발자(4), 정보시스템(4)

● 전문가의 의견을 바탕으로 품질 평가 지표와 항목 수정·보완(최종 21개 항목 도출)

 

 

전문가들은 각자의 분야에서 깊이 있는 지식과 경험이 있어, 연구 결과의 신뢰성과 타당성을 높이는 데 이바지하고, 다양한 시각과 전문 지식을 통합할 수 있습니다. 실제 모바일 학습 개발 프로젝트에 참여한 경험 혹은 지식이 있는 전문가들로 구성되어야만 조사 결과가 실제 적용할 수 있고 실용적인 지침을 제공할 수 있습니다.

 

■ 2차 델파이 조사

● 델파이 1라운드 결과로 2라운드는 모바일 학습 앱의 평가지표로 최종 21개 항목 도출

● 21개의 5점 리커트 척도의 폐쇄형 설문으로 전문가들에게 각 평가항목의 중요성 측정

● 1라운드의 전문가 24명 중 2라운드에 참여한 전문가는 22명 참여(91.7%)

 

● 2라운드 결과 21개 지표에서 변이계수 값에 따라 전문가 의견이 안정된 것으로 판단되어 다음 라운드는 불필요함(변이계수<0.5)

 

● 작업탐색 용이성과 과제 제출 기능 항목은 타당도 기준 미충족으로 삭제됨

• 작업 탐색 용이성: 내용타당도(0.22<0.37), 합의도(0.5<0.75), 수렴도(1>0.5)
• 과제 제출 기능 : 내용타당도(0.3<0.37), 합의도(0.33<0.75), 수렴도(1>0.5)

 

● 최종 6개의 평가지표와 19개의 평가항목을 완성됨

 

 

델파이 분석은 전문가들의 의견을 구조화된 방식으로 수집하고 합의에 도달하기 위한 방법론으로, 특히 불확실성이 크거나 명확한 데이터가 부족한 상황에서 유용하게 사용됩니다. 특히 의견 수렴과 종합이 중요한 여러 분야에서 그 가치가 두드러지고 다양한 전문가들의 지식을 결합해 통찰력 있는 결론을 도출하는 데 효과적입니다.

정부 및 공공 정책의 수립, 정책 효과 분석 등에 사용되고, 기업의 미래 전략 수립, 신제품 개발, 시장 예측 등에 유용하게 사용할 수 있습니다.

 

델파이기법은 공공기관·기업 만족도 보고서, 논문통계 등 다양한 분양에서 사용됩니다.

델파이분석 방법 및 사례를 퀵데이터 유튜브에서 동영상으로 확인해보세요▼▼▼

 

 

퀵데이터는 데이터 분석 전문기업입니다. 경험, 노하우, 전문성을 바탕으로 다양한 통계분석과 데이터 시각화 디자인을 제공하여보고서의 가치를 높여드립니다.

※ 다차원적 분석방법을 이용한 체계적 보고서작성

※ 효율적 의사결정을 위한 다양한 통계검증

​

차별화된 데이터 분석보고서 기획과 작성! 퀵데이터가 도와드립니다.1600-7473