본문 바로가기
평생교육프로그램개발론

평생교육프로그램 평가모형과 사례

by 소금쟁이89 2024. 4. 22.

이번시간에는 평생교육프로그램 평가모형과 사례에 대해 알아보려고 합니다

 

평생교육프로그램 개념

프로그램 평가의 개념은 서비스의 필요성과 활용 가능성, 그리고 계획대로 제공되는지 여부와 부작용 여부 등을 결정하는 방법과 기능의 집합입니다. 프로그램 평가를 위해서는 반드시 준거가 필요하며, 효과성, 효율성, 적정성, 형평성, 대응성, 적절성 등이 포함됩니다.

 

평생교육프로그램 평가모형

타일러(Tyler)의 목표중심 평가 모형은 전통적 교육과정 개발 및 평가의 대표적인 모형으로, 네 가지 핵심 질문에 대한 답변을 통해 교육과정과 수업계획을 개발합니다. 이 모형은 평가의 결과가 다음 교육목표의 설정으로 이어지는 순환과정으로 구성됩니다.

 

스터플빔의 CIPP모형

 

스터플빔(Stufflebeam)의 CIPP모형은 1960년대 미국의 초·중등교육법의 실행과정에서 교육지원 사업을 평가하기 위해 개발되었습니다. 이 모형은 교육평가를 관련 의사결정자가 정확하게 판단할 수 있도록 정보를 제공하는 형태의 의사결정 모형입니다.

 

CIPP 평가 모형은 다음과 같은 과정으로 진행됩니다:

1. 상황 평가(context evaluation: C)

프로그램 목표 설정의 근거를 마련하기 위한 기본적인 평가 단계입니다. 이는 평가 계획을 수립하는 단계를 의미합니다.

2. 투입 평가(input evaluation: I)

프로그램을 통해 달성할 목표와 그를 위한 정보와 전략이 적절히 사용될 것인지를 평가하는 과정입니다. 이는 평가를 구조화하는 과정입니다.

3. 과정 평가(process evaluation: P)

프로그램을 운영하는 과정에서 특정 활동이 어느 시점에 어떤 방식으로 실행되고 자원이 어떻게 활용되는지를 평가하는 단계입니다. 이는 프로그램 실행을 평가하는 과정입니다.

4. 산출 평가(product evaluation: P)

프로그램 종료 단계나 실시 도중에 프로그램의 산출물과 결과를 측정하고 해석하는 평가를 수행하는 단계입니다. 이는 평가가 순환적으로 이루어지는 단계입니다.

 

커크패트릭 4단계 평가모형

커크패트릭(Kirkpatrick)의 4단계 평가 모형은 교육 프로그램의 성과분석을 위한 모형으로, 주로 교육 프로그램의 결과를 평가하는 데 사용됩니다. 이 모형은 반응평가, 학습평가, 행동평가, 결과평가로 구성되어 있습니다.

  • 평가 결과를 통해 조직이나 사업 단위의 재정 투입에 대한 합리적인 근거를 제시할 수 있습니다.
  • 학습자와 기관의 책임을 높일 수 있습니다.
  • 발견된 문제를 수정하고 개선함으로써 서비스의 품질을 향상할 수 있습니다.

그러나 이 모형의 비판점은 외부적인 행동 변화에 초점을 맞추어 내부적인 변화나 장기적인 의미 있는 변화 등을 간과할 수 있다는 점입니다. 최근에는 커크패트릭 모형을 수정한 새로운 버전이 소개되었습니다. 이 새로운 모형은 ROE(기대수익률) 개념을 추가하여 조직의 기대 결과를 구체적으로 제시함으로써 비즈니스 이해관계자에게 성공적인 교육 방향을 입증할 수 있도록 합니다.

 

평생교육프로그램 평가모형(필립스 ROI 5단계)

평생교육프로그램 평가 모형인 필립스의 ROI 5단계 평가 모형은 실제 적용 시 단계가 상당히 개괄적이어서 평가자마다 다양한 변형이 있을 수 있지만, 커크패트릭의 4단계 평가 모형을 보완하여 제시되었습니다. HR ROI 5단계 평가 모형의 주요 단계는 다음과 같습니다:

 

1. 평가 계획

교육 프로그램의 궁극적인 목표를 수립합니다.

세부적인 평가 계획을 자료의 금전적 가치와 ROI 분석 계획으로 나누어 세웁니다.

 

2. 자료수집

프로그램 진행 중에 1단계 학습자 반응과 2단계 학습 성취도 자료를 수집합니다.

 

3. 교육 프로그램의 효과 분리:

교육 프로그램이 기여한 경영 성과를 분리하기 위한 전략을 수립합니다.

 

4. 자료의 금전적 가치로의 전환

교육 프로그램의 결과로 창출된 경영 성과를 금전적 가치로 환산하여 이를 소모된 비용과 비교하여 ROI를 계산합니다.

 

5. 교육 프로그램의 비용 일람표 작성

비용 파악을 위해 비용 일람표를 작성하고 모든 비용이 포함되도록 보수적인 접근 방법을 사용합니다.

 

6.ROI 계산

프로그램 시행에 소요된 비용과 프로그램으로 창출된 이익을 구하여 계산합니다.

 

7. 무형의 이익 파악

환산 과정이 부정확하거나 지나치게 주관적인 경우, 적절한 설명과 함께 무형의 이익으로 나타냅니다.

 

8. 효과 분석 보고

HR 프로그램의 성과 결과를 문서로 정리하여 관련된 사람들에게 보고하는 다양한 형태의 보고서를 작성합니다.

 

평가사례분석

평가 사례로는 중장년 일자리 희망센터의 교육 프로그램 평가를 살펴볼 수 있습니다.

1. 기관 단위 평가

프로그램 개발과 훈련 관련 실적을 평가합니다. 프로그램 개발, 보급, 교육 훈련별로 계획과 실적을 작성합니다. 사업별 세부 실적 및 사업 추진 효과 등을 기록합니다.

2. 만족도 평가

중장년 일자리 희망센터 성과 평가에는 정성 평가 항목 중 고객 만족도가 포함됩니다. 고객 만족도 평가 항목에는 프로그램에 대한 전반적인 만족도, 생애 설계 준비에 대한 도움 정도, 프로그램 내용 전달 방법과 교육 시간 안배, 교육 장소 만족도, 교육 안내 및 진행에 대한 만족도 등이 포함됩니다. 이 항목들은 5점 척도의 양적 평가로 이루어지며, 주관식으로 프로그램 내용에서 가장 도움이 된 부분과 그 이유, 프로그램 참여 경험을 나타내는 점을 조사합니다.

 

내용을 정리해 보자면, 필립스의 ROI 5단계 평가 모형은 실제 적용 시 각 과정이 너무 일반적으로 정의되어 있어서 해석이 다양할 수 있지만, 이 모델은 교육 프로그램을 평가하는 방법으로, 커크패트릭의 4단계 모형을 보완하여 제시되었으며 이는 의미 있는 발전으로 간주됩니다. 교육투자효율(ROI)은 교육에 투자한 비용 대비 얻는 수익을 나타내는 지표로, 교육 투자로부터 얻은 이익과 비용 사이의 비율을 의미합니다.