Impacto. 2018. Vf.
Impacto. 2018. Vf.
Impacto. 2018. Vf.
Evaluación de Impacto
Procesos de Capacitación 2018
SUBDIRECCIÓN TÉCNICA
DIRECCIÓN DE ESTUDIOS
ÍNDICE DE FIGURAS
ÍNDICE DE CUADROS
1
1. INTRODUCCIÓN
Una metodología de este tipo debe otorgar un conjunto de conceptos clave, orientaciones
prácticas y directrices para la aplicación de la evaluación de impacto del proceso
formativo. Con este fin, se plantea una serie de herramientas para la recolección de
información y análisis de los datos obtenidos a través de indicadores.
2. OBJETIVOS
2
3. MARCO CONCEPTUAL
El impacto está compuesto por los efectos a mediano y largo plazo que tiene un proyecto
o programa en una población objetivo y su entorno, sean estos efectos deseados
(planificados) o no deseados (Bello, 2009: 4).
4
Diseño semi-experimental. - Este tipo de diseño, también llamado cuasi-
experimental, se basa en la conformación de dos grupos, el de participantes y el de
control, pero no excluye a estos últimos de la participación en el programa. En este
enfoque las personas que integran el grupo de participantes han ingresado al programa
por su voluntad y no como resultado de un sorteo aleatorio. Se trata de que las
personas que van a conformar el grupo de control sean lo más parecidos posible a
aquellos que constituyen el grupo de participantes. Es decir, que para conformar
dichos grupos de comparación se trabaja a partir de las variables centrales o las que
se cree pueden provocar o influir en los resultados.
Métodos cualitativos. –
5
Nivel de Evaluación ¿Qué se evalúa? ¿Cómo se obtiene la información?
Busca conocer el impacto de la capacitación en lo Generalmente se utiliza cuestionarios que
1. Empleabilidad que respecta a acceso a empleo y desarrollo de responden los beneficiarios al finalizar el
emprendimientos. proceso formativo.
Busca evaluar hasta qué punto los conocimientos
obtenidos en la capacitación están siendo Generalmente se utiliza cuestionarios que
aplicados en los entornos de trabajo. responden los beneficiarios y sus
2. Aprendizaje1
supervisores al finalizar el proceso
Analiza el nivel de aprobación y deserción de los formativo.
procesos de capacitación.
Busca evaluar cómo el proceso de capacitación Generalmente se utiliza cuestionarios que
3. Rendimiento contribuye a mejorar el rendimiento en el lugar de responden los beneficiarios después del
trabajo. proceso formativo.
Cuadro 1: Niveles para evaluar el impacto de las acciones de capacitación
Elaboración: Dirección de Estudios, SECAP, 2019.
¿Qué es un indicador?
En síntesis, los indicadores deben tener las siguientes características según la regla
“SMART”:
1
En lo que respecta al nivel Aprendizaje, la presente metodología se centra únicamente en aspectos
referentes al proceso de capacitación.
6
Responsable: El que genera el indicador.
Fuente: De dónde se obtiene la información de las variables contenidas en el
indicador.
Según la guía de la OIT/Cinterfor (Billorou et al., 2011: 39-41), existen los siguientes
tipos de indicadores:
Los indicadores que serán considerados en el presente trabajo serán los de efecto e
impacto.
NpqZ 2
n
e 2 ( N 1) Z 2
pq
7
En donde:
n = Tamaño de la Muestra
N= Población
Z = Grado de Confianza
p = Probabilidad de Éxito
q = Probabilidad de Fracaso
e = Error muestral
Gestión de Gestión de
Gestión de Gestión de cálculo
condensación de seguimiento,
ingreso de datos sistematizado
información e control y
periódico automático
informe correctivos
8
Los componentes de la matriz de seguimiento de indicadores son los siguientes:
• Cada uno de los • Nombre con el cual se • De Gestión, resultado, • Se cita de donde se
niveles de evaluación identifica al indicador efecto o impacto. obtuvo el indicador
identificados. a ser medido. para medir su
comparabilidad.
9
excluye a estos últimos de la participación en el programa. En este enfoque las personas
que integran el grupo de control de participantes han ingresado al programa por su
voluntad y no como resultado de un sorteo aleatorio (participantes que desertaron o
reprobaron los programas). Se trata de que las personas que van a conformar el grupo de
control sean lo más parecidos posible a aquellos que constituyen el grupo de participantes.
Cuadro 2: Niveles para evaluar el impacto de las acciones de capacitación del SECAP
Elaboración: Dirección de Estudios, SECAP, 2019.
Los indicadores e instrumentos están orientados a medir los tres niveles de evaluación de
impacto definidos anteriormente y están dirigidos al sector empresarial y a las personas.
La evaluación de impacto considera los siguientes elementos de evaluación:
Empleabilidad
Aprendizaje
Rendimiento
Para cada nivel se debe desarrollar un grupo de indicadores dinámicos, fáciles de evaluar,
comparar y medir. A continuación, se detallan los indicadores:
10
a. Empleabilidad
Fórmula: ú ℎ
× 100
ú í
ú
Fórmula: × 100
ú
ú
Fórmula: × 100
ú ó
ú ℎ
Fórmula: × 100
ú
b. Aprendizaje
ú ñ
Fórmula: × 100
ú ñ
ú ó ñ
Fórmula: × 100
ú ñ
11
Indicador b3.- Tasa de participantes que recibieron certificados de aprobación
Tipo de indicador: Efecto
ú ñ
Fórmula: × 100
ú ñ
ú í
Fórmula: × 100
ú
ú í
Fórmula: × 100
ú
ú ñ
Fórmula: − 1 × 100
ú ñ −1
c. Rendimiento
ú ℎ
Fórmula: × 100
ú
ú ℎ é ó
Fórmula: × 100
ú
12
Indicador c2.- Nivel de solución de problemas
Tipo de indicador: Impacto
ú ó ó
Fórmula: × 100
ú
ú á é ó
Fórmula: × 100
ú
Dirigido a: Participantes que hayan terminado un curso o módulo de capacitación en el SECAP
Fórmula: ú ú ó
× 100
ú
Las preguntas del cuestionario se diseñan sobre la base de las necesidades de información.
El tipo de preguntas empleadas deben ser:
13
Formulario Tipo de Instrumento/dirigido a
Encuesta para participantes capacitación en el SECAP en el período
A
(n) y terminaron el curso.
Encuesta a jefes inmediatos superiores de empresas e instituciones
B
públicas cuyo personal ha recibido capacitación en el SECAP.
C Encuesta dirigida a personas que forman parte del grupo de control.
Cuadro 3: Formularios de recolección de información por tipo de informante
Elaboración: Dirección de Estudios, SECAP, 2019.
NpqZ 2
n
e 2 ( N 1) Z 2
pq
En donde:
n = Tamaño de la Muestra
N= Población
Nivel de confianza = 95%
Z = Valor crítico Z = 1,96
p = Probabilidad de Éxito = 0,50
q = Probabilidad de Fracaso = 0,50
e = Error muestral = 7%
2018
Formulario
Población Muestra
A 26.808 195
B 86 60
C 2.422 181
Cuadro 4: Matriz de muestras según tipo de informante por año
Elaboración: Dirección de Estudios, SECAP, 2019.
Las muestras debidamente estratificadas por zona constan como anexo a este documento 2.
5. BIBLIOGRAFÍA
2
La sumatoria de los valores muestrales a nivel de zona para cada grupo puede diferir en una unidad con
el valor total de la muestra por motivo del redondeo de las cifras decimales.
14
Bello, R. (2009). Evaluación de Impacto [diapositivas de PowerPoint]. Recuperado de:
https://www.cepal.org/ilpes/noticias/paginas/9/37779/impacto_rbbcproy.pdf
15
6. ANEXOS
6.1. Formularios
16
Formulario B.- Dirigida a jefes de empresas/instituciones que recibieron
capacitación del SECAP
17
Sección Nº Pregunta Valores
Precio de los
cursos, horarios,
modalidades,
Datos sobre capacitación p21 ¿Cuáles fueron estas limitaciones?
instalaciones,
reprogramaciones,
Otro
Precio de los
cursos, Ubicación
¿Qué factores consideró relevantes al momento de optar por un curso de las instalaciones,
Datos sobre capacitación p22
del SECAP? Oferta académica,
Prestigio
institucional, Otro
Datos sobre capacitación p23 ¿Contrataría otro curso del SECAP? si, no
Datos sobre capacitación p24 ¿Qué tema le interesaría?
6.2. Muestras
18
Zona Universo Muestra
7 2.346 17
8 1.601 12
9 707 5
Total 26.808 195
n = 195
n = 60
19