4
PRESENTACIÓN
La evaluación del proyecto de
Unidad
didáctica
intervención social
Contenidos
● Aproximación al concepto de evaluación.
● Metodología evaluadora.
● La evaluación en las diferentes fases del
proyecto.
● El informe final.
● Aspectos éticos de la evaluación.
● Evaluación y perspectiva de género.
● Gestión de la calidad. 1
Una aproximación al concepto de evaluación
La evaluación integra todos aquellos procedimientos destinados a valorar, en
qué medida, las decisiones que se han tomado y las actuaciones que se llevan o
se han llevado a cabo, están en sintonía con las intenciones previstas en el
diseño del proyecto.
● Sus resultados ayudan a tomar decisiones que afectan:
● Al desarrollo del proyecto.
● A posibles intervenciones futuras.
● A través de ella podremos comprobar distintos aspectos.
2
Una aproximación al concepto de evaluación
Características de la evaluación
Características intrínsecas del proceso evaluador
● Objetividad.
● Validez.
● Fiabilidad.
La validez y la fiabilidad están vinculadas a:
● Oportunidad.
● Un uso adecuado de los instrumentos de
● Practicidad. evaluación.
● La aplicación de una metodología correcta. La
practicidad, al manejo de la información.
3
Una aproximación al concepto de evaluación
Características de la evaluación
Características de la evaluación en proyectos sociales
● Debe existir coherencia entre la metodología y las
orientaciones de evaluación previstas en el diseño.
● Los proyectos de intervención social suelen priorizar una
evaluación:
● Continua.
● Sistemática.
● Flexible.
● Participativa.
4
Una aproximación al concepto de evaluación
Tipos de evaluación
● Según el sujeto que realiza la evaluación:
● Autoevaluación.
● Evaluación interna.
● Evaluación externa.
● Evaluación mixta.
● Evaluación de las personas usuarias.
● Según el momento de la evaluación:
● Evaluación inicial.
● Evaluación formativa o de proceso.
5
● Evaluación final, de resultado o sumativa.
Una aproximación al concepto de evaluación
Tipos de evaluación
● Según la función que persigue:
● Evaluación para el diagnóstico.
● Evaluación para la predicción.
● Evaluación para la orientación.
● Evaluación para el control.
● Según la extensión de la evaluación:
● Evaluación parcial.
● Evaluación global.
6
Una aproximación al concepto de evaluación
Tipos de evaluación
● Según la continuidad de la evaluación:
● Evaluación longitudinal.
● Evaluación puntual o transversal.
● Según el tipo de información que se genera:
● Evaluación cuantitativa. En estos dos grupos de
● Evaluación cualitativa. evaluaciones se
complementarán las dos
estrategias que los componen.
7
Metodología evaluadora
La metodología evaluadora incluye el conjunto de procedimientos
que definen cómo se va a recoger y analizar la información.
● Debe ser congruente con la función de la evaluación.
● Está vinculada directamente:
● A las técnicas de recogida de información.
● Al análisis de la información obtenida.
● A su interpretación.
8
Metodología evaluadora
Técnicas e instrumentos de evaluación
● Los más utilizados son:
● La documentación interna. Incluye todos los documentos generados durante
la intervención.
● Los cuestionarios sobre la consecución de la actividad, el grado de satisfacción
o el cumplimiento de las expectativas.
● Las entrevistas individuales o en grupo, en la fase inicial o en el transcurso de la
intervención.
● La observación en la realización de la evaluación de proceso.
9
Metodología evaluadora
La elaboración de instrumentos de evaluación
● Permite convertir las intenciones de los objetivos en indicadores para recoger
información medible de la realidad.
Los indicadores de evaluación son unos puntos de referencia o frases que
permiten valorar, delimitar, fijar o medir las dimensiones de aquello que se pretende
evaluar.
● Son los enunciados que permiten medir el grado de aproximación a un
objetivo.
● Deben ser lo más objetivamente verificables y mensurables posible.
● Los instrumentos pueden prepararse en formato impreso, pero es
más eficiente disponer de soportes digitales.
10
Metodología evaluadora
La aplicación de la técnica
Los recursos: quién, cuándo, dónde y con qué
● Cuestiones relacionadas con los recursos humanos, temporales y espaciales que
se deberán definir en la planificación del proceso evaluador:
● El quién o los recursos humanos necesarios.
● El cuándo o los momentos en que se tiene que llevar a cabo.
● El dónde o los espacios en los que se va a desarrollar.
● El con qué o los recursos materiales.
11
Metodología evaluadora La aplicación de la técnica
Opciones metodológicas: el cómo
● Según el tipo de evaluación y los objetivos que se persigan, se
seleccionará la
estrategia más adecuada:
● Con un criterio prefijado muy general. Suele utilizarse con
finalidad exploratoria.
● Con un plan establecido, pero abierto. Supone un cierto nivel
de planificación, pero con un alto grado de libertad para la persona
evaluadora.
● Con un plan establecido y estructurado. Es una estrategia
totalmente definida.
12
Metodología evaluadora
Procedimientos de análisis e interpretación
● Los datos recogidos se deben procesar, analizar e interpretar.
● Según el número de datos que se tenga que procesar y los objetivos
de la evaluación, el análisis será más o menos complejo.
● Todos los programas informáticos permiten el almacenamiento de la
información generada.
● El proceso finalizará con la interpretación de los resultados y la
elaboración de las conclusiones, base para la toma de decisiones.
13
La evaluación en las diferentes fases del
proyecto
● Evaluación del diagnóstico.
● Evaluación del diseño de la intervención.
● Evaluación de la ejecución del proyecto.
● Evaluación de los resultados.
Una evaluación integral
efectiva consiste en
organizarla a partir de las
diferentes fases que
14
componen el proyecto.
La evaluación en las diferentes fases del proyecto
La evaluación del diagnóstico
La evaluación del diagnóstico tiene como objetivo asegurarse de que la valoración
diagnóstica se ha realizado correctamente, que las conclusiones formuladas
responden a las necesidades existentes y que se cumple con los requisitos de
fiabilidad y validez.
● Se trata de una evaluación preventiva, para evitar que los defectos en
las conclusiones invaliden todo el proceso posterior.
● En este proceso deben plantearse algunas preguntas.
● Debe realizarse antes de iniciar el diseño del proyecto.
15
La evaluación en las diferentes fases del proyecto
La evaluación del diseño
La evaluación del diseño de la
programación engloba toda una serie de
actuaciones dirigidas a valorar la idoneidad y la
eficacia de la planificación establecida.
● Momentos de la evaluación del diseño:
● Una vez finalizada la planificación:
evaluación de tipo preventivo.
● En la evaluación del resultado, terminada la
intervención: evaluación de control.
16
La evaluación en las diferentes fases del proyecto
La evaluación del diseño
● Metodología de la evaluación del diseño:
● Para cada elemento se pueden plantear algunas cuestiones y darles respuesta:
■ Los objetivos: ¿son coherentes con la realidad analizada?, etc.
■ Las estrategias metodológicas: ¿son las más adecuadas para los
objetivos?, etc.
■ Las actividades o actuaciones: ¿son las más indicadas para los
objetivos?, etc.
■ Los recursos económicos, humanos y materiales: ¿los espacios son
suficientes?, etc.
■ La temporalización: ¿las actividades están temporalizadas
correctamente?, etc.
■ Los criterios de evaluación: ¿están en sintonía con los objetivos?, etc.
● Si la respuesta no es afirmativa, deberemos analizar el motivo y realizar
17
las modificaciones, ajustes o propuestas pertinentes.
La evaluación en las diferentes fases del proyecto
La evaluación del proceso
La evaluación del proceso es la evaluación continua, que se realiza durante la
aplicación de las actividades, para comprobar si la intervención se va desarrollando de
la manera prevista.
● Se trata de una evaluación de seguimiento o control de la intervención.
● Nos fijaremos en elementos muy similares a los de la evaluación del diseño,
pero desde la aplicación y comprobación.
● Es necesario sistematizar algunas pautas de observación para que ningún
elemento importante quede desatendido.
● Genera un feedback continuo que facilita la toma de decisiones, ya sea
inmediata o aplazada.
18
La evaluación en las diferentes fases del proyecto
La evaluación de los resultados
La evaluación final se realiza una vez acabado el proceso y tiene como objeto
valorar si los resultados del proyecto de intervención responden a los objetivos
planteados.
● Para llevarla a cabo:
● Se compilarán las informaciones de la evaluación del proceso.
● Se añadirán mediciones específicas de los resultados.
● Para evaluar la eficacia de la intervención se podrán comparar los
resultados de la evaluación final con los objetivos planteados.
● Tiene un componente de globalidad.
● Se cierra con el informe de evaluación.
19
El informe de evaluación
El informe de evaluación es el documento que recoge la valoración del proceso de
intervención y de los resultados obtenidos.
● Su elaboración persigue dos objetivos fundamentales:
● Analizar y sistematizar el nivel de cumplimiento de los objetivos.
● Comunicar o difundir los resultados a las instancias interesadas.
● En él no debe faltar una valoración global y concluyente sobre el
alcance del éxito del proyecto.
20
El informe de evaluación
Contenido del informe
21
El informe de evaluación
Partes del informe
● Portada. Incluye los datos formales del proyecto.
● Resumen del contenido (parte introductoria).
● Información del proyecto. Refleja los aspectos programáticos del proyecto.
● Estudio valorativo. Establece el diseño de la evaluación.
● Resultados, plasmados ordenadamente.
● Discusión. Analiza datos y aspectos varios.
● Conclusiones. Sintetizan las interpretaciones definitivas sobre los resultados.
● Recomendaciones. Suelen ser propuestas de modificaciones en el diseño
de las actividades o en el proyecto. 22
El informe de evaluación
Comunicación de los resultados
● La elaboración y redacción de los informes deben tener unas características
que faciliten la inteligibilidad y la difusión de la información.
● Los resultados del proyecto se pueden comunicar:
● Entregando el informe a las personas y entidades interesadas.
● Por vía telemática.
● Mediante una presentación presencial.
23
Aspectos éticos de la evaluación
● Los principios éticos de la evaluación son los de la ética profesional en
investigación social.
● El dilema básico es en qué medida el valor de la investigación social y sus
beneficios para la sociedad deben prevalecer sobre los derechos e
intereses de las personas evaluadas.
● Ernest R. House apunta cuatro dilemas éticos relacionados con el
derecho a la información, al bienestar, a la intimidad y a la dignidad.
La evaluación deben incorporar una
actitud ética por parte de las y los
profesionales y las entidades
24
implicadas.
Aspectos éticos de la evaluación
● Según Allan J. Kimmel:
● El principio de la investigación social es el de la actuación ética, sin
poner en peligro la validez del estudio.
● La relación entre el equipo investigador y las personas
participantes es asimétrica.
● Superar los problemas éticos de esta relación pasa por desarrollar estilos
democráticos y una participación más activa de las personas usuarias
en el proceso evaluador.
25
Evaluación y perspectiva de género
Los indicadores de género nos permiten valorar el alcance de la aplicación del
enfoque de género y el impacto que este ha tenido en el proceso hacia una mayor
igualdad entre mujeres y hombres.
● Todas las intervenciones relacionadas con la perspectiva
de género se evaluarán a través de los indicadores de
género.
● Estos indicadores se deberán incorporar a
las pautas de evaluación en cualquier
proceso evaluado.
26
Evaluación y perspectiva de género
Evaluar la aplicación del enfoque de género
● Consiste en incorporar indicadores de género (IG) en el diagnóstico, el diseño
o la ejecución del proyecto:
● Respecto al análisis de las necesidades y la elaboración del
diagnóstico, los IG pueden informar sobre ciertos aspectos.
● Algunos IG pueden incorporarse en la evaluación del diseño del proyecto
para referirse a cuestiones como si la metodología asegura la participación
de las mujeres.
● En la evaluación de la implementación de actividades, también se
pueden considerar IG específicos.
27
Evaluación y perspectiva de género
Evaluar el impacto
● Conviene revisar la relación entre mujeres y hombres antes,
durante y después de la intervención para valorar el avance hacia la
igualdad de género.
● Los indicadores de género:
● Nos ayudarán a reconocer el alcance de esta transformación.
● Nos proporcionan información sobre aspectos relacionados con
esta cuestión.
● La evaluación del impacto nos ayudará a estimar en qué medida
el proyecto ha contribuido a una mayor igualdad entre hombres y
mujeres.
28
La gestión de la calidad
La gestión de la calidad consiste en el establecimiento de un conjunto de normas
y procedimientos, asumidos por toda la organización, destinados a articular su
funcionamiento, con el objetivo de mejorar la satisfacción de las necesidades y las
expectativas de las personas a las que se sirve.
● En intervención social, se pueden concretar en los distintos ámbitos y
áreas de administración y funcionamiento de la organización.
● Se lleva a cabo con la implantación de un sistema de gestión de la
calidad.
● Parte de la identificación y categorización de los distintos
procesos que se desarrollan en la organización, mediante:
● Un mapa de procesos.
● Su análisis a través de unos indicadores de calidad.
29
La gestión de la calidad
Diseño del mapa de procesos
● Para definir los distintos procesos de la organización, se categorizarán
en tres grupos, según la función que cumplen:
● Procesos estratégicos.
● Procesos clave.
● Procesos de apoyo.
● El diseño de procesos se puede representar gráficamente en el mapa de
procesos.
● Un proceso puede estar formado por varios procedimientos.
30
La gestión de la calidad
Diseño del mapa de procesos
31
La gestión de la calidad
Determinación de los indicadores de calidad
Los indicadores de calidad son unos ítems fácilmente identificables, pero
significativos, para medir de manera fiable la calidad de los diferentes aspectos y
procedimientos.
● La evaluación se realiza:
● Agrupando los indicadores en grandes
áreas.
● O a partir de los distintos procesos
señalados en el esquema.
32
La gestión de la calidad
La carta de servicios
La carta de servicios es un documento en el que la institución informa y se
compromete de manera pública en relación con la calidad del servicio ofrecido.
● Son cada vez más frecuentes en intervención social.
● Contribuyen a la mejora del servicio a través del compromiso.
● Incrementan la satisfacción de:
● Las personas usuarias.
● Las y los profesionales.
33