Evaluación de programas comunitarios

Evaluar es aprender: medir proceso, resultado e impacto con la comunidad, no sobre la comunidad.

1. Tipos y momentos de la evaluación

El campo de la evaluación de programas sociales suele distinguir cuatro momentos que se usan con frecuencia y que se articulan entre sí. Comprender la diferencia entre ellos es la condición para no mezclar planos cuando se lee o se diseña una evaluación. Cada momento responde a una pregunta distinta, mira un segmento distinto del programa y exige métodos diferentes.

1.1 Evaluación ex ante

También llamada diagnóstica, de necesidades o de línea de base. Ocurre antes de implementar el programa. Identifica el problema, mapea los recursos del territorio, perfila a la población destinataria y construye la línea de base contra la cual se compararán luego los cambios. Responde a preguntas como: ¿qué necesita esta comunidad? ¿qué condiciones previas ya existen? ¿qué recursos locales se pueden articular? Sin línea de base, después no se puede afirmar con rigor que algo mejoró: solo se puede afirmar que algo cambió. La línea de base es al mismo tiempo una fotografía inicial y una promesa metodológica: cada afirmación posterior sobre el cambio se sostendrá en la comparación con ese punto de partida.

1.2 Evaluación de proceso

Ocurre durante la implementación. Documenta qué se hizo, a cuántas personas, con qué frecuencia, con qué recursos, con qué barreras y qué adaptaciones se introdujeron sobre la marcha. Responde a preguntas como: ¿se está ejecutando lo planificado? ¿la intervención llega a la población prevista? ¿qué ajustes requiere la operatoria? Aquí se mira la fidelidad al diseño, pero también la flexibilidad necesaria cuando el territorio empuja el programa en otra dirección. Un proceso bien documentado permite distinguir entre un programa que falló en su diseño y un programa que falló en su ejecución, una distinción con consecuencias directas sobre qué se modifica después.

1.3 Evaluación de resultado

Ocurre al cierre del ciclo o en hitos intermedios. Mide los efectos inmediatos atribuibles al programa: conocimientos adquiridos, habilidades instaladas, conductas iniciadas, servicios efectivamente recibidos, productos entregados. Responde a la pregunta: ¿se logró el objetivo específico propuesto en el plazo previsto? Un resultado es una salida observable al término de la intervención, una transformación que puede documentarse con relativa rapidez. Cuando se mide un resultado, se está preguntando por el efecto directo de la acción, no por su huella en las condiciones estructurales del territorio.

1.4 Evaluación de impacto

Ocurre meses o años después de finalizado el programa, idealmente con un grupo de comparación. Mide los cambios sostenidos en las condiciones de vida que el programa pretendía modificar: reducción de brechas de atención, modificación de normas comunitarias, mantenimiento de prácticas, redistribución de poder local. Responde a la pregunta: ¿el cambio se mantiene en el tiempo y se diferencia de lo que habría ocurrido sin el programa? La medición de impacto exige metodologías capaces de sostener una afirmación contrafactual: sin un diseño que compare lo que pasó con el programa con lo que habría pasado sin él, la atribución del cambio a la intervención se vuelve frágil.

Estos cuatro momentos no se sustituyen entre sí; se complementan. Un programa puede tener resultados sólidos y, aun así, mostrar poco impacto si los cambios no se sostienen. Y al revés: puede tener impacto sin haber registrado cuidadosamente sus procesos. La matriz de evaluación cruza cada pregunta de evaluación con el momento al que corresponde, el indicador, la fuente de verificación y el método, y funciona como contrato técnico del proceso evaluativo.

2. Indicadores de proceso, resultado e impacto

Un indicador es una variable observable que permite rastrear un cambio. Los criterios SMART (Específico, Medible, Alcanzable, Relevante, con Tiempo definido) ofrecen una guía útil para formular indicadores, pero conviene no convertirlos en fetiche: un indicador puede ser SMART y aun así capturar una dimensión trivial del programa, mientras que un indicador cualitativo difícil de reducir a un número puede capturar la dimensión central del cambio. La regla práctica es: SMART como disciplina de redacción, no como coartada para evitar la discusión sobre qué medir.

2.1 Indicadores de proceso

Miden fidelidad, cobertura y calidad de la operatoria:

• Número de talleres realizados sobre los planificados.
• Porcentaje de asistentes que culminan el ciclo previsto.
• Número de articulaciones con instituciones del territorio.
• Grado de participación comunitaria en cada fase del programa.
• Calidad percibida por las personas destinatarias respecto del dispositivo implementado.

2.2 Indicadores de resultado

Miden cambios inmediatos atribuibles a la intervención:

• Conocimientos ganados por las personas participantes, medidos con pre-test y pos-test.
• Conductas iniciadas: consultas a servicios de salud, inscripción a programas de capacitación.
• Productos comunitarios generados: cartillas, murales, comisiones locales constituidas.
• Satisfacción de las personas participantes con la intervención recibida.
• Variaciones en actitudes declaradas hacia el problema que aborda el programa.

2.3 Indicadores de impacto

Miden cambios sostenidos, estructurales, en las condiciones de vida:

• Reducción en la brecha de atención entre la zona intervenida y zonas similares.
• Modificación de normas comunitarias, medida con métodos mixtos.
• Sostenibilidad de las comisiones o redes locales tras el cierre del financiamiento.
• Variación en indicadores estructurales: morbilidad, escolarización, incidencia de violencia.
• Redistribución del poder local: acceso a decisiones, presencia en espacios de deliberación.

3. Evaluación participativa

En psicología social comunitaria, la evaluación participativa no es una técnica opcional: es coherente con el principio de que la comunidad no es objeto de estudio sino sujeto político. Esto significa que las personas destinatarias del programa intervienen en definir qué se evalúa, cómo se evalúa, cómo se interpretan los hallazgos y qué se hace con los resultados.

Maritza Montero, una de las referencias centrales del campo latinoamericano, insiste en que el protagonismo comunitario no se delega: se construye. La participación no se decreta desde afuera; se habilita desde el diseño del programa y se acompaña durante toda la implementación, evaluativa incluida. La tradición anglosajona de la evaluación basada en la comunidad y la investigación-acción participativa llegan a conclusiones equivalentes desde otros recorridos disciplinares.

3.1 ¿Qué cambia cuando se opta por una evaluación participativa?

1. El equipo profesional deja de ser el solo agente que define indicadores.
2. La comunidad pasa de ser informante a co-investigadora del proceso que la afecta.
3. Los hallazgos se discuten en escenarios colectivos antes de redactarse el informe final.
4. Las decisiones de ajuste se toman con la comunidad, no sobre ella.
5. El informe final se redacta en un lenguaje accesible, además del lenguaje técnico para financiadores.
6. La devolución se organiza como proceso formativo, no como notificación administrativa.

3.2 Variantes reconocidas

La evaluación participativa admite distintas modalidades, que se eligen según el grado de protagonismo que el contexto permita:

• Evaluación basada en la comunidad, donde la comunidad conduce el proceso.
• Investigación-acción participativa, donde investigación e intervención se articulan en ciclos.
• Evaluación democrática deliberativa, donde distintos actores argumentan y negocian el valor del programa.
• Autoevaluación comunitaria, donde la comunidad revisa su propio proceso con apoyo externo metodológico.

Con frecuencia se combinan varias modalidades en un mismo programa. Lo central no es la etiqueta sino el principio: la comunidad participa en las decisiones evaluativas que la afectan. Este principio tiene costos organizativos —reuniones, traducción de informes, tiempos más largos— y beneficios políticos —sostenibilidad, pertinencia, confianza— que conviene sopesar antes de declarar una evaluación como participativa sin los recursos para sostenerla.

4. Métodos cuantitativos y cualitativos de evaluación

No existe un método superior en abstracto. Cada nivel de la evaluación admite herramientas distintas, y los hallazgos se enriquecen cuando se combinan en un diseño mixto. La elección del método depende de la pregunta de evaluación, del momento y del tipo de cambio que se busca documentar.

4.1 Métodos cuantitativos

Útiles sobre todo para proceso y resultado, cuando interesa medir cobertura, frecuencia y magnitude del cambio:

• Encuestas con cuestionarios estructurados, aplicadas antes y después.
• Registros administrativos: asistencia, servicios prestados, atenciones realizadas.
• Análisis de datos secundarios: censos locales, estadísticas de servicios públicos.
• Diseños cuasiexperimentales con grupo de comparación cuando la pregunta de impacto lo admite.
• Indicadores estandarizados que permiten comparar territorios y momentos.

4.2 Métodos cualitativos

Útiles sobre todo para proceso e impacto, cuando interesa interpretar significados, resistencias y efectos no anticipados:

• Entrevistas en profundidad a personas destinatarias y a equipos.
• Grupos focales.
• Observación participante.
• Cartografías sociales y relatos comunitarios.
• Análisis de documentos producidos por el programa.
• Historias de vida y trayectorias individuales.

4.3 Enfoque mixto

El enfoque mixto (cuali-cuanti) articula ambos registros: lo cuantitativo mide cobertura, frecuencia y magnitud del cambio; lo cualitativo interpreta significados, resistencias y efectos no anticipados. Cuando solo se usa lo cuantitativo, se corre el riesgo de medir lo fácil de medir y dejar fuera lo central del programa. Cuando solo se usa lo cualitativo, se dificulta la comparación entre territorios y entre momentos. La integración de ambos registros, lejos de sumar sin más, exige una decisión metodológica: qué pregunta responde más adecuadamente cada método y cómo se contrastan los hallazgos para producir una lectura articulada.

Una decisión clave del diseño evaluativo es definir, para cada pregunta de evaluación, qué método responde más adecuadamente y qué método lo complementa. Esta decisión se documenta en la matriz de evaluación, que cruza preguntas, momentos, indicadores, fuentes, métodos y responsables. La matriz funciona como contrato técnico del proceso evaluativo y permite revisarlo cuando las condiciones cambian o cuando la comunidad propone reorientaciones.

5. Uso de los resultados para la mejora

Evaluar sirve para ajustar, no para archivar. Un informe de evaluación que termina en una estantería cumplió un trámite y desaprovechó su potencial. La utilidad social de la evaluación se mide por los ajustes que dispara, no por el grosor del documento final. Una evaluación útil modifica decisiones concretas: cambia un horario, redefine una población objetivo, suspende una línea de acción que no dio resultados, replica una estrategia que sí los dio.

5.1 Circuitos centrales de devolución

• Devolución a la comunidad. En lenguaje accesible, en formato de encuentro y no solo de documento, con tiempo para preguntas y disensos.
• Devolución al equipo ejecutor. Sesiones de trabajo donde se revisan hallazgos, se reinterpretan y se deciden ajustes operativos.
• Devolución a los financiadores. El informe técnico, con la evidencia ordenada y las recomendaciones operativas.
• Devolución a las instituciones co-responsables. Cuando el programa articula con salud, educación u otra dependencia, los hallazgos circulan hacia ellas.
• Devolución al campo disciplinar. Cuando los aprendizajes son generalizables, se publican y se comparten con la academia y con otros equipos.

La devolución no es un momento al final; debería estar presente durante todo el proceso. Cada hito relevante del programa es una oportunidad para volver a la comunidad y revisar: ¿seguimos en rumbo? ¿qué cambió en el territorio? ¿qué ajustamos? La devolución continua convierte a la evaluación en un dispositivo formativo y no en un cierre administrativo.

5.2 Decisiones que se alimentan de la evaluación

• Ajustar la operatoria: horarios, lugares, formato de los talleres.
• Redefinir la población objetivo cuando el perfil real difiere del previsto.
• Reorientar objetivos cuando el contexto del territorio cambió.
• Escalar o discontinuar el programa según la evidencia acumulada.
• Incorporar aprendizajes a nuevos diseños de intervención.
• Fortalecer las articulaciones institucionales que sostienen el programa.

Cuando la evaluación muestra que algo no funciona, hay que tener la capacidad institucional de modificar el rumbo. Cuando la evaluación muestra que algo funciona, hay que poder sostenerlo, documentarlo y replicarlo. La evaluación, además de su valor técnico, tiene valor político: hace visibles los efectos de la intervención sobre la vida de personas y comunidades concretas, y permite que esas voces disputen el sentido de las políticas que las afectan.