La evaluación efectiva del programa puede:
- Respaldar las mejoras del programa de modo de mejorar los resultados para las mujeres.
- Documentar el conocimiento del programa para su difusión y aplicación en otros contextos. ¿Cómo pueden aprender las demás personas de nuestras experiencias y aplicar nuestros modelos a sus problemas locales?
- Apoyar la rendición de cuentas, ¿los recursos fueron invertidos de la forma planeada y contribuyeron a alcanzar las metas del programa? ¿Por qué sí o por qué no?
- Suministrar información sobre los resultados a los donantes y otro público.
El Manual sobre Planificación, Monitoreo y Evaluación de Resultados de Desarrollo Manual de planificación, seguimiento y evaluación de los resultados de desarrollo del Programa de las Naciones Unidas para el Desarrollo incluye una descripción detallada de las consideraciones generales para crear una metodología de evaluación. El sitio web de ONU Mujeres sobre evaluación sensible al género gender-responsive evaluation ofrece orientación sobre la integración de una perspectiva de derechos de la mujer dentro de la evaluación.
En lo que refiere específicamente a la violencia contra las mujeres en el sector informal, las evaluaciones ante todo deben examinar si:
- Las mujeres y niñas están más seguras en sus hogares y comunidades como resultado de la implementación del programa;
- Se usan prácticas de mediación y justicia restaurativa; estas nunca deben ser implementadas en los casos de violencia contra las mujeres y niñas.
- Los derechos humanos de las mujeres y niñas son reconocidos y respaldados cuando sufren violencia;
-
Las mujeres y niñas acceden mejor a la justicia y apoyo cuando sufren violencia;
-
esto puede incluir mejoras en el acceso físico, acceso financiero, puntualidad, confidencialidad y servicios de respaldo dependiendo de las metas del programa
-
- los infractores están sujetos a sanciones eficaces para detener futuros comportamientos violentos y las actitudes hacia la violencia contra las mujeres y niñas ha cambiado positivamente.
Muestra de preguntas de entrevista de evaluación (PNUD, 2010)
Guía de Entrevista para Beneficiarios
¿Ha oído usted alguna vez sobre [el programa de tribunal de comunidad]? ¿Participó usted en este proceso? ¿Cómo?
¿Cuáles son sus observaciones sobre [el programa de tribunal de comunidad]? ¿Qué es lo que hacen? ¿Es importante? ¿Por qué sí o por qué no?
¿La han ayudado? ¿Cómo la han tratado? ¿El proceso fue justo? ¿Está usted satisfecha con el resultado? Si usted tuviese otro problema como este, ¿acudiría a ellos nuevamente?
¿Qué proceso usan ellos para llegar a un acuerdo?
¿Cómo ve usted a la efectividad del proyecto? ¿Algún éxito/desafío/restricción vinculado con la implementación del proyecto? ¿Qué contribuye al éxito que usted observa?
¿Existe alguna organización que haga un trabajo similar? ¿El trabajo de [programa de tribunal de la comunidad] es igual o diferente?
¿Los ha visto usted actuar en otras situaciones? ¿En qué tipo de situaciones han participado? ¿Apropiadas o no?
¿Piensa usted que el [programa de tribunal de la comunidad] debe continuarse? ¿Piensa usted que haría algo diferente en el futuro o lo mismo? ¿Por qué y cómo? ¿Cuáles son las mejores prácticas que observó usted en este proceso?
Desafíos de Evaluación en el Sector Informal
Los desafíos en la evaluación del programa reflejan muchos de los desafíos en la implementación del programa en el sector informal, incluyendo logística, participación y trabajo con poblaciones de baja alfabetización.
- Muchos programas en el sector informal son capacitaciones a nivel comunitario. El rastreo de participantes rurales y pobres, en especial mujeres y niñas, a posteriori puede ser difícil o imposible en algunos casos salvo que se haya registrado información detallada de contacto durante la capacitación.
- Muchos miembros de la comunidad no están familiarizados con los objetivos de las evaluaciones o puede que no hayan participado antes en encuestas o entrevistas estructuradas. Explicar el propósito de la evaluación puede ser un desafío, como lo puede ser garantizar que los participantes no le digan simplemente al evaluador lo que creen que los organizadores del programa desean oír.
- Acceder a los participantes para realizar la evaluación puede ser un desafío especialmente en las comunidades rurales, suponiendo un tiempo de viaje considerable.
- Si los participantes recibieron incentivos para participar en una capacitación o actividad en particular, ellos pueden esperar incentivos similares por participar en una evaluación de ese proceso. Esta expectativa debe ser anticipada y atendida en una etapa temprana.
- Los participantes pueden tener niveles bajos de alfabetización y los evaluadores deben planificar de acuerdo a esto adaptando sus métodos de evaluación en consecuencia.
Estos desafíos subrayan la importancia de incluir un plan de evaluación desde el comienzo del programa y asegurarse de que las consideraciones para la logística de una evaluación sean parte de la implementación del programa, tal como:
- Realizar evaluaciones previas y posteriores al programa inmediatamente antes y después de la implementación del programa.
- Hablar con los participantes del programa sobre el hecho de que el programa será evaluado en algún punto en el futuro y hacerles saber que es parte de las actividades del programa.
- Hablar con los participantes sobre cómo piensan que el programa puede ser evaluado más efectivamente durante el proceso de implementación.
- Identificando comunidades de grupo de control antes de la implementación del programa y considerando temprano cómo agenciar su participación cuando están poco o nada familiarizados con el programa.
- Asegurar que los evaluadores estén familiarizados con las comunidades y culturas donde estarán recopilando datos de evaluación, de modo que puedan realizar una evaluación instintiva respecto a si los participantes entienden las preguntas y sus respuestas reflejan los resultados reales, en lugar de lo que los evaluadores desean oír.
- Mantener a los instrumentos de recolección de datos, breves, simples y centrados únicamente en la información más pertinente.
- Considerar qué tipo de tamaño de muestra será necesaria para satisfacer los objetivos de la evaluación, por ejemplo, ¿la retroalimentación del 30% de los participantes será suficiente? ¿5%? ¿90%? Planificar cómo acceder a la muestra deseada.
(Entrevista con Margaret Snoeren, American Bar Association Rule of Law Initiative, 25 de enero de 2011.)