Guía simple para la evaluación sumativa y la evaluación de proyecto del FEDER (Fondo Europeo de Desarrollo Regional)
El DCLG (Department for Communities and Local Government, Departamento de comunidades y gobiernos locales del Reino Unido) ha publicado pautas sobre la preparación de evaluaciones sumativas para los proyectos financiados del FEDER en toda Inglaterra. Regeneris Consulting colaboró con el DCLG para redactar las pautas y nosotros comprendemos muy bien estos requisitos.
Desde la publicación de las pautas, nos han contactado desde distintos proyectos del FEDER para saber cómo podían aplicarlas a los suyos. Pensamos que serviría de ayuda establecer las preguntas frecuentes que han surgido y ofrecer algunas sugerencias breves.
1 – ¿Se pueden aplicar las nuevas pautas a mi proyecto?
Algunos beneficiarios de la subvención preguntaron si era necesario preparar una evaluación sumativa en el caso de que ya han entregado sus modelos lógicos de proyectos al DCLG.
La respuesta es simple: sí. Todos los beneficiarios de la subvención del FEDER deben llevar a cabo una evaluación sumativa para sus proyectos, sin importar el tamaño. El modelo lógico es solo parte del proceso de evaluación.
2 – ¿La evaluación sumativa es lo mismo que la evaluación de proyecto?
La respuesta vuelve a ser simple: sí. El DCLG lo llama evaluación sumativa en lugar de evaluación de proyecto, ya que para el momento en que se lleva a cabo dicha evaluación no habrán surgido ni se podrán medir todos los impactos. Aunque esto podría presentar un desafío para muchos tipos de proyectos, todos los beneficiarios de la subvención deberán proporcionar un análisis de la escala y la naturaleza de los impactos que esperan que finalmente alcancen sus proyectos como parte de la evaluación sumativa.
Las pautas establecen que la evaluación sumativa debe cubrir todos los aspectos típicos de la evaluación de proyecto:
- Revisión del diseño del proyecto
- Evaluación del desempeño de entrega que incluya el desempeño en relación con los objetivos
- Evaluación del proceso que incluya un enfoque de la entrega y la gestión
- Evaluación del impacto económico que incluya el logro de los resultados y los impactos de los beneficiarios y la economía local meta
- Evaluación económica que se centre en el valor económico de los financiadores
En la práctica, la importancia de estos aspectos puede variar según la naturaleza y la dimensión del proyecto en revisión.
3 – ¿Cuántos recursos debemos destinar a una evaluación sumativa?
En las pautas del DCLG se establece claramente que los recursos destinados a la evaluación sumativa deben ser proporcionales y que se puede asignar hasta un 1 % del gasto de los proyectos admisibles en el ejercicio.
Aunque esta es una regla de oro, los requisitos de los recursos pueden variar según los distintos tipos de proyectos. Queremos incentivar a todos los beneficiarios de la subvención del FEDER a que inviertan los suficientes recursos para garantizar que se genere una evidencia de evaluación sólida y minuciosa.
Después de todo, si bien no estamos seguros de cómo se reemplazarán los fondos estructurales, es muy probable que la competencia para obtener recursos sea difícil y la evidencia sobre la efectividad de sus proyectos aumentarán las posibilidades de obtener el financiamiento en los próximos años.
4 – ¿Qué tipo de métodos son los más apropiados para medir el impacto de mi proyecto?
Con las nuevas pautas, se refleja el creciente énfasis que ponen los gobiernos en una evidencia sólida de los impactos económicos. Esto se ve más claro en el enfoque de los métodos de la CIE (Counterfactual Impact Evaluation, Evaluación de impacto contrafactual). En términos simples, con los métodos de la CIE, se busca usar áreas o grupos de comparación a fin de aislar la contribución de un proyecto para alcanzar el impacto económico y otros impactos de todos los demás factores que afectan las condiciones locales.
Los métodos de la CIE pueden ser complejos, en especial en proyectos que no tienen beneficiarios directos, como los que proporcionan infraestructura nueva. Sin embargo, los beneficiarios de la subvención deben estar abiertos a usar los métodos de la CIE como parte de las evaluaciones sumativas y, además, deben trabajar con evaluadores expertos a fin de explorar la viabilidad y la conveniencia de estos métodos.
Es importante tener en cuenta que los métodos de la CIE no siempre son convenientes y, si no se implementan correctamente, pueden dar lugar a resultados equívocos y desperdiciar tiempo, esfuerzo y recursos considerables. Los beneficiarios de la subvención pueden decidir que existen otros métodos de asesoramiento de impacto que son más adecuados. Entre estos, se pueden incluir diferentes métodos de investigación como parte de una teoría de un marco de cambio; no obstante, los evaluadores deben tener cuidado de la importancia que le den a los criterios subjetivos y reconocer que, a diferencia de un enfoque sólido de la CIE, estos métodos no coinciden con las atribuciones de impactos de los métodos sólidos de la CIE.
Próximos pasos para la evaluación de su proyecto:
Es importante comprender qué ha funcionado en el programa del FEDER (y qué no) si es que el Reino Unido desea ayudar a desarrollar más programas de crecimiento locales efectivos luego del Brexit.
La evaluación de proyecto es fundamental en esta cuestión, pero puede ser compleja y por lo general requiere la ayuda de profesionales con experiencia para diseñar e implementar los métodos adecuados. Esto requiere una planificación meticulosa y los beneficiarios de la subvención del FEDER deben planear la evaluación sumativa con anticipación. En especial, recomendamos que los candidatos consideren detenidamente qué datos deben recolectarse hoy para respaldar una evaluación de impacto sólida y significativa en el futuro.
Las pautas son un buen punto de partida para los beneficiarios de la subvención que desean determinar los requisitos de la evaluación y conseguir evaluadores. A pesar de que en las pautas se lleva al lector a una orientación de la evaluación en más detalle, recomendamos que los beneficiarios de la subvención trabajen en estos asuntos lo antes posible y que exploren ideas junto con los evaluadores experimentados antes de buscar ayuda externa.
Si desea obtener más información acerca de los requisitos de la evaluación sumativa y sobre cómo se aplican a los proyectos del FEDER, comuníquese con Neil Evans o Stuart Merali-Younger.