Cómo seleccionar un evaluador adecuado

Cómo seleccionar un evaluador adecuado

La elección de un evaluador o de un equipo de evaluación es un factor esencial en todo el proceso de evaluación. Las evaluaciones son realizadas por un evaluador interno o por un evaluador externo o, a menudo, por una combinación de ambos.

Una consideración cuidadosa de los propósitos de la evaluación ayudará a determinar el mejor enfoque.

Las evaluaciones internas son realizadas por evaluadores asociados al programa a evaluar.

En cambio, las evaluaciones externas son realizadas por evaluadores que no están asociados al programa que se ejecuta, implementa y financia.

A veces, se nombran consultores nacionales para ayudar en la evaluación del proyecto. Esta práctica suele ser efectiva y puede enriquecer significativamente la ejercicio de evaluación.

Un consultor competente comprende el contexto de la evaluación y puede proporcionar al equipo de evaluación acceso a funcionarios y fuentes de información que de otro modo no estarían disponibles.

Además, la inclusión de un consultor nacional en un equipo puede actuar como catalizador para una mayor aceptación local de los resultados de la evaluación.

A continuación resumimos las posibles ventajas y desventajas de implementar evaluadores internos y externos.

Ventajas de la evaluación interna

  1. Un evaluador interno está familiarizado con la organización, su programa y operaciones, y sus metas y objetivos. Se espera que esto suponga una menor amenaza de ansiedad y perturbación;
  2. A veces la gente está más dispuesta a hablar con los de dentro que con los de fuera;
  3. Una evaluación interna es claramente una herramienta de gestión, una forma de autocorregirse y mucho menos amenazante que una evaluación externa. Esto puede facilitar que los involucrados acepten los hallazgos y las críticas.
  4. Una evaluación interna normalmente costará menos que una evaluación externa;
  5. Una evaluación interna no requiere largas negociaciones de contratación;
  6. Una evaluación interna contribuye a fortalecer la capacidad de evaluación nacional.

Desventajas de la evaluación interna

  1. El equipo de evaluación puede tener un interés personal en llegar a conclusiones positivas sobre el proyecto u organización. Por este motivo, otras partes interesadas, como los donantes, pueden preferir una evaluación externa;
  2. Es posible que el equipo de evaluación no tenga suficientes conocimientos, habilidades o capacitación en evaluación;
  3. Si bien puede costar menos que una evaluación externa, el costo de oportunidad de la evaluación interna puede ser alto;
  4. Es posible que el equipo de evaluación no tenga experiencia especial en la materia, lo que pone en riesgo el ejercicio de evaluación interna.

Ventajas de la evaluación externa

  1. Es probable que el equipo de evaluación externa sea más objetivo ya que los evaluadores estarán algo alejados del trabajo. Esto puede reducir el sesgo organizacional;
  2. El equipo de evaluación externa tendrá habilidades de evaluación y experiencia técnica más excepcionales para realizar una evaluación;
  3. A veces, la gente está más dispuesta a hablar con gente de fuera que con gente de dentro;
  4. El uso de un evaluador externo da más credibilidad a los hallazgos, particularmente a los resultados positivos;
  5. Un evaluador externo puede dedicar tiempo completo a la evaluación;
  6. Un evaluador externo puede poner a la organización en contacto con recursos técnicos adicionales debido a su mayor exposición al mundo exterior.

Desventajas de la evaluación externa

  1. Un evaluador externo puede no conocer la organización, sus políticas, procedimientos y personalidades;
  2. Un evaluador externo puede no estar familiarizado con el entorno político, cultural y económico local;
  3. En la evaluación externa, quienes están directamente involucrados pueden sentirse amenazados por personas externas y ser menos propensos a hablar abiertamente y cooperar en el proceso;
  4. La evaluación externa puede ser una tarea muy costosa;
  5. Un evaluador externo puede malinterpretar lo que usted quiere de la evaluación y no le proporcionará lo que desea;
  6. Una evaluación externa requiere más tiempo de contacto, negociación, orientación y seguimiento.

¿Cómo se elige un evaluador externo o un equipo de evaluación?

Si se considera que es necesaria una evaluación externa, será necesario delinear algunos criterios para este fin.

La siguiente es una lista tentativa de cualidades que puede buscar en un evaluador externo o equipo de evaluación:

  • Un evaluador (o un equipo de evaluación) debe tener conocimientos de las cuestiones organizativas y de desarrollo y tener experiencia adecuada en la evaluación de proyectos, programas u organizaciones de desarrollo;
  • Un evaluador debe tener suficientes habilidades de investigación con un firme compromiso con la calidad y el cumplimiento de los plazos;
  • Un evaluador debe ser objetivo, honesto y justo;
  • Un evaluador tendrá la capacidad de comunicarse verbalmente y por escrito y tendrá el estilo y enfoque que mejor se adapte a la organización para la que trabajará.

¿Cuáles son las ventajas de una evaluación interna?

Las ventajas de la evaluación interna incluyen la familiaridad con la organización y sus objetivos, lo que representa menos amenaza de ansiedad y perturbación, es una herramienta de gestión clara, generalmente cuesta menos que una evaluación externa, no requiere negociaciones de contratación que consumen mucho tiempo y contribuye a fortalecer la capacidad de evaluación nacional. .

¿Cuáles son las posibles desventajas de una evaluación interna?

Las desventajas de la evaluación interna incluyen posibles intereses creados en conclusiones positivas, falta de conocimiento o capacitación suficiente en evaluación, altos costos de oportunidad y posiblemente falta de experiencia en un tema especial.

¿Por qué una evaluación externa podría considerarse más creíble?

Una evaluación externa podría considerarse más creíble porque es probable que el equipo de evaluación externa sea más objetivo, lo que reduce el sesgo organizacional. Además, el uso de un evaluador externo da más credibilidad a los hallazgos, especialmente a los resultados positivos.

¿Cuáles son los inconvenientes de una evaluación externa?

Los inconvenientes de una evaluación externa incluyen posible desconocimiento de la organización y el entorno local, posibles amenazas sentidas por los internos, costos más altos, malentendidos con respecto a las expectativas de la evaluación y tiempo adicional requerido para el contacto, las negociaciones y la orientación.

¿Qué cualidades se deben buscar en un evaluador externo o equipo de evaluación?

Las cualidades que se deben buscar en un evaluador externo incluyen comprensión de las cuestiones organizativas y de desarrollo, experiencia en evaluación adecuada, habilidades de investigación, compromiso con la calidad y los plazos, objetividad, honestidad, equidad y habilidades de comunicación efectiva.

¿Cómo puede beneficiar el proceso de evaluación la inclusión de un consultor nacional?

La inclusión de un consultor nacional puede enriquecer el ejercicio de evaluación, ya que comprende el contexto de la evaluación y puede brindar acceso a funcionarios y fuentes de información. Su inclusión también puede promover una mayor "aceptación" local de los resultados de la evaluación.