El sistema de seguimiento: plan MEAL, calidad de los datos y seguimiento a distancia

1El plan MEAL: la columna vertebral del seguimiento

El plan MEAL describe cómo se medirá cada indicador, por quién, cuándo y para qué decisión. Se presenta en forma de tabla: indicador, definición, línea de base, meta, fuente y método, frecuencia, desagregación, responsable de la recopilación, responsable del análisis, uso (revisión mensual, informe al donante, ajuste de la focalización).

Abarca cuatro tipos de seguimiento:

• Seguimiento de las actividades y de los productos: lo que se ha realizado, en comparación con el plan (registros de distribución, listas de asistencia, fichas de obra).
• Seguimiento de los efectos: cambios en las personas (encuestas de línea de base, intermedias y finales; monitoreo posdistribución).
• Seguimiento del contexto: precios, acceso, seguridad, movimientos de población e indicadores de los supuestos críticos del marco lógico.
• Seguimiento de la rendición de cuentas: quejas y retroalimentación recibidas, plazo de respuesta, satisfacción, participación (semana 8).

El costo del plan MEAL debe figurar en el presupuesto: personal, herramientas, transporte, encuestas, evaluaciones. Un rango del 3 al 10 % del presupuesto del proyecto es habitual; un proyecto piloto cuyo efecto se quiere demostrar puede justificar más.

La mejor prueba de un plan MEAL: para cada indicador, ¿puede nombrar la reunión en la que se discutirá y la decisión que puede desencadenar? Si no, pregúntese si hay que recopilarlo.

2De las herramientas de recopilación al tablero de control

La cadena de datos tiene cinco eslabones: recopilación, entrada y almacenamiento, limpieza, análisis, difusión. La recopilación móvil (KoboToolbox, ODK, CommCare) ha sustituido al papel en la mayoría de los contextos: controles automáticos en la entrada (rangos de valores, campos obligatorios, saltos lógicos), geolocalización y marca de tiempo, envío directo al servidor.

Un buen formulario se diseña a partir del plan de análisis: primero se escriben las tablas que se quieren producir, luego las preguntas necesarias y solo esas. Se prueba en el terreno con encuestados reales antes de desplegarlo y luego se congela una versión; cualquier modificación posterior se documenta, porque hace que los datos de antes y de después sean incomparables.

La limpieza sigue reglas escritas: duplicados, valores atípicos (un hogar de 45 personas, un gasto en alimentos de 2 000 USD por semana), incoherencias (un niño de 3 años casado), entrevistas demasiado cortas (menos de 10 minutos para un cuestionario de 40 minutos). Nunca se corrige un valor sin fuente; se señala, se verifica con el encuestador o se retira, y se lleva un registro de limpieza.

El tablero de control muestra pocos indicadores, con la meta, la tendencia y un código de colores según umbrales fijados de antemano. Se actualiza al ritmo de las decisiones: semanal para las distribuciones, mensual para los indicadores de efecto intermedio.

3La calidad de los datos: cinco dimensiones

Una evaluación de la calidad de los datos (DQA) verifica cinco dimensiones:

El método más concreto es la verificación por recuento: se elige una muestra de sitios, se recuenta a partir de las fuentes primarias (registros, fichas) y se compara con las cifras reportadas. Un ratio de verificación de 1,00 es perfecto; se fija una tolerancia, por ejemplo entre 0,95 y 1,05. Por encima de 1,05, las cifras reportadas están infladas; por debajo de 0,95, hay actividades que no se reportan.

Ejemplo. Un centro de salud reporta 1 240 consultas; el recuento de los registros encuentra 1 085. Ratio: 1 240 / 1 085 = 1,14. El centro sobredeclara un 14 %: hay que entender la causa (doble conteo de las visitas de seguimiento, presión sobre las metas) antes de cualquier sanción.

4Los controles de calidad de la recopilación

La calidad se juega durante la recopilación, no después. Los controles estándar:

• Formación y prueba de los encuestadores, con un examen escrito y entrevistas simuladas; los encuestadores que no lo superan no recopilan datos.
• Supervisión directa de una parte de las entrevistas (por ejemplo, el 5 %).
• Verificaciones posteriores (back-checks): el 10 % de los hogares se vuelve a entrevistar sobre algunas preguntas estables (tamaño del hogar, tipo de refugio). Una tasa de concordancia baja para un encuestador indica errores o entrevistas inventadas.
• Controles diarios a distancia: duración de las entrevistas, coordenadas GPS (entrevistas todas en el mismo lugar), hora (entrevistas a las 3 de la madrugada), distribución de las respuestas por encuestador (un encuestador cuyos hogares tienen todos exactamente 5 miembros).

Los datos inventados («curbstoning») son más frecuentes de lo que se cree cuando los encuestadores cobran por entrevista, están sometidos a presión por cuotas o se les envía a zonas peligrosas. Prevenirlos pasa por objetivos realistas, un pago por jornada en lugar de por unidad y controles anunciados de antemano.

Un responsable de MEAL que nunca encuentra errores no busca lo suficiente. Publicar internamente los errores encontrados y corregidos refuerza la confianza en las cifras.

5El seguimiento a distancia y el monitoreo por terceros

En las zonas inaccesibles para el personal (inseguridad, restricciones), el seguimiento a distancia combina varias fuentes para compensar la ausencia de visitas:

• Socios locales o personal local que tienen acceso, con herramientas estandarizadas y pruebas (fotos geolocalizadas, listas firmadas).
• Monitoreo por terceros (TPM): una empresa u organización independiente, a menudo exigida por los donantes, que verifica una muestra de actividades.
• Llamadas telefónicas a una muestra aleatoria de beneficiarios (monitoreo posdistribución por teléfono).
• Datos remotos: imágenes satelitales (campamentos, cultivos, destrucción), datos de transacciones de los operadores móviles, datos de precios.
• Retroalimentación de la comunidad por línea gratuita y mensajería.

El seguimiento a distancia tiene límites: muestras telefónicas sesgadas hacia los hogares con teléfono y a menudo masculinas, riesgos de presión sobre los socios, transferencia de los riesgos de seguridad al personal local. Hay que decirlo en los informes, pagar correctamente a los socios por este trabajo y no pedirles que asuman riesgos que la organización rechazaría para su propio personal.

La triangulación es la regla: una distribución se considera verificada cuando al menos dos fuentes independientes concuerdan (por ejemplo, lista firmada y llamadas a una muestra de beneficiarios).

6Hacer útil el seguimiento: del dato a la decisión

El seguimiento rara vez fracasa por falta de datos; fracasa porque nadie los utiliza. Tres mecanismos hacen útil el seguimiento:

• Umbrales de alerta fijados de antemano: si el tiempo de espera en las distribuciones supera las 3 horas, si la tasa de quejas no resueltas supera el 20 %, si el precio de la canasta aumenta más del 10 %, se desencadena una acción predefinida.
• Revisiones periódicas en las que el equipo de programa, MEAL, logística y finanzas miran juntos las mismas cifras y deciden. El acta registra las decisiones, su responsable y su plazo.
• Una devolución a las personas y a los equipos: presentar a las comunidades lo que se ha aprendido y cambiado; mostrar a los encuestadores para qué han servido sus datos.

La independencia del MEAL importa. Si el responsable de MEAL rinde cuentas únicamente al jefe de proyecto cuyos resultados mide, la tentación de suavizar las malas cifras es fuerte. Una doble línea jerárquica (operativa con el proyecto, técnica con un responsable de MEAL de país o de sede) protege la calidad de la información.