MEAL estratégico: prestação de contas, evidências e decisões

1O MEAL como sistema de decisão

O MEAL (monitorização, avaliação, prestação de contas, aprendizagem) não é uma função de reporte. Para um dirigente, responde a três perguntas: estamos a fazer o que prometemos? (monitorização), isso muda realmente a situação das pessoas? (avaliação), as pessoas têm voz e estão seguras? (prestação de contas). A aprendizagem liga as três às decisões.

Um sistema MEAL proporcionado dedica em geral entre 3 e 10 % do orçamento de um projeto à monitorização e avaliação, consoante a sua dimensão e complexidade. Formaliza-se num plano MEAL: tabela de acompanhamento dos indicadores (definição, método, frequência, responsável, desagregação), calendário dos inquéritos, mecanismos de feedback, plano de avaliação e regras de proteção de dados.

Teste de pertinência: para cada dado recolhido, deve ser possível nomear a decisão que ele esclarece e a pessoa que a tomará. Um dado que não esclarece nenhuma decisão custa tempo às equipas e às pessoas inquiridas, e aumenta os riscos para a proteção de dados.

2Indicadores, amostragem e qualidade dos dados

Um bom indicador é válido (mede o que pretende medir), fiável (dois inquiridores obtêm o mesmo resultado), sensível (varia quando a situação muda), desagregado (sexo, idade, deficiência com as perguntas do Grupo de Washington) e realista de recolher. Para a segurança alimentar, preferem-se indicadores padronizados (pontuação de consumo alimentar, índice reduzido de estratégias de sobrevivência) para comparar com os outros atores.

Para um inquérito por amostragem aleatória simples, a dimensão da amostra calcula-se por n = z² × p × (1 − p) / e². Com um nível de confiança de 95 % (z = 1,96), uma prevalência desconhecida (p = 0,5) e uma margem de erro de 5 % (e = 0,05): n = 3,8416 × 0,25 / 0,0025 ≈ 384. Com uma amostragem por conglomerados, multiplica-se pelo efeito de desenho (muitas vezes 1,5 a 2); acrescenta-se depois uma margem para as não respostas (por exemplo, 10 %). Com um efeito de desenho de 2 e 10 % de não respostas: 384 × 2 / 0,9 ≈ 854 agregados.

A qualidade dos dados controla-se em cada etapa: formação e teste dos inquiridores, questionário testado na língua local, controlos automáticos na ferramenta (KoboToolbox, ODK), reverificação de uma amostra de entrevistas (back-checks), análise diária dos valores aberrantes e das entrevistas anormalmente curtas.

3Avaliar: critérios, atribuição e contribuição

As avaliações utilizam na maioria das vezes os seis critérios revistos do CAD da OCDE (2019): pertinência, coerência, eficácia, eficiência, impacto e sustentabilidade. Para a ação humanitária, a ALNAP propõe critérios complementares como a cobertura, a conectividade e a coordenação.

A pergunta mais difícil é a da causalidade: a mudança observada deve-se ao projeto? Três famílias de abordagens:

• Abordagens experimentais (ensaios aleatorizados): estabelecem a atribuição com o maior rigor, mas são caras, levantam questões éticas na emergência (não se recusa ajuda a um grupo de controlo necessitado) e nem sempre explicam porque algo funciona.
• Abordagens quase experimentais (diferença nas diferenças, emparelhamento por pontuação de propensão, regressão descontínua): exploram comparações naturais, por exemplo agregados logo acima e logo abaixo de um limiar de elegibilidade.
• Abordagens baseadas na teoria (análise de contribuição, rastreamento de processos, colheita de resultados): verificam se a cadeia causal prevista ocorreu e afastam as explicações alternativas.

Exemplo com números de diferença nas diferenças. A pontuação média de consumo alimentar passa de 28 para 41 nos agregados beneficiários, e de 30 para 36 num grupo de comparação. O efeito estimado é (41 − 28) − (36 − 30) = 13 − 6 = 7 pontos, e não 13: parte da melhoria explica-se pela época das colheitas.

4Prestação de contas às pessoas e Norma Humanitária Fundamental

A Norma Humanitária Fundamental (CHS), revista em 2024, fixa nove compromissos para com as pessoas e comunidades afetadas: uma ajuda adequada, eficaz e atempada, que reforça as capacidades locais e evita os efeitos negativos, baseada na comunicação, na participação e no feedback, com queixas tratadas, coordenação, aprendizagem, pessoal competente e bem gerido, e recursos geridos de forma responsável.

Um mecanismo de queixas e feedback eficaz oferece vários canais (linha telefónica, caixas, pontos de atendimento, comités, canais digitais), adaptados às pessoas que não leem, às pessoas idosas e às pessoas com deficiência; distingue as queixas sensíveis (exploração e abuso sexuais, fraude, corrupção), tratadas de forma confidencial por uma via dedicada; e fecha o ciclo respondendo às pessoas num prazo anunciado.

Indicadores de gestão úteis para um dirigente: taxa de resposta dentro do prazo, proporção de queixas que levaram a uma alteração do programa, proporção de feedback vindo de mulheres e de pessoas com deficiência, e prazo de tratamento das queixas sensíveis.

Sinal de alarme: um mecanismo que quase não recebe queixas não é a prova de um programa perfeito. Na maioria dos casos, é a prova de que as pessoas não o conhecem, não lhe têm acesso ou não confiam nele.

5Do dado à aprendizagem organizacional

A aprendizagem acontece quando as evidências mudam as decisões. As ferramentas mais eficazes são simples: revisões trimestrais de progresso centradas em três perguntas (o que funciona, o que não funciona, o que mudamos?), revisões pós-ação no fim de cada fase de emergência, resposta da direção às recomendações de cada avaliação (aceite, parcialmente aceite, rejeitada, com plano de ação e responsável), e acompanhamento desses planos.

A gestão adaptativa formaliza este ciclo: pressupostos explícitos, indicadores avançados, pontos de decisão programados e margens de manobra negociadas com o doador para alterar as atividades sem uma adenda pesada. Vários doadores incentivam-na explicitamente em contextos instáveis.

Por fim, a proteção de dados é uma obrigação da direção: minimização dos dados recolhidos, consentimento informado, encriptação, acesso restrito, prazo de conservação, e avaliação de impacto antes de partilhar listas de beneficiários com terceiros (autoridades, prestadores de pagamento). O Manual do CICV sobre proteção de dados na ação humanitária (2.ª edição, 2020) é a referência do setor.