Monitoramento
Monitoramento é definido no Social Way como “a coleta e análise contínuas de informações financeiras e não financeiras para verificar o desempenho em relação aos objetivos, orçamento e plano de trabalho. O monitoramento normalmente se preocupa com contribuições, atividades e outputs.” O monitoramento apresenta o que foi entregue e responde à pergunta: fizemos o que foi planejado? Em termos simples, o objetivo do monitoramento é medir se implementamos as atividades (por exemplo, projeto de Desenvolvimento Socioeconômico ou controles de risco/impacto) que havíamos planejado, comparando com indicadores definidos.
O monitoramento requer a definição antecipada dos indicadores relacionadas as meta, contribuições e produtos finais/saídas (“outputs”) de uma intervenção (por exemplo, projeto ou controles de risco/impacto). Por exemplo:
- Para monitorar um projeto de Desenvolvimento Socioeconômico relacionado à oferta de capacitação, os sites precisarão definir e medir o progresso em relação a:
- Indicador de contribuições: orçamento de R$ 25.000,00 e 1 funcionário em período integral dedicado à implementação do projeto por dois meses;
- Indicador dos produtos finais/saídas (“outputs”): realizar 5 sessões de treinamento ou treinar 50 pessoas em cada sessão.
- Para monitorar um controle de risco/impacto relacionado à potencial ocorrência de acidentes com veículos relacionados ao site na comunidade, será necessário definir e medir o progresso em relação a:
- Indicador de contribuições: orçamento de R$ 10.000 e 1 funcionário em tempo integral dedicado ao controle por um mês;
- Indicador dos produtos finais/saídas (“outputs”): Instalação de 15 placas de sinalização indicando os redutores de velocidade e instalação de 5 redutores de velocidade.
O monitoramento tende a se concentrar no progresso, em qualquer período de tempo, em relação às metas. O monitoramento pode demonstrar que existe um problema, ou seja, que um indicador está abaixo do planejado, mas não fornece a profundidade das informações para entender por que o problema ocorreu e como o problema pode ser resolvido. O monitoramento é um processo contínuo (por exemplo, mensal ou trimestral) e normalmente realizado pela equipe da Anglo American e/ou equipe externa no caso de projeto de Desenvolvimento Socioeconômico.
Avaliação
No Social Way, a avaliação é entendida como “o processo de determinar os resultados de uma intervenção, bem como o valor associado para o público alvo, com base na coleta sistemática e regular de dados (monitoramento)”. Sua finalidade é melhorar a eficácia e sustentabilidade das intervenções para subsidiar a tomada de decisões sobre planos futuros. A avaliação vai além do monitoramento para responder à pergunta: quais foram os resultados das atividades implementadas e o objetivo planejado foi alcançado?
A avaliação requer:
- Análise se os objetivos planejados foram ou não alcançados;
- Avaliação dos fatores que contribuíram ou restringiram o alcance dos objetivos planejados;
- Consideração de quais foram as consequências da atividade, intencionais e não intencionais; e
- Documentação das informações sobre as atividades de sucesso, os desafios, o alcance ou não dos objetivos e oportunidades de melhoria.
Enquanto o monitoramento se concentra no rastreamento do progresso na implementação dos controle de risco/impacto ou projeto de Desenvolvimento Socioeconômico, a avaliação se concentra predominantemente na eficácia, sustentabilidade e replicabilidade, ou seja, se os resultados planejados foram alcançados; a intervenção trará valor a longo prazo; e a intervenção merece ser repetida (com base no custo-benefício, bem como em termos de seu sucesso na obtenção dos resultados planejados)? A avaliação requer a definição prévia dos indicadores da meta para os resultados e o impacto da intervenção. Por exemplo:
- Para avaliar um projeto de Desenvolvimento Socioeconômico relacionado à oferta de capacitação, os sites precisarão definir e medir o progresso em relação a:
- Indicador de resultado: 30 participantes do treinamento registraram seus negócios na área de Suprimentos; 80% dos participantes indicaram que atingiram os objetivos de aprendizado do treinamento.
- Indicador de impacto: O aumento da porcentagem de aquisição local realizada em empresas locais, aumento na renda familiar média na área de influência (em comparação com dados de referência antes da intervenção).
- Para avaliar um controle de impacto relacionado à mitigação do potencial de acidentes com veículos relacionados ao site, os sites precisarão definir e medir o progresso em relação a:
- Indicador de resultados: redução nos incidentes potenciais de “quase acidente” registrados (em comparação com a referência), velocidade média reduzida dos veículos em uma determinada via da comunidade em relação aos dados de referência (baseline) pretéritos à intervenção.
- Indicador de impacto: zero acidentes com veículos relacionados ao site, resultando em zero lesões aos membros da comunidade.
A avaliação deve ser realizada em intervalos periódicos, conforme relevante para a escala e duração da atividade. No caso de atividades de longo prazo, uma avaliação intermediária deve ser conduzida de modo a identificar e corrigir falhas ou problemas)e também uma avaliação mais abrangente realizada após a conclusão. O resultado da avaliação deve ser apresentada no Plano de Gerenciamento Social (Social Management Plan – SMP) do próximo ano).
Para projetos específicos com prazo determinado (por exemplo, uma parceria de três anos para oferecer treinamento de capacitação), uma avaliação intermediária deve ser realizada em dezoito meses (ou conforme necessidade) para identificar quaisquer ações corretivas para melhorar a realização do objetivo planejado. Uma avaliação completa pode ser concluída no final do projeto com o objetivo de avaliar se a atividade alcançou adequadamente os resultados e o impacto planejados. As avaliações são frequentemente realizadas por organizações externas para trazer objetividade e independência.
A Figura 1.1 ilustra as diferentes áreas de foco do monitoramento e avaliação.
Figura 1.1 Áreas de foco do monitoramento e avaliação