A avaliação é considerada um dos pilares para o fortalecimento e ampliação da legitimidade do campo do investimento social privado no Brasil. Em tempos de desafios sociais, econômicos e políticos, muitos institutos, fundações e empresas têm utilizado a avaliação como forma de assegurar que suas ações estejam cada vez mais alinhadas com a produção de bens públicos.

Impulsionadas por necessidades diversas – como correção de “rotas” e aperfeiçoamento dos projetos, prestação de contas para o Conselho, sistematização de métodos e aprendizados, comunicação dos resultados, orientação para a tomada de decisão, entre outras -, as práticas de monitoramento e avaliação podem ser processos promotores de intenso aprendizado organizacional e acúmulo de conhecimento no setor, bem como de estreitamento dos elos entre os diversos atores envolvidos, suscitando reflexões permanentes sobre o papel dos financiadores como agentes de transformação social e aproximando as instituições de seu sentido público mais amplo.

No entanto, de acordo com os dados do Censo GIFE 2018, monitoramento e mensuração de impacto são ainda algumas das principais dificuldades na percepção dos investidores sociais na hora de apoiar organizações da sociedade civil (OSCs). A mensuração do impacto dos projetos ou programas foi apontada por 36% dos respondentes, enquanto a dificuldade de monitorar e avaliar iniciativas de OSCs, por 14%.

Gráfico 1 – Organizações por duas principais dificuldades para apoiar OSCs

Fonte: Censo GIFE 2018 (página 59)

Ao mesmo tempo, percebe-se o quanto a prática tem avançado no campo. Quando perguntados sobre sua estrutura para monitoramento e avaliação de projetos ou programas, 76% dos respondentes do Censo GIFE 2018 afirmaram refletir sistematicamente sobre os processos de monitoramento e avaliação para poder melhorá-los e implementá-los nos próximos anos, e 71% deles preveem recursos para tal finalidade.

Quando o assunto são as dificuldades e barreiras encontradas por investidores sociais privados para avaliar projetos ou programas, o Censo GIFE mostrou que os altos custos de desenvolvimento de uma boa avaliação foram indicados como entrave por metade dos respondentes (50%). Em segundo lugar está a dificuldade de mensurar o impacto (46%), seguida de falta de tempo (38%) ou habilidade das equipes (25%). Questões relacionadas aos métodos de avaliação e aos recursos humanos disponíveis também foram mencionadas por uma parcela importante das organizações respondentes. Somente 11% não identificaram obstáculos para o desenvolvimento de avaliações de projetos ou programas.

Desafios ainda presentes

Membros de equipes de associados ao GIFE e outros especialistas no assunto elencaram os principais desafios na hora de gerir e monitorar a relação com os grantees (donatários), bem como de identificar e avaliar os resultados e impactos da parceria. São eles:

• Estabelecimento e manutenção de um diálogo transparente e contínuo entre financiador e grantee;
• Estratégia de monitoramento e avaliação alinhada entre financiador e grantee para nivelamento de expectativas e objetivos;
• Construção de relações de confiança e transparência entre todos os envolvidos a fim de ser possível observar os efeitos, tanto positivos quanto negativos, da intervenção;
• Crescente complexidade das intervenções sociais implementadas ou apoiadas, o que gera mais demandas no acompanhamento, monitoramento e avaliação da parceria por parte do financiador;
• Graus de importância e níveis de instabilidade do contexto no qual atuam as iniciativas apoiadas, que podem afetar os resultados do financiamento;
• Mudanças sistêmicas – que é o impacto de longo prazo que se espera de uma relação de financiamento – exigem trabalho de colaboração entre atores diversos;
• Sistemas de monitoramento e avaliação que sejam contínuos, focados em aprendizado organizacional e na promoção da gestão adaptativa;
• Distância entre atores da avaliação, seja das equipes ou avaliadores externos contratados pela organização financiadora, e públicos-alvo ou territórios das iniciativas;
• Implementação de estratégias de monitoramento e avaliação cada vez mais personalizadas que consigam integrar os resultados;
• Manutenção de indicadores e dados atualizados, especialmente quando a organização financiadora não detém uma equipe própria de monitoramento e avaliação para acompanhamento dos financiamentos e apoios aos grantees;
• Dificuldade de consenso sobre o conceito de impacto (diretos, indiretos, resultados de curto, médio ou longo prazo, transformações sistêmicas, etc.) e diversos desafios de ordem metodológica dentro de cada um deles. Isso também pode ter relação com o nível de subjetividade que se percebe em grande parte das avaliações de impacto.

Lições e recomendações

A seguir, especialistas em monitoramento e avaliação e profissionais de instituições do investimento social brasileiro dão dicas e indicam conteúdos de referência para quem quer se aprofundar no assunto.

• Estabelecer relações equilibradas, transparentes e de confiança mútua é um pano de fundo essencial para uma avaliação que potencialize ainda mais as ações em parceria;
• Comunicar-se de forma clara: garantir alinhamentos e pactuações entre todos os envolvidos, bem como manter as lideranças a par de todo processo e das especificidades do apoio destinado ao fortalecimento institucional para alinhamento de expectativas;
• Estabelecer um processo de monitoramento e avaliação mais qualificado permite uma gestão mais estratégica e uma comunicação mais efetiva sobre o programa. Esses pontos contribuem para o fortalecimento institucional das organizações de dois modos: de forma direta, com o aprimoramento das intervenções e, de forma indireta, com diálogo com outros financiadores para que também façam apoios nesses moldes;
• Utilizar a avaliação para geração de aprendizados e aperfeiçoamento da ação e da própria prática de avaliação;
• Estabelecer relação de corresponsabilidade quanto aos processos de monitoramento e avaliação com as equipes dos grantees;
• Realizar acompanhamento próximo e personalizado para entender a dinâmica e o contexto de atuação de cada grantee;
• Trabalhar o sentido do monitoramento e avaliação também em relação aos próprios contextos e necessidades dos grantees, alinhando-o às estratégias de comunicação e captação de recursos, para além do processo de ação-reflexão-ação. Isso pode trazer mais engajamento e adesão por parte das organizações apoiadas.

PARA SABER MAIS

Better Evaluation
Rede global que visa melhorar a prática e a teoria da avaliação por meio da co-criação, curadoria e compartilhamento de informações.

What Funders Can Do to Promote Impact Measurement
Artigo aborda estudo do New Philanthropy Capital (NPC) sobre práticas de medição de impacto de instituições filantrópicas do Reino Unido.

Whose Impact Are We Measuring? Proving the Efficacy of Participatory Grantmaking
Artigo sobre doações participativas, aquelas que compartilham o poder de decisões sobre estratégia e critérios com as comunidades ou organizações apoiadas.

Contribuíram para a elaboração deste conteúdo: Ana Lima (Conhecimento Social), Ana Maria Barbosa Carminato (Fundação Itaú Social), Camila Cirillo (GIFE) e João Martinho (Laudes Foundation).