O relatório do projeto dizia que haviam atendido trezentas crianças no ano. Trezentas crianças, número expressivo, que aparecia em destaque na capa, que o financiador viu e aprovou. O que o relatório não dizia era o que havia mudado na vida dessas trezentas crianças. Se elas estavam indo melhor na escola. Se os vínculos familiares haviam melhorado. Se alguma delas havia saído de uma situação de risco. Se o trabalho havia feito diferença.
Trezentas crianças atendidas é dado de produto. O que o campo social frequentemente chama de impacto é, na verdade, escala de atendimento. E confundir os dois é um problema que afeta tanto a qualidade do trabalho quanto a credibilidade das organizações sociais com financiadores, com o poder público e com a própria comunidade que servem.
Medir impacto social real é mais difícil do que contar crianças atendidas. Exige saber o que se está tentando mudar, como verificar se a mudança aconteceu e se aconteceu por causa do trabalho da organização. Mas não é impossível, e organizações de qualquer porte e com qualquer orçamento podem fazê-lo, em gradações proporcionais aos seus recursos.
Este artigo é um guia prático para organizações sociais que querem medir o que realmente importa, e comunicá-lo de forma que demonstre valor real, não apenas escala.
A cadeia lógica: insumos, atividades, produtos, resultados e impacto
O primeiro passo para medir impacto é ter clareza sobre o que cada conceito significa, porque são frequentemente confundidos, com consequências sérias para o que se mede.
| Insumos | Atividades | Produtos | Resultados | Impacto |
| O que a organização investe | O que a organização faz | O que a organização entrega | O que muda nas pessoas atendidas | A mudança de longo prazo na comunidade ou no sistema |
| Recursos financeiros, equipe, espaço, tempo, metodologia | Oficinas de artes, tutoria, grupos socioeducativos, acompanhamento familiar | Crianças atendidas, horas de atividade, materiais produzidos | Melhora no desempenho escolar, desenvolvimento socioemocional, fortalecimento de vínculos | Redução da evasão escolar, maior proteção social, trajetórias de vida mais prósperas |
A confusão mais comum é entre produtos e resultados. “Realizamos 120 oficinas de artes” é produto. “60% das crianças que participaram das oficinas melhoraram a autorregulação emocional medida antes e depois” é resultado. Produtos são o que a organização faz; resultados são o que muda nas pessoas. Impacto vai além ainda: é a mudança de longo prazo que persiste, que se generaliza, que transforma o contexto e que é muito mais difícil de medir.
Uma cadeia lógica bem desenhada mostra: com esses insumos, fazemos essas atividades, que produzem esses produtos, que causam esses resultados, que contribuem para esse impacto. Cada elo da cadeia precisa ser plausível e a organização precisa decidir em qual elo vai focar sua medição.
Não confunda alcance com impacto. Atender muitas pessoas é importante, mas atender muitas pessoas sem saber o que muda na vida delas é administrar escala, não gerar impacto.
Por que as organizações medem o que é fácil medir
Há uma razão simples pela qual a maioria das organizações sociais reporta produtos em vez de resultados: produtos são muito mais fáceis de medir. Contar crianças atendidas é simples. Medir melhora no desenvolvimento socioemocional exige instrumento validado, linha de base, coleta antes e depois, e análise.
A pressão dos financiadores também contribui: muitos editais e relatórios pedem números de atendimento, não evidência de mudança. Quando o financiador aceita, e às vezes até prefere, dados de produto, a organização não tem incentivo para investir no esforço adicional de medir resultado.
O problema é que essa lógica cria um campo social que sabe muito sobre quantas pessoas atende e muito pouco sobre se o trabalho que faz é eficaz. E sem saber se o trabalho é eficaz, é impossível melhorá-lo de forma sistemática ou defender com credibilidade que merece continuar sendo financiado.
Indicadores de resultado para OSCs que atendem crianças
A tabela abaixo organiza exemplos de indicadores de resultado, não de produto, para organizações que trabalham com crianças, por dimensão:
| Dimensão | Exemplos de indicadores de resultado | Como coletar |
| Educação | % de crianças com frequência escolar regular; variação nas notas; taxa de progressão de série | Parceria com escola para dados de frequência e desempenho; avaliações aplicadas pelo projeto |
| Desenvolvimento socioemocional | Variação em escala de habilidades socioemocionais antes e depois do programa; percepção de professores e famílias | Escalas validadas (ex.: Questionário de Capacidades e Dificuldades — SDQ); entrevistas com educadores e famílias |
| Saúde e bem-estar | % de crianças com vacinação em dia; acessos a serviços de saúde; indicadores nutricionais | Dados do prontuário de saúde (com autorização); questionário de bem-estar; parceria com UBS |
| Vínculos familiares | Participação das famílias nas atividades; percepção da família sobre o projeto; qualidade do vínculo relatada | Pesquisas de satisfação com famílias; entrevistas semiestruturadas; grupos focais |
| Proteção social | % de crianças com acesso a benefícios a que têm direito; situações de risco identificadas e encaminhadas | Registro interno de encaminhamentos e resoluções; mapeamento de acesso a benefícios |
Uma observação importante: indicadores precisam ser escolhidos em função da teoria da mudança da organização, de qual é a hipótese sobre o que o seu trabalho pode mudar. Uma organização que trabalha com música vai ter indicadores diferentes de uma que trabalha com reforço escolar. Os exemplos acima são pontos de partida, não receitas.
O que é atribuição e por que é o desafio central
O maior desafio da medição de impacto não é medir a mudança, é atribuí-la ao trabalho da organização. Se uma criança melhorou o desempenho escolar durante o programa, como saber se foi por causa do programa ou porque ganhou óculos, porque o professor trocou ou porque a situação familiar melhorou?
Em ciência social, o padrão-ouro para atribuição é o ensaio clínico randomizado (RCT): dividir aleatoriamente um grupo em quem recebe a intervenção e quem não recebe, e comparar os resultados. Na maioria dos contextos de organizações sociais brasileiras, isso é inviável ética, logística e financeiramente.
O que organizações podem fazer é trabalhar com designs mais acessíveis que aumentam a plausibilidade da atribuição sem exigir RCT:
- Comparação antes × depois: medir o mesmo indicador antes e depois do programa, mostra mudança, mas não prova causalidade
- Grupo de comparação não randomizado: comparar com um grupo similar que não participou do programa, aumenta a plausibilidade da atribuição
- Teoria da mudança robusta: ter uma cadeia lógica clara e plausível de por que o programa deveria produzir a mudança medida, é argumento qualitativo para a atribuição
- Contribuição em vez de atribuição: em vez de afirmar “nosso programa causou essa mudança”, afirmar “nosso programa contribuiu para essa mudança, junto com outros fatores”, mais honesto e mais defensável
Métodos acessíveis para organizações pequenas
Medição de impacto não exige equipe de pesquisa, orçamento especial ou software sofisticado. Existem métodos simples, baratos e suficientemente rigorosos para que organizações pequenas consigam evidência de resultado:
Antes e depois com instrumento validado
Aplicar um questionário ou escala validada no início e no final do programa e comparar os resultados. O SDQ (Questionário de Capacidades e Dificuldades), validado para o Brasil, é um instrumento gratuito e amplamente usado para medir saúde mental e desenvolvimento socioemocional em crianças.
Pesquisa com participantes
Perguntar sistematicamente às crianças, famílias e professores sobre mudanças percebidas, com perguntas estruturadas e com escala de resposta, produz dados qualitativos e quantitativos sobre resultado a custo muito baixo.
Monitoramento de indicadores ao longo do tempo
Escolher três a cinco indicadores de resultado e monitorá-los ao longo do programa, com coleta sistemática, produz uma série histórica que permite identificar tendências e avaliar a evolução. Não prova causalidade, mas evidencia mudança.
Estudos de caso
Documentar em profundidade a trajetória de três a cinco participantes, com entrevistas, registros e análise longitudinal, produz evidência qualitativa rica que complementa dados quantitativos.
Passos para começar a medir resultados sem equipe dedicada
Passo 1: Escrever a teoria da mudança em uma página: o que o programa faz, por que isso deve produzir mudança, qual mudança
Passo 2: Escolher dois ou três indicadores de resultado que correspondam à mudança esperada
Passo 3: Definir como e quando coletar os dados, com instrumento simples e coleta regular
Passo 4: Coletar linha de base no início do programa, antes de qualquer intervenção
Passo 5: Coletar dados de resultado ao final e comparar com a linha de base
Passo 6: Analisar, documentar e usar os dados para melhorar o programa e para comunicar impacto
Erros comuns na medição de impacto
O que evitar na medição de impacto social
- Medir apenas o que é fácil, não o que importa para a missão
- Não ter linha de base, sem saber onde as pessoas estavam antes, não é possível dizer o quanto mudaram
- Criar indicadores após o programa para ‘confirmar’ o que já aconteceu, em vez de testar uma hipótese
- Contar o mesmo beneficiário múltiplas vezes como se fossem pessoas diferentes
- Exagerar a atribuição: dizer que o programa causou a mudança quando há muitos outros fatores envolvidos
- Medir para o financiador, não para o aprendizado, dados que não voltam para melhorar o trabalho são desperdício
Impacto como ferramenta de gestão, não apenas de relatório
O maior desperdício na medição de impacto é quando os dados são coletados para o relatório do financiador e nunca mais usados. Dados de resultado são, antes de qualquer coisa, informação para gestão: para saber o que está funcionando, o que não está, onde ajustar, onde investir mais.
Uma organização que usa seus dados de impacto para tomar decisões, sobre o que mudar na metodologia, quais grupos precisam de mais atenção, quais atividades produzem mais resultado, está praticando gestão baseada em evidência. Isso não apenas melhora o impacto: torna a organização mais credível para financiadores e parceiros que cada vez mais buscam evidência de eficácia, não apenas de escala.
Como usar dados de resultado na gestão da organização
- Reunião mensal de equipe com análise dos indicadores: o que está acima do esperado? O que está abaixo?
- Identificar quais grupos de beneficiários estão avançando menos e adaptar a abordagem
- Comparar resultados entre diferentes turmas, educadores ou metodologias para aprender o que funciona melhor
- Usar dados para embasar decisões de expansão ou de corte de atividades
- Compartilhar os dados com as próprias crianças e famílias, que também têm direito de saber se o programa está fazendo diferença
Conclusão
Medir impacto social real não é simples, mas é possível, é necessário e é o que separa organizações que sabem que fazem diferença de organizações que acreditam fazer diferença. A diferença entre as duas não é de intenção, é de evidência.
Para organizações que trabalham com crianças em contextos de vulnerabilidade, essa evidência tem dimensão de responsabilidade: as crianças e as famílias que atendem merecem saber que o trabalho está sendo feito da forma mais eficaz possível. Os financiadores que confiam recursos merecem saber se eles estão sendo bem usados. E a própria organização merece ter as ferramentas para melhorar continuamente, não apenas para fazer mais, mas para fazer melhor.
Começar pequeno é começar. Dois ou três indicadores de resultado, uma linha de base, coleta sistemática. É mais do que a maioria das organizações tem hoje e é suficiente para começar a responder à pergunta mais importante: o que mudou na vida das pessoas por causa do nosso trabalho?