Colheita de Resultados

Also Available In: English, Español

A Colheita de Resultados obtém-se evidencia do que mudou (os resultados) e logo, trabalha para trás para determinar se e como uma intervenção contribuiu para essas mudanças.

A Colheita de Resultados tem sido especialmente útil em situações complexas, quando não foi possível predefinir concretamente o que uma intervenção visa alcançar, ou até mesmo não pode predizer quais ações específicas serão tomadas ao longo de um período de vários anos.

Página em construção. Este texto foi traduzido eletronicamente ao português utilizando o Google Translate.

1 O que é o Colheita de Resultados?

Colheita de Resultados é uma abordagem de avaliação no qual avaliadores, fabricantes de concessão, e os gerentes e funcionários / ou programa identificar, formular, verificar, analisar e interpretar os "resultados" em contextos de programação em que as relações de causa e efeito não são totalmente compreendidos.

Os resultados são definidos como mudanças no comportamento "em larga escala" (tais como ações, relações, políticas, práticas) de um ou mais atores sociais influenciados por uma intervenção. Por exemplo, um líder religioso fazendo uma proclamação, que é inédita e considerada importante; uma mudança no comportamento entre organizações ou entre as comunidades; mudanças nos regulamentos, leis formais ou normas culturais.​

Ao contrário de algumas abordagens de avaliação, Outcome colheita não mede a evolução dos objectivos ou resultados pré-determinados, mas sim, coleta de provas do que mudou e, em seguida, trabalhar para trás, determina se e como uma intervenção contribuiu para essas mudanças. O resultado (s) pode ser positivo ou negativo, intencional ou não, direta ou indireta, mas a conexão entre a intervenção e os resultados devem ser plausível.

A informação é coletada ou "colhido", usando uma variedade de métodos para produzir respostas baseadas em evidências para questões úteis, acionáveis ("questões de colheita").

Colheita de Resultados pode ser usado para monitoramento, bem como para a avaliação (incluindo a avaliação do desenvolvimento, formativa ou sumativa) das intervenções ou organizações.

2 Onde é que Colheita de Resultados vem?

A abordagem é inspirada por Mapeamento de Resultados e informado por avaliação centrou-Utilization. Ele foi desenvolvido por Ricardo Wilson-Grau e colegas * que, como co-avaliadores, aplicou-o em diferentes circunstâncias e aperfeiçoada ao longo de muitos anos de prática da avaliação.

*Barbara Klugman, Claudia Fontes, David Wilson-Sánchez, Fe Briones Garcia, Gabriela Sánchez, Goele Scheers, Heather Britt, Jennifer Vincent, Julie Lafreniere, Juliette Majot, Marcie Mersky, Martha Nuñez, Mary Jane Real, Natalia Ortiz, e Wolfgang Richert.

3 Quando pode Colheita de Resultados deve ser utilizado?

Colheita de Resultados é particularmente útil quando os resultados, e até mesmo, insumos, actividades e resultados, não são suficientemente específica ou mensurável no momento de planejar uma intervenção. Assim, Resultado de colheita é bem adequada para a avaliação em situações dinâmicas, incertos (isto é, complexo).

Colheita de Resultados é recomendada quando:

  1. O foco está principalmente em resultados em vez de atividades. Colheita de Resultados é projetado para situações em que tomadores de decisão (como "usuários de colheita") está mais interessado em aprender sobre o que foi alcançado e como. Em outras palavras, há uma ênfase na eficácia, em vez de eficiência ou desempenho. A abordagem é também uma boa opção quando o objetivo é compreender o processo de mudança e como cada resultado contribui para esta mudança.
  2. O contexto de programação é complexa. Colheita de Resultados é adequado para contextos de programação em que as relações de causa e efeito não são totalmente compreendidos. Monitorização convencional e avaliação teve como objetivo determinar os resultados compara os resultados planejados com o que de fato ocorre, e atividades com o que realmente foi feito planejado. Em ambientes complexos, no entanto, os objetivos e os caminhos para alcançá-los são os objectivos e teorias de mudança muito imprevisíveis e pré-definidos devem ser modificados ao longo do tempo para responder às mudanças no contexto. Colheita de Resultados é particularmente apropriado nesses ambientes mais dinâmicos e incertos em que os resultados não intencionais dominam, incluindo os negativos. Consequentemente, Colheita de Resultados é particularmente adequado para avaliar as intervenções de mudança social ou inovação e trabalho de desenvolvimento.
  3. O objetivo é a avaliação. Colheita de Resultados pode servir para rastrear as mudanças no comportamento dos atores sociais influenciados por uma intervenção. No entanto, ele é projetado para ir mais além e apoiar a aprendizagem sobre essas conquistas. Assim, Colheita de Resultados é particularmente útil para em curso formativo de desenvolvimento, a médio prazo, e somativas de fim de prazo. Ele pode ser usado por si só ou em combinação com outras abordagens.

O momento da "colheita" depende de como essencial as conclusões colheita são para garantir a intervenção está indo na direção certa. Se a segurança é relativamente grande que fazer A resultará em B, a colheita pode ser programada para coincidir com quando se espera que os resultados. Por outro lado, se existe muita incerteza sobre os resultados que a intervenção vai atingir, a colheita deve ser agendado o mais rapidamente possível para determinar os resultados que estão a ser realmente conseguidas.

4 Quem deve estar envolvido em Colheita de Resultados?

Um processo altamente participativo é uma necessidade para um processo Colheita de Resultados bem sucedida e produto.

Dependendo da situação, seja uma pessoa externa ou interna ("o harvester") é designado para liderar o processo de Colheita de Resultados. Colheitadeiras facilitar e apoiar a participação adequada e garantir que os dados são credíveis, os critérios e padrões para analisar as evidências são rigorosos, e, os métodos de síntese e interpretação são sólidos.

"Usuários de colheita" são indivíduos ou organizações que requerem os resultados para tomar decisões ou agir. Eles devem ser envolvidos em todo o processo. Esses usuários devem estar envolvidos na tomada de decisões sobre o projeto e re-design da abordagem, tanto o processo e os resultados se desenrolar. Além disso, o diretor usa para a colheita pode mudar como os resultados são gerados, que, por sua vez, pode exigir decisões re-projeto.

A colheitadeira também precisa se envolver informantes que estão bem informados sobre o que a intervenção atingiu e como, e que estão dispostos a compartilhar, para o registro, o que eles sabem. O pessoal de campo que estão posicionados "mais próximo da ação" tendem a ser os melhores informantes.

5 Como é Colheita de Resultados feito (visão geral)?

O harvester obtém informações do indivíduo (s) ou organização (s) de execução da intervenção, cujas ações visam influenciar resultado (s), a fim de identificar as mudanças reais nos atores sociais e como a intervenção influenciado eles.

"Descrições de resultados" são elaborados para um nível de detalhe considerado útil para responder às questões de colheita. As descrições podem ser tão breve quanto uma única frase ou detalhados, como uma página ou mais de texto. Eles podem incluir declarações de contexto, a colaboração com ou contributos de outros para o resultado específico; diversas perspectivas sobre o resultado; e, a importância do resultado. As informações colhidas sofre várias rodadas de revisões para torná-lo específico e abrangente o suficiente para ser verificáveis.  

Posteriormente, as informações sobre selecione resultados são validados por comparação com as informações recolhidas a partir de outras fontes de conhecimento e autoridade, mas independentes,.

Finalmente, as descrições de resultados validados são analisados e interpretados -seja como um resultado individual ou como um grupo de outcomes- pelo seu significado na obtenção de uma missão, objetivo ou estratégia e são usados para responder às questões de colheita.

6 Como é feito Colheita de Resultados (seis passos-chave)?

A abordagem Colheita de Resultados deve ser personalizado para as necessidades específicas das primárias destina usuários / usos. Os seis "steps", discutidas a seguir, devem ser tomadas mais como princípios orientadores, em vez de fórmulas rígidas a serem seguidas. No entanto, a aplicação rigorosa de todos os seis princípios é necessário para um som e credível colheita resultado.

  1. Projetar o Colheita de Resultados: O primeiro passo é identificar o primário destina usuários da colheita e de sua principal efeito pretendido usos para o processo de colheita e descobertas. Com base nessas, os usuários de colheita e colheitadeiras concordam que precisa ser conhecido e escrever úteis, perguntas acionáveis para orientar a colheita (colheita de perguntas). Por exemplo, uma pergunta útil pode ser: Qual tem sido o efeito coletivo de bolseiros em fazer o regime de governança nacional mais democrática e que isso significa para a estratégia portfolio's? Em seguida, eles concordam que as informações devem ser coletadas e de quem, a fim de responder às perguntas. No mínimo, isso envolve a obtenção de informações sobre as mudanças em atores sociais e como a intervenção influenciado eles.

  2. Descrições de documentação Comente e projecto de resultado: A partir dos relatos, avaliações anteriores, comunicados de imprensa e outros documentos, colheitadeiras identificar potenciais resultados (ou seja, as mudanças nos indivíduos, grupos, comunidades, organizações ou instituições) e que a intervenção fez a contribuir para eles. Por exemplo, a mudança pode ser um compromisso público do presidente para ser transparente (comportamento); duas agências governamentais que colaboram em vez de concorrentes (relacionamentos); um ministro disparar um funcionário público corrupto (ação); o legislador aprovação de uma nova lei anti-corrupção (política); ou um terceiro governo consecutivo da publicação dos seus registros de contratos (prática). A influência do agente de mudança pode variar de inspirar e encorajar, facilitar e apoiar, de persuadir ou pressionar o actor social para mudar.

  3. Envolver-se com informantes na formulação de descrições de resultados: Colheitadeiras envolver diretamente com informantes para avaliar as descrições de resultados com base na análise dos documentos, bem como identificar e formular os resultados adicionais. Os informantes, muitas vezes consultar com outras pessoas, dentro ou fora da organização bem informados sobre os resultados a que tenham contribuído.

  4. Fundamentar: usuários de colheita e colheitadeiras rever os resultados finais e selecione aqueles que devem ser verificadas, a fim de aumentar a precisão e credibilidade dos resultados. As colheitadeiras obter os pontos de vista de uma ou mais pessoas que são independentes da intervenção (terceiro), mas bem informados sobre um ou mais dos resultados e contribuição do agente de mudança.

  5. Analisar e interpretar: Ceifeiras, classificar todos os resultados, muitas vezes, em consulta com os informantes. As classificações são geralmente obtidos a partir de questões úteis; eles também podem estar relacionados com os objectivos e estratégias, quer do implementador da intervenção ou de outras partes interessadas, tais como doadores. Para as grandes colheitas, multidimensionais, um banco de dados é necessário para armazenar e analisar as descrições de resultados. Colheitadeiras interpretar as informações e fornecer respostas baseadas em evidências para as perguntas de colheita.

  6. Uso de Apoio das constatações: Colheitadeiras propor assuntos para discussão de usuários colheita fundamentadas nas respostas baseadas em evidências para as perguntas de colheita. Eles facilitam as discussões com os usuários, que podem incluir como eles podem fazer uso dos resultados.

Estes passos não são necessariamente distintas; eles podem se sobrepor e pode ser iterativo; feedback pode desencadear decisões de re-projetar um próximo passo ou retornar ou alterar uma etapa anterior. Normalmente, o feedback da etapa 4 (comprovação) e passo 5 (análise e interpretação) não influencia as etapas anteriores; o feedback da etapa 6 (suporte de uso) afeta apenas a etapa 5 (análise e interpretação). No entanto, o feedback de todos os passos podem, naturalmente, influenciar as decisões sobre a colheita futura tanto para fins de avaliação ou acompanhamento.

Note-se que "Colheita de Resultados" é feito quantas vezes for necessário para entender o que o agente de mudança está a atingir. Dependendo do período de tempo abrangido e o número de resultados envolvidos, a abordagem pode exigir um compromisso substancial do tempo a partir de informantes. Para reduzir o fardo do tempo em informantes, os resultados podem ser colhidos, mensal, trimestral, semestral ou anualmente. Achados podem ser justificados, análises ou interpretados com menos freqüência.

Os passos acima são explicadas em mais detalhe em Colheita de Resultados por Wilson-Grau R e Britt H (2013).

7 Onde e por quem tem Colheita de Resultados foi usado?

Organizações não-governamentais, organizações comunitárias de base, redes, agências governamentais, agências de financiamento, universidades e institutos de pesquisa têm usado Colheita de Resultados em mais de 143 países. Em 2013, o Gabinete de Avaliação do Programa das Nações Unidas para o Desenvolvimento (PNUD) selecionado Colheita de Resultados como um dos onze inovações promissoras no monitoramento e práticas de avaliação. Depois de dez equipes do Instituto do Banco Mundial pilotou uma versão personalizada da Colheita de Resultados, a abordagem e ferramentas como personalizado para o Instituto foram listados entre os seus recursos para a monitorização e avaliação interna. A Agência dos Estados Unidos para o Desenvolvimento Internacional (USAID) escolheu Colheita de Resultados como um dos cinco abordagens particularmente adequados para o monitoramento e avaliação em situações incertas dinâmicas.

Assim, Colheita de Resultados provou ser uma abordagem útil em uma variedade de locais e de diversas intervenções. Alguns exemplos são:

8 Pontos fortes e limitações de Colheita de Resultados

A seguir, os pontos fortes são reconhecidos de Colheita de Resultados:

  • Supera a falha comum para procurar resultados não intencionais das intervenções;
  • Gera resultados verificáveis;
  • Usa um senso-comum, a abordagem acessível que envolve informantes muito facilmente;
  • Emprega vários métodos de coleta de dados, como entrevistas e pesquisas (face-a-face, por telefone, por e-mail), workshops e revisão de documentos;
  • Responde a perguntas acionáveis com provas concretas.

Limitações e desafios incluem:

  • Habilidade e tempo, bem como actualidade, são necessárias para a identificação e formulação de descrições de resultados de elevada qualidade;
  • Apenas os resultados que os informantes estão conscientes, são capturados;
  • A participação daqueles que influenciam os resultados é crucial;
  • Começando com os resultados, e trabalhando para trás representa uma nova maneira de pensar sobre a mudança para alguns participantes.

9 Recursos

  • O que é o resultado de colheita? Ricardo Wilson-Grau (setembro 2014) explica a essência da abordagem Colheita de Resultados neste breve vídeo (<3 minutos).

  • Colheita de Resultados. Esta breve, escrito por Ricardo Wilson-Grau e Heather Britt, apresenta os principais conceitos e abordagens utilizadas por colheita de resultados (publicados pela Fundação Ford, em maio de 2012; revisto em novembro de 2013).

Cite this page

Wilson-Grau, R. (2015) Colheita de Resultados. BetterEvaluation. Retirado de http://betterevaluation.org/plan/approach/outcome_harvesting_pt

A special thanks to this page's contributors
Author
Principal, Ricardo Wilson-Grau Consultoria em Gestão Empresarial Ltda..
Rio de Janeiro, Brazil.
Reviewer
Deputy Director/BetterEvaluation Project, RMIT University.
Melbourne, Australia.
Reviewer
UX Designer / Infomation Architect, BetterEvaluation.
Melbourne, Australia.

Comments

There are currently no comments. Be the first to comment on this page!

Add new comment

Login Login and comment as BetterEvaluation member or simply fill out the fields below.