• **Problema: **Pode ser difícil escolher a abordagem correta para a avaliação.
  • **Por que é importante: **A lente de avaliação que escolhemos usar determinará como vemos um problema, quem escolhemos para nos ajudar a resolvê-lo e o tipo de ação que tomaremos.
  • Solução: Ao aprenderem as melhores formas de avaliar estas iniciativas, os funcionários públicos podem tomar melhores decisões e melhorar as suas competências de avaliação, levando a melhores resultados.

Os problemas que os servidores públicos enfrentam hoje, em termos de complexidade, turbulência e escala, são diferentes do que costumavam ser. As iniciativas destinadas a melhorar a igualdade e equidade de género podem, por exemplo, durar vários anos e envolver estratégias multifacetadas. Estão também profundamente enraizados nas dinâmicas sociais, culturais e sistémicas.

Alguns métodos de avaliação tradicionais estão ultrapassados ​​e são incapazes de captar as nuances do cenário político atual. Quando pensamos em avaliar a mudança ou o impacto, vemos cada vez mais a necessidade de compreender as histórias humanas para além dos números. Enquanto as abordagens mais convencionais apoiam a melhoria, os testes somativos e a responsabilização, as abordagens discutidas neste artigo apoiam o desenvolvimento da inovação e da adaptação em ambientes dinâmicos, centrados predominantemente na experiência humana.

Escolhendo uma abordagem de avaliação

Quando falamos de avaliação, é comum ouvirmos termos grandiosos como “padrão ouro”. No entanto, a realidade costuma ser muito diferente. A escolha da melhor abordagem de avaliação para os seus propósitos depende sempre do contexto – o que funciona num local pode não funcionar noutro. Quer você mesmo esteja conduzindo a avaliação ou contratando externamente, é importante compreender que a melhor abordagem é aquela que se adapta aos seus objetivos, recursos e contexto cultural específicos.

A abordagem de avaliação escolhida será a lente abrangente através da qual um programa ou intervenção será avaliado. A abordagem que escolher influenciará a forma como trabalha com as partes interessadas, como avalia os resultados e a probabilidade de o seu relatório de avaliação ter um impacto significativo nas políticas. É um processo que merece consideração e exploração de como os diferentes métodos de avaliação se enquadram na sociedade em geral. A abordagem que você usa também provavelmente terá impacto nos métodos específicos de coleta de dados que você usa para conduzir sua avaliação.

Os funcionários públicos enfrentam desafios únicos e complexos, e avaliar iniciativas destinadas a promover uma sociedade mais justa e equitativa pode ser uma tarefa difícil. As abordagens de avaliação em discussão neste artigo visam abordar estas complexidades. Selecionadas pela sua adaptabilidade, inclusão e ênfase na compreensão dos mecanismos de mudança, estas metodologias capacitam a pessoa que as aplica para ilustrar o impacto de qualquer iniciativa.

Avaliação Participativa

As abordagens participativas passam do simples envolvimento com as partes interessadas para que estas sejam participantes ativos no processo. Os objectivos centrais da avaliação participativa são duplos: fomentar a inclusão e gerar transparência, com especial ênfase na capacitação das comunidades marginalizadas, garantindo que cada voz tenha significado. Ao integrar estes princípios na abordagem de avaliação escolhida, você não só enriquece a profundidade dos seus insights, mas também garante que os seus processos sejam caracterizados por um compromisso com a inclusão, a transparência e a capacitação.

Consulte o nosso artigo “Métodos de recolha de dados” para obter mais informações sobre métodos práticos que apoiam abordagens participativas. Se você quiser saber mais sobre avaliação participativa, adoramos esta orientação fornecida pelo Health Nexus .

Avaliação realista

A avaliação realista é uma abordagem que vai além de determinar se uma iniciativa funciona ou não. Aprofunda-se na compreensão do que funciona para quem, em que contextos, em que aspectos e como .

Isto envolve a recolha de mais do que apenas dados básicos sobre os resultados ou sobre a forma como o programa foi executado. Trata-se de realmente compreender as nuances que afetam o programa e identificar exatamente o que está causando as mudanças e em que circunstâncias. É uma forma de compreender plenamente a complexidade do impacto de um programa.

A avaliação realista dota o avaliador da capacidade de compreender os mecanismos subjacentes que impulsionam a mudança ou dificultam o progresso. Ao dissecá-los, juntamente com os factores contextuais que influenciam o resultado de um programa, os funcionários públicos podem identificar e abordar as causas profundas das desigualdades e das dinâmicas de poder adversas, e criar políticas que sejam mais inclusivas e que trabalhem activamente para reduzir as disparidades.

Algumas características principais da Avaliação Realista incluem:

  • **Contexto: **A avaliação realista começa com uma análise minuciosa dos factores sociais, culturais e ambientais que influenciam a implementação e os resultados do programa. Esta etapa é crucial para compreender o cenário em que uma política irá operar, ajudando assim a prever potenciais desafios e oportunidades.
  • Mecanismo: Este aspecto envolve a identificação dos processos, comportamentos ou respostas subjacentes que são desencadeados pelo programa. Ao compreender estes mecanismos, os funcionários públicos podem conceber iniciativas que potenciem respostas positivas e mitiguem as negativas, promovendo ambientes onde a equidade possa prosperar.
  • Resultado: Os avaliadores examinam as consequências pretendidas e não intencionais de um programa, oferecendo uma visão holística do seu impacto. Esta compreensão abrangente ajuda a refinar as políticas para garantir que alcançam os resultados desejados e não perpetuam inadvertidamente as desigualdades.
  • Configurações Contexto-Mecanismo-Resultado (CMO): Servem como explicações detalhadas que conectam contexto, mecanismos e resultados, fornecendo um roteiro para compreender como e por que um programa funciona. Ao aproveitar estas configurações, os funcionários públicos podem desenvolver uma compreensão profunda da dinâmica em jogo.

Se você quiser saber mais, adoramos a orientação fornecida pela Better Evaluation . Também gostamos deste exemplo de estudo de caso do ITAD .

Avaliação Feminista

Na sua essência, a avaliação feminista centra-se na análise de género, na dinâmica de poder e na inclusão. Considera as perspectivas e experiências de grupos marginalizados, através de uma perspectiva sensível ao género, garantindo que o próprio processo de avaliação seja equitativo. Esta abordagem visa dissecar as desigualdades de género existentes que promovem a injustiça social, abrindo assim o caminho para políticas baseadas na equidade.

A avaliação feminista reconhece que a avaliação é uma actividade inerentemente política, encorajando o avaliador a tornar-se um activista - nomeadamente ao reconhecer o poder que tem em facilitar espaços para as pessoas partilharem experiências, partilharem conhecimentos e alavancarem este conhecimento para a mudança social.

O que diferencia a avaliação feminista é a sua ênfase no escrutínio não apenas dos resultados, mas também dos processos e metodologias empregues nas avaliações. Defende um processo que seja justo e promova a igualdade desde o início, garantindo assim que o caminho para o objetivo final seja tão equitativo quanto o próprio objetivo.

Ao contrário de outras abordagens de avaliação, a avaliação feminista não defende uma metodologia específica. Em vez disso, é muitas vezes vista como uma forma de encarar a avaliação. Para entender como a avaliação feminista pode ser uma ferramenta poderosa, vamos analisar algumas de suas principais características:

  • Participação : Tal como a avaliação participativa, a avaliação feminista enfatiza o envolvimento de grupos marginalizados e sub-representados no processo de avaliação. Valoriza suas perspectivas e experiências. Em teoria, isto leva a políticas que não são apenas para as pessoas afetadas, mas também moldadas por elas.
  • **Dados qualitativos: **Os dados quantitativos podem nos dizer muito, mas não podem nos dizer tudo. A avaliação feminista encoraja-nos a ouvir as histórias das pessoas, a compreender profundamente as suas experiências e a utilizar esta rica informação para moldar políticas que sejam eficazes e empáticas.
  • Análise Contextual: A avaliação feminista reconhece que os contextos sociais e culturais são importantes. Exorta-nos a considerar os antecedentes sociais e culturais das pessoas afetadas pelas políticas, garantindo que as estratégias que desenvolvemos se baseiam nos contextos do mundo real de diversos grupos.
  • **Reconhecendo a diferença: **Promove uma compreensão diferenciada das experiências das mulheres, instando os avaliadores a evitar a homogeneização das mulheres como categoria e a apreciar e valorizar as diversas experiências e perspectivas que elas trazem para a mesa.
  • **Objetivos Transformativos: **A avaliação feminista não se trata apenas de avaliação; trata-se de promover mudanças transformadoras. Desafia e procura alterar as estruturas e sistemas que perpetuam a desigualdade de género, visando um futuro assente na equidade e na justiça.

Os termos “Feminista” e “Avaliação” podem por vezes levar a suposições; você precisaria ser feminista para usar essa abordagem, ela trata apenas de questões femininas ou é muito focada no gênero. Portanto, se você está pensando em usar essa abordagem, evite o uso de rótulos. Em vez disso, explique claramente quais partes da abordagem de avaliação feminista você está usando e por que ela funciona para a iniciativa que você está avaliando. Dessa forma, as pessoas podem ver os reais benefícios da abordagem sem se deixarem levar pelo nome.

Se você quiser saber mais, adoramos as orientações fornecidas pela Actionaid . Também adoramos este exemplo de estudo de caso, da Global Affairs Canada .

Avaliação de Desenvolvimento**

A Avaliação do Desenvolvimento (AD) não é uma abordagem progressiva desenvolvida para avaliar programas complexos. Enquanto outras abordagens se concentram na medição dos resultados, a ED centra-se no fornecimento de feedback em tempo real e na realização de adaptações em resposta às mudanças nas circunstâncias.

Esta abordagem é particularmente adequada para o desenvolvimento da inovação, que ocorre em ambientes complexos, dinâmicos e em rápida mudança e onde as metas e objectivos podem não ser claros desde o início. No mundo acelerado de hoje, os funcionários públicos enfrentam problemas complexos que exigem flexibilidade e adaptabilidade. Isto torna a ED uma ferramenta valiosa para os funcionários públicos que navegam em novos projetos, programas, produtos, mudanças organizacionais, reformas políticas e intervenções no sistema.

Algumas características principais do DE incluem:

  • **Envolvimento das partes interessadas: **A ED enfatiza o envolvimento das partes interessadas , garantindo que diversas perspectivas e vozes sejam incluídas nos processos de tomada de decisão e, em última análise, em programas mais inclusivos e equitativos. Juntos, as partes interessadas e os avaliadores definem os objetivos e os resultados pretendidos, reconhecendo que estes podem evoluir ou adaptar-se com o tempo. Consulte nosso curso gratuito de envolvimento das partes interessadas para obter mais informações.
  • **Incorporado, não independente: **DE envolve um avaliador incorporado dentro da equipe do projeto, afastando-se do modelo tradicional de avaliador independente. Ao contrário das avaliações convencionais, a ED incentiva o raciocínio rigoroso e transparente, desde os dados até aos juízos de valor, incluindo conclusões negativas. Nesse sentido, a EaD é uma abordagem corajosa — que depende de o avaliador manter conversas difíceis e transparentes.
  • **Coleta contínua de dados e feedback: **DE depende da coleta contínua de dados, enfatizando dados qualitativos e feedback em tempo real. Reuniões regulares e sessões de feedback com as partes interessadas também ajudam a informar a tomada de decisões. Estas discussões não se limitam a métricas predeterminadas, mas abrangem o contexto mais amplo e os insights emergentes.
  • **Correção de curso em tempo real: **Conforme discutido, os avaliadores usam os insights obtidos com a DE para tomar decisões adaptativas. Esta capacidade de fazer correcções ágeis de rumo à medida que surgem problemas, em vez de esperar pelo fim de um programa ou ciclo político, pode evitar erros dispendiosos e melhorar a eficácia do programa. A natureza iterativa da ED é o que a diferencia das abordagens de avaliação mais tradicionais, mas como não é o que as pessoas estão habituadas, também pode ser desconfortável para aqueles que a encomendam.

Se você quiser saber mais sobre o trabalho de ED na prática, adoramos este recurso da Fundação McConnell e este recurso da USAID .

Os funcionários públicos precisam estar prontos para lidar com os problemas à medida que surgem e aproveitar ao máximo cada oportunidade. Dedicar tempo à compreensão das abordagens de monitorização e avaliação significa que podemos melhorar significativamente as nossas hipóteses de identificar e mitigar riscos, utilizar os recursos disponíveis de forma mais eficaz, fazer alterações quando necessário e parar de fazer coisas com confiança quando estas não funcionam.

Os problemas modernos exigem soluções modernas. As abordagens aqui descritas não são apenas conceitos teóricos, são conjuntos de ferramentas práticas que podem ser usadas para ajudar os funcionários públicos a compreender, adaptar e tomar decisões políticas informadas e eficazes. É importante notar que estes métodos não são mutuamente exclusivos; na verdade, podem complementar-se para fornecer uma compreensão mais abrangente das questões complexas que os servidores públicos enfrentam no seu trabalho diário.

👋 Adoraríamos saber o que você pensa! Deixe-nos um comentário abaixo para compartilhar suas idéias.

(Crédito da imagem: Unsplash)