2013•02•21
Rachel Gisselquist e Miguel Niño-Zarazúa
UN Photo / Albert Gonzalez Farran.
ao longo da última década, ensaios controlados randomizados (RCTs) tornaram-se um grampo de pesquisa na economia do desenvolvimento. Os defensores dos RCTs têm defendido o seu uso como o melhor meio de identificar “o que funciona” no desenvolvimento, enquanto os cépticos expressam fortes preocupações sobre sua crescente hegemonia no campo.No ano passado, dois livros influentes, Karlan e Appel mais do que boas intenções, e a pobre economia de Banerjee e Duflo, resumiram o que os RCTs podem nos dizer sobre como reduzir a pobreza global. Os cépticos, como Angus Deaton e Martin Ravallion ponto que RCTs, mesmo que, se bem projetado, não são o “padrão-ouro” para avaliação da política, como muitas vezes eles dependem de amostras pequenas (e pequenas intervenções-piloto) que não podem nos dizer muito sobre se uma política funcionaria se escala a nível nacional, ou transferidos para diferentes socioeconômico e de condições políticas.
igualmente importantes são as preocupações associadas com o fato de que os RCTs são geralmente conduzidos sob um curto período de tempo de análise, e, portanto, estão mal equipados para lidar com processos de desenvolvimento que ocorrem ao longo de décadas ou até mesmo gerações.Com base neste debate, a UNU-WIDER iniciou o projeto de métodos experimentais e não experimentais para estudar o desempenho do Governo que explora as contribuições e limites dos RCTs no estudo de outro tópico importante no desenvolvimento: governança. Apesar de uma grande literatura sobre governança e métodos experimentais, muito pouco trabalho tem considerado diretamente ambos os assuntos em conjunto desta forma.
estudar a governação
a governação é um conceito contestado, especialmente entre os profissionais do desenvolvimento. Este projeto adota uma definição de governança que se baseia em teorias do governo e do Estado, que apontam para dois papéis importantes para as instituições públicas no fornecimento de bens públicos e na representação de interesses públicos.
How, and how well, governments is a matter central to the study of the politics of development effectiveness, and the field of political science offers a variety of explanations. Grandes explicações estruturais, por exemplo, destacam os níveis de desenvolvimento, estruturas de classe e divisões étnicas. Os institucionalistas apontam como as regras e normas moldam as “regras do jogo”, muitas vezes de formas inesperadas e de longa duração, e exploram o impacto de uma série de instituições, incluindo regras eleitorais, estruturas executivas, descentralização e federalismo. Outro trabalho centra-se na forma como a cultura política afecta o funcionamento da governação democrática, bem como na influência por vezes decisiva da liderança política.As teorias tendem a lidar com os dois papéis do governo separadamente, oferecendo explicações para uma melhor representação e prestação de contas (muitas vezes enquadradas em termos do surgimento da democracia liberal versus outras formas de governo) ou para uma prestação de bens públicos mais eficaz. Muitos estudos focam em resultados de governança desagregados, como policiamento eficaz, direitos de propriedade ou cuidados de saúde universais. Na verdade, longe de ter um único modelo de mudança na governança, a literatura nos dá explicações diversas, múltiplas e, por vezes, contraditórias. Um exemplo simples é a regulamentação: será mais ou menos melhor?As conclusões do RCTs salientam uma série de estratégias, projectos e outras intervenções que os governos poderiam adoptar para melhorar aspectos específicos da governação. Algumas intervenções que têm sido exploradas em vários contextos incluem campanhas de informação pública, incentivos financeiros para melhorar o desempenho dos funcionários do setor público, sistemas de monitoramento baseados na comunidade e deliberação pública a nível local. Mas permanece um certo grau de incerteza em relação aos mecanismos subjacentes (e teorias) que explicam a distribuição dos resultados políticos para um determinado grupo de tratamento (e seu placebo) face à distribuição para toda a população.
limites das experiências de campo
na verdade, uma crítica comum aos estudos experimentais é que eles não abordam “grandes” questões nem “grandes” teorias de governança (ou desenvolvimento). A comparação das questões exploradas nos RCTs com as identificadas nas principais teorias de governança sugere que há algo a fazer.
por outro lado, os defensores dos RCTs fazem um argumento convincente de que sua micro abordagem oferece explicações mais convincentes do que as grandes teorias, olhando para pequenas reformas políticas que à margem podem levar a melhorias desejáveis na política.Por mais convincente que possa parecer, este micro-foco expõe uma das principais fraquezas dos RCTs: a baixa validade externa dos seus resultados. Precisamente porque os pesquisadores experimentais tendem a evitar a teorização de alto nível, eles têm pouco a dizer sobre o que, em contextos particulares, pode ser único ou ter influenciado os resultados, e por que seus achados devem ser esperados para ser generalizáveis. Isto é agravado pelo fato de que os experimentos raramente são replicados em vários contextos.
um terceiro limite para RCTs no estudo da governança está no tipo de fatores causais que eles podem razoavelmente estudar. Esta restrição decorre, em parte, da necessidade de estudar um grande número de unidades a fim de obter estimativas estatísticas precisas (e erros de baixo padrão), o que incentiva os investigadores a concentrarem-se em factores de baixo nível e não em factores detidos por unidades de nível superior, como as instituições nacionais. Isso também vem da simples incapacidade dos pesquisadores em manipular algumas variáveis-chave, como o nível de desenvolvimento. Noutros casos, as considerações éticas são fonte de grandes preocupações que devem ser devidamente ponderadas e avaliadas quando se estuda um determinado fenómeno social.
os RCTs são igualmente limitados em termos da unidade de análise sobre a qual podem avaliar os impactos, que é geralmente o indivíduo ou as famílias, e não as comunidades ou a nação. Muitas teorias do governo focam em processos não-lineares que evoluem ao longo de décadas, enquanto RCTs raramente olham para impactos além da trajetória linear entre dois pontos no tempo, geralmente alguns anos.
tomemos, por exemplo, o caso hipotético de uma curva em forma de J derivada da relação de longo prazo entre a liberalização econômica e a estabilidade política: a curto prazo, a liberalização econômica leva a uma ruptura súbita entre os atores econômicos que causa um aumento na instabilidade política. Um CCTR pode concluir que a liberalização económica é negativa para a estabilidade política. No entanto, uma vez que os mercados e as instituições se desenvolvam mais, a estabilidade política poderá efectivamente começar a melhorar.
uma questão final é o custo. Mesmo que os RCTs pudessem ser adaptados para abordar algumas teorias-chave de governança, não é necessariamente claro que seriam mais rentáveis em testar teorias do que métodos não experimentais.
conclusão
em suma, a nossa investigação em curso sugere que, da forma como os RCTs foram concebidos até agora, têm alguma, mas limitada, utilidade na investigação para compreender os factores subjacentes que afectam a variação no desempenho do governo. Eles fizeram contribuições fundamentais para o conhecimento, mostrando o efeito de algumas intervenções direcionadas com resultados relativamente rápidos, mas as principais hipóteses sobre como o desempenho do governo poderia melhorar não serão abordadas usando RCTs.
uma questão central para nós é descobrir se, e em que medida, os princípios em que se baseiam os RCTs poderiam ser conciliados com métodos não experimentais (econométricos), para encontrar um meio-termo analítico. Na expectativa de que a experimentação social se baseie em modelos estruturais de comportamento econômico e político, isso poderia potencialmente fornecer insights sobre se uma intervenção que funciona em um contexto poderia funcionar (e por quê) em outros contextos socioeconômicos e políticos.
mais sobre este projeto será publicado na nossa página web.