ALMEIDA, V. de P. Avaliao de Programas Sociais: De Mensurao de Resultados para uma Abordagem Construtivista.

AVALIAO DE PROGRAMAS SOCIAIS: DE MENSURAO DE RESULTADOS PARA UMA ABORDAGEM CONSTRUTIVISTA1 EVALUATION OF SOCIAL PROGRAMS: FROM MENSURATION OF RESULTS TOWARDS A CONSTRUCTIVIST APPROACH

Vicente de Paulo Almeida2

RESUMO O artigo discute duas formas de avaliar um programa social. No mtodo convencional busca-se verificar o valor e/ou o mrito de um programa, com a finalidade de responder s indagaes dos financiadores ou executores, levantando dados quantificveis segundo uma abordagem positivista. J na perspectiva construtivista, prope-se avaliar o impacto dos programas sociais em seu contexto de implantao. Esse mtodo mostra-se pertinente s necessidades da Psicologia Social, j que mais do que obter um estudo das relaes sociais, considera a subjetividade dos sujeitos pesquisados, como, por exemplo, na sua capacidade de reordenamento diante das intervenes que lhe so dirigidas. Com isso busca-se intervir nas formas como essas relaes acontecem, podendo contribuir, com as polticas sociais, uma vez que est em construo uma nova forma de se fazer poltica, na qual o protagonismo e o controle social tornam-se elementos indispensveis. Palavras-Chave: Avaliao construtivista, psicologia social, programa sociais, polticas pblicas

ABSTRACT The paper makes a comparison between two evaluative approaches. In a more conventional way, the goal is to verify the value of a program according to the interests of its sponsors. In a positivist view, the evaluation is carried out only with the basis of quantifiable data. Differently, the constructivist approach seeks to evaluate social programs in their context of application. It is a method more useful for Social Psychology because it focus on social relations as well as in the subjectivities of those involved in the research. It considers that the subjects are capable of reorganize
1

Artigo proveniente da Dissertao de Mestrado do autor, com o ttulo original de: O Programa de Criana Brincar e Estudar: A Avaliao de um Programa Social Numa Perspectiva Construtivista , defendida na UFMG sob orientao do Prof. Dr. Cornelis Johannes van Stralen, em 2005.
2

Psiclogo graduado pela PUC/MG; Mestre em Psicologia Social pela UFMG.

Pesquisas e Prticas Psicossociais, v. 1, n. 2, So Joo del-Rei, dez. 2006

ALMEIDA, V. de P. Avaliao de Programas Sociais: De Mensurao de Resultados para uma Abordagem Construtivista.

themselves under the impact of the social interventions. The constructivist approach aims to intervene in these relations and to contribute for social policies, pointing out to a new way of doing politics, with the basis on social control and participation of the involved social actors. Key Words: Constructivist evaluation view, social psychology, social programs, public policies

Realizar avaliao de programas sociais, principalmente na perspectiva da Psicologia Social, no se apresenta como uma tarefa fcil. Isto ocorre, em primeiro lugar, em funo daquilo que se espera de um processo de avaliao. Normalmente, pelo seu compromisso com o positivismo, as avaliaes ocorrem com finalidades muito especficas, requisitadas por grupos que desejam que esse julgamento assimile o valor de uma coisa, no o fazendo com critrios subjetivos, mas atravs de informaes pertinentes, que s seriam consideradas relevantes se tivessem relao com as decises s quais a avaliao deve servir. Depois, porque obter resultados direcionados, apenas, para um dos envolvidos no programa social, pode at sugerir que metas foram alcanadas, mas no costuma revelar qual o impacto da interveno na populao alvo. Para a Psicologia Social, fazer avaliao de programas sociais se torna um grande desafio, j que esse impacto precisa ser avaliado para alm da quantificao das pessoas atendidas, dos benefcios distribudos ou da abrangncia da interveno. O impacto aqui deveria surgir como a revelao do foi alterado na capacidade dos sujeitos participantes de: implicarem-se com as situaes que lhe causam prejuzos (materiais e subjetivos), responsabilizarem-se, pelo menos, por parte dessas situaes e construrem formas de alter-las. Estamos falando ento em um processo que revele, ainda que parcialmente, qual a contribuio de um programa social para que tanto o pblico alvo quanto gestores reconstruam representaes e altere atitudes. Esta perspectiva, mesmo no sendo nova, traz a tona uma nova discusso sobre o papel da psicologia social na assistncia social. Com as recentes alteraes propostas pelo SUAS Sistema nico de Assistncia Social na poltica desta rea, a psicologia social chamada a pensar e propor formas de elaborar, executar e avaliar programas sociais. Isto ocorre, principalmente, quando o SUAS prope que a assistncia social deva dar primazia ateno s famlias e seus membros, rompendo com o conceito de famlia como unidade econmica e ,com isto, mera referncia de clculo de per capita para ser inserida em programas de assistncia, mas como um ncleo afetivo, vinculado por laos de aliana ou afinidade, capaz de responder por seus papis, inclusive na defesa do interesse de seus membros no contexto da cidadania, portanto, no controle social.

Pesquisas e Prticas Psicossociais, v. 1, n. 2, So Joo del-Rei, dez. 2006

ALMEIDA, V. de P. Avaliao de Programas Sociais: De Mensurao de Resultados para uma Abordagem Construtivista.

Para tanto, consideramos que um processo de avaliao deve estar comprometido com esta nova lgica de se prestar assistncia social, respeitando a proposta de proteo social que o SUAS traz, que prev: a matricialidade scio-familiar, a territorializao, a proteo pr-ativa, a integrao seguridade social e a integrao s polticas sociais e econmicas. Ou seja, a assistncia social pretende contemplar o sujeito em relao consigo mesmo, com seus grupos, cultura e realidade, campo de ao e interveno ao qual a psicologia social pode dar sua contribuio. Apresentamos, ento, uma discusso sobre avaliao de um modo geral e, com maior nfase, uma proposta de avaliao que, acreditamos, serve ao propsito de se avaliar programas sociais dentro desta nova perspectiva. Aguilar & Ander-Egg, ao tratarem dos objetivos da avaliao, se perguntam: Para que avaliar um programa, projeto, interveno ou processo? O que se quer conseguir com isso? Quais os objetivos ou fins da avaliao? (AGUILAR & ANDER-EGG, 1994, p. 6162). Eles mesmos, citando Hayman, Wright & Hopkins (1981), vo responder que [ para] apresentar provas objetivas, sistemticas e completas do grau em que foram atingidos os fins do programa e do grau em que gerou outras conseqncias imprevistas que, uma vez conhecidas, tambm sejam de interesse para a organizao responsvel pelo programa (AGUILAR & ANDER-EGG, 1994, p. 61-62). Neste artigo, pretendemos discutir uma forma de se avaliar programas sociais que leva em considerao os diversos grupos envolvidos no processo, os quais podem Ter diferentes vises de mundo e interesses envolvidos na implantao e na implementao de tais programas. A este tipo de avaliao, os autores Guba & Lincoln (1989) deram o nome de Avaliao Construtivista. Programas sociais demandam investimento de recursos humanos e financeiros. No raramente as avaliaes se prendem ao interesse da organizao que desenvolveu e executou o programa, minimizando outros interesses presentes. Essa forma de avaliar continua sendo muito usada, demonstrando uma tendncia de se privilegiar as demandas dos que encomendaram a avaliao. Perde-se de vista a possibilidade que uma avaliao tem de se tornar um processo social que envolve valores, portanto, atravessada por questes relativas a classe, etnia, gnero, entre outras. Nesta perspectiva, uma avaliao da qual se requer resultados esclarecedores para se propor novas formas de fazer polticas sociais , na prtica, objeto de compromissos e negociao entre o desejvel e o possvel bem como entre os diversos pontos de vista, expressando valores, crenas e relaes de fora entre os diversos grupos envolvidos no programa social e no processo mesmo de avaliao. Avaliar um programa social apresenta uma srie de dificuldades e coloca pelo menos os seguintes desafios: 1. A diversidade dos objetivos dos quais apenas parte se manifesta; 2. A presena dogmtica de pressupostos doutrinrios ou objetivos

Pesquisas e Prticas Psicossociais, v. 1, n. 2, So Joo del-Rei, dez. 2006

ALMEIDA, V. de P. Avaliao de Programas Sociais: De Mensurao de Resultados para uma Abordagem Construtivista.

irrealistas; 3. O alcance limitado no que diz respeito possibilidade de mudanas mais significativas; 4. A dificuldade de se levar em considerao todos os efeitos secundrios de uma interveno; 5. As pronunciadas diferenas de exposio ao programa dos diversos grupos sociais e pessoas. Neste contexto, encontramos poucos avaliadores que se restringem meramente a auferir resultados. Como observa Scriven ( apud HARTZ, 1999), este tipo de avaliao produz muito pouco muito tarde. Encontramos, sim, uma diversidade grande de abordagens terico-metodolgicas e uma profuso de conceitos sobre avaliao de programas sociais. Com isso, necessrio em primeiro lugar, clarear o campo da avaliao, delimitando-o e apresentando os principais conceitos. Em seguida, apresentaremos a abordagem proposta por Guba & Lincoln (1989), na qual se inspira a abordagem que pretendemos discutir. 1) O CAMPO DE AVALIAO Patton (apud FURTADO, 2001) observa que o campo conceitual e de trabalho da avaliao no est bem definido, com conseqncias para a prpria definio de avaliao. Franco (apud COHEN & FRANCO, 1993, p. 73) apresenta a seguinte definio: Avaliar fixar o valor de uma coisa; para ser feito se requer um procedimento mediante o qual se compara aquilo a ser avaliado com um critrio ou padro determinado. J a Organizao Mundial de Sade (apud COHEN & FRANCO, 1993) define avaliao da seguinte forma: Um meio sistemtico de aprender empiricamente e de analisar as lies aprendidas para o melhoramento das atividades em curso e para o fomento de um planejamento mais satisfatrio mediante uma seleo rigorosa entre as distintas possibilidades de ao futura. Isso supe uma anlise crtica dos diferentes aspectos do estabelecimento e da execuo de um programa e das atividades que constituem o programa, sua pertinncia e eficcia, seu custo e sua aceitabilidade por todas as partes interessadas (OMS apud COHEN & FRANCO, 1993, p. 77). Aguilar & Ander-Egg (1994) enfatizam que avaliao no deve ser confundida com Seguimento/Monitorao, pois a avaliao implica um processo analtico que, mediante um conjunto de atividades, registra, compila, mede, processa e analisa uma srie de informaes que revelam o curso ou desenvolvimento das atividades programadas. Normalmente o seguimento funciona como um exame contnuo e peridico, requerido por uma unidade administrativa, com a finalidade de assegurar o cumprimento do calendrio de trabalho e a entrega de insumos no momento oportuno (bens, fundos, servios, etc).

Pesquisas e Prticas Psicossociais, v. 1, n. 2, So Joo del-Rei, dez. 2006

ALMEIDA, V. de P. Avaliao de Programas Sociais: De Mensurao de Resultados para uma Abordagem Construtivista.

Outro processo que costuma ser confundido com avaliao o Controle. Embora ambos tenham a inteno de ajudar na eficcia de um processo, conduzindo procedimentos que levam a se tomar medidas apropriadas para controlar a execuo dos planos, a avaliao aparece como uma ponderao ou julgamento dos resultados. Sua funo julgar porque as coisas acontecem de certa forma e no de outra. A profuso de diferentes conceitos e termos revela a riqueza do prprio campo de avaliao, mas ao mesmo tempo dificulta a comunicao. Para tornar o campo mais inteligvel, apresentamos aqui, tipos de avaliao de acordo com diversos critrios. Existem diversas classificaes de tipos de avaliao. Quatro, porm, tm maior interesse prtico e pertinncia: o momento em que se avalia, as funes de uma avaliao, a procedncia dos avaliadores e os aspectos de um programa que so objeto de avaliao. 1. 1) O MOMENTO DA AVALIAO Tradicionalmente feita uma distino entre uma avaliao ex-ante e ex-post. A Avaliao ex-ante realizada ao comear o projeto, antecipando fatores que influiro sobre ele. Tem por objetivo proporcionar critrios para uma deciso crucial: se o projeto deve ou no deve ser implementado, metodologias utilizadas, a anlise custobenefcio e a anlise custo-efetividade. A Avaliao ex-post ocorre quando o projeto est sendo executado ou quando j est concludo e realizada para saber como e quanto mudou a situao inicial, ou quanto se conseguiu ou se alcanou a situao objetiva, segundo o ponto de referncia fixado. realizada no fim do programa. Deve ser diferenciada a avaliao do fim do projeto da avaliao ex-post. A primeira realizada uma vez concluda a fase de execuo. J a segunda levada a cabo quando o programa ou projeto alcanou seu pleno desenvolvimento (meses ou at anos depois de finalizada a execuo). Por isto, esse ltimo tipo costuma chamar-se avaliao de impacto ou avaliao ps-deciso (AGUILAR & ANDER-EGG, 1996, p. 42). Para Aguilar & Ander-Egg, a avaliao ex-post tem uma dupla finalidade, que : avaliar o ganho dos resultados em geral, em termos de eficincia, produtos, efeitos e impacto, e, adquirir conhecimento e experincias para outros programas ou projetos futuros. A Avaliao durante a execuo poder atender diversos objetivos: uma anlise de processos para ver quais componentes de um projeto esto contribuindo ou quais so incompatveis com os objetivos ou uma avaliao de efeitos. 1.2) AS FUNES DA AVALIAO

Pesquisas e Prticas Psicossociais, v. 1, n. 2, So Joo del-Rei, dez. 2006

ALMEIDA, V. de P. Avaliao de Programas Sociais: De Mensurao de Resultados para uma Abordagem Construtivista.

Como citado em Aguilar & Ander-Egg (1994), Scriven (1967) prope modalidades para avaliar as necessidades dos usurios e apresenta a distino entre avaliao somativa e avaliao formativa. A primeira refere-se ao estudo dos resultados ou efeitos do programa. Atravs desta modalidade se determina at que ponto foram cumpridos os objetivos ou produzidos os efeitos previstos. Busca-se determinar o valor de um programa, uma vez que, ao ser desenvolvido, investiga os efeitos comparando-os com as necessidades dos usurios ou beneficirios. A segunda refere-se ao seguimento que se realiza durante o processo de execuo de um programa ou projeto. Fornece informao acerca do modo de se desenvolver o referido processo. Scriven (apud AGUILAR & ANDER-EGG, 1994) ainda distingue mrito de valor. O valor de um programa depende do grau de necessidade de realizar a ao. Quanto mais necessrio fazer algo, tanto maior o seu valor. J o mrito, tem a ver com a boa realizao de algo, independentemente do seu valor. Uma interveno tem mrito quando faz bem e com eficincia aquilo a que se prope. Neste sentido, podemos afirmar que, para um programa ter mrito, ele no precisa ter valor, mas que, para ter valor, ele precisa ter mrito. 1.3) A PROCEDNCIA DOS AVALIADORES Aguilar & Ander-Egg (1994) apresentam quatro grupos de avaliadores. O primeiro grupo formado por avaliadores externos. No so vinculados instituio executora, tratando-se, neste caso, de uma avaliao externa. O segundo grupo formado por avaliadores que pertencem instituio executora, mas no so responsveis pela execuo do programa a ser avaliado. Neste caso, realizada uma avaliao interna. O terceiro grupo, que uma combinao das anteriores, inclui avaliadores externos e internos, sendo ento realizada uma avaliao mista. Por ltimo, h a quarta possibilidade de que as prprias pessoas implicadas na execuo ou realizao do programa avaliem o programa. Neste caso, realizada uma auto-avaliao. Todos os tipos de avaliao possuem caractersticas positivas e negativas. Por um lado, avaliadores internos tm a vantagem de maior conhecimento e familiaridade com o objeto a ser avaliado. De outro lado, estes correm o risco de apresentar maior subjetividade na avaliao em conseqncia do seu envolvimento com o programa, pois estaro na posio dupla de juzes e interessados no resultado. Para avaliadores externos, pode haver maior imparcialidade, mas tambm corre-se o risco de maior desconhecimento, ou de posturas ingnuas, devido ao distanciamento daquilo que se pretende avaliar. A avaliao mista procura se aproveitar dos aspectos positivos e neutralizar os aspectos negativos de ambas.

Pesquisas e Prticas Psicossociais, v. 1, n. 2, So Joo del-Rei, dez. 2006

ALMEIDA, V. de P. Avaliao de Programas Sociais: De Mensurao de Resultados para uma Abordagem Construtivista.

1.4) ASPECTOS DO PROGRAMA QUE SO OBJETOS DE AVALIAO Vrios so os autores que tratam desse assunto nas avaliaes: Vergara (1980), Ander-Egg (1982), Luque & Casquete (1989), Caride (1989), Alvira (1991) entre outros. Ander-Egg (1982) distingue dez reas de investigao. Sete delas referem-se Coerncia Interna, que trata da avaliao formal do programa, visando atender aos componentes internos. Julga-se a pertinncia formal e potencial do programa ou coerncia interna entre seus diferentes componentes. As outras trs delas referem-se Coerncia Externa, que trata de uma avaliao substantiva, visando julgar a pertinncia das conquistas do programa em relao aos problemas ou necessidades que afetam a populao destinatria e que deram ocasio interveno. Julga-se a pertinncia real do programa. Para Aguilar & Ander-Egg (1994), na prtica, todas as avaliaes comportam a anlise de determinadas reas de coerncia interna e outras de coerncia externa. 2) AVALIAO COMO PROCESSO SOCIAL E POLTICO Guba & Lincoln (1989) apontam que avaliaes tradicionais tendem a privilegiar o cliente que encomenda a avaliao. este cliente que determina as questes da avaliao, a metodologia a ser utilizada e os resultados a serem publicados. Este vis dissimulado pelo uso de metodologias quantitativas e quase experimentais, baseado no paradigma positivista. Em contraposio abordagem tradicional, eles consideram que a avaliao um processo poltico e social, orientado para valores e, nesta perspectiva, aqueles autores apresentam uma nova alternativa segundo a qual as reivindicaes, interesses e questes dos diversos grupos de interesse so os focos que organizam a avaliao. O paradigma positivista no permite incluir a diversidade de valores e interesses, mas sim o paradigma construtivista, para qual no h uma realidade dada como nica, uma vez que esta socialmente construda. Essa nova alternativa nasce de um longo processo de construo e reconstruo sob diversas influncias. Os autores distinguem quatro geraes no percurso histrico da avaliao. A PRIMEIRA GERAO: MENSURAO A primeira gerao da avaliao marcada pela mensurao atravs de testes para medir o desempenho de escolares e de classificar crianas com problemas de retardamento mental. Guerra Mundial. O avano e a aceitao das testes mentais foi, principalmente, outros fatores que tiveram um papel importante no As resultado da necessidade de selecionar pessoal para os servios armados na Primeira Alguns desenvolvimento desta primeira gerao de avaliao foram: a ascenso das cincias sociais e a emergncia do gerenciamento cientfico no comrcio e na indstria. cincias sociais freqentemente visavam a aplicao da abordagem cientfica aos

Pesquisas e Prticas Psicossociais, v. 1, n. 2, So Joo del-Rei, dez. 2006

ALMEIDA, V. de P. Avaliao de Programas Sociais: De Mensurao de Resultados para uma Abordagem Construtivista.

problemas humanos, o que levou, entre outras, criao de laboratrios de Psicometria. O gerenciamento era cientfico baseava-se apenas largamente e em estudos em sobre tempo e de movimentos para determinar mtodos mais produtivos. Nesta primeira fase, o papel do avaliador considerado tcnico baseava-se conhecimentos instrumentos e tcnicas de mensurao (GUBA & LINCOLN, 1989, p. 22-26). A SEGUNDA GERAO: DESCRIO A segunda gerao de avaliao surgiu medida que se evidenciaram as deficincias da primeira, sendo o seu enfoque principal os estudantes. A ampliao do acesso ao ensino secundrio demandou avaliar currculos e, para isto, dados baseados no desempenho de estudantes eram insuficientes. Tornou-se necessrio avaliar os novos programas e identificar os seus pontos fortes e fracos em relao a objetivos definidos. Nesta perspectiva, o papel do avaliador era descrever o programa e a mensurao se tornou apenas um dos diversos instrumentos que poderiam ser utilizados. De importncia crucial foi o Eigth Year Study (colocar uma nota rpida e explicativa em p de pgina) que contou com a participao de Ralp W. Tyler, que j estava tentando elaborar testes que poderiam avaliar se os estudantes estavam aprendendo aquilo que os professores pretendiam que eles aprendessem. O objetivo no era simplesmente medir resultados, mas fazer com que os currculos funcionassem. Tyler foi reconhecido mais tarde como o pai da avaliao (GUBA & LINCOLN, 1989, p. 27-28). A TERCEIRA GERAO: JULGAMENTO A abordagem descritiva, orientada para objetivos, surgiu na dcada de cinqenta quando as deficincias do sistema educacional americano foram consideradas responsveis pelo avano dos Russos na conquista do espao. Esperava-se, agora, do avaliador que ele julgasse os programas na base de critrios externos, sem deixar de descrever e medir progressos. 31). Assim, parte-se de certos critrios, sempre com uma tendncia a seguir os valores de quem emite o juzo. Supe-se que, apresentando fatos, a avaliao auxilia a tomada de decises para a escolha inteligente entre cursos de ao. Os dados, que so tidos como precisos e no distorcidos, sobre as conseqncias dos programas melhorariam estas tomadas de decises. Trata-se de um processo organizacional para melhorar as atividades que esto em andamento e auxiliar a administrao no planejamento, programao e decises futuras. A QUARTA GERAO: UMA ABORDAGEM ALTERNATIVA A exigncia de incluir o julgamento no processo de avaliao marca o surgimento desta terceira gerao (GUBA & LINCOLN, 1989, p. 29-

Pesquisas e Prticas Psicossociais, v. 1, n. 2, So Joo del-Rei, dez. 2006

ALMEIDA, V. de P. Avaliao de Programas Sociais: De Mensurao de Resultados para uma Abordagem Construtivista.

As trs primeiras geraes de avaliao evidenciam o progresso da avaliao, tanto quanto amplitude dos seus contedos como em relao aos refinamentos metodolgicos. Entretanto, algumas deficincias no deixaram de existir: a prevalncia do ponto de vista gerencial, a incapacidade de incorporar e acomodar o pluralismo no campo de valores, e, o super compromisso com o paradigma positivista. A partir destas deficincias, Guba & Lincoln propem uma abordagem alternativa, chamada por eles responsive constructivist evaluation (avaliao responsiva e construtivista): responsiva, pois pretendia ser sensvel s reivindicaes e questes de grupos de interesse; e construtivista, pois baseada num paradigma construtivista para o qual a realidade uma construo social, inclusive o objeto da avaliao. Guba & Lincoln (1989, p. 8) referem-se a essa nova forma dizendo: nossa inteno definir uma abordagem de avaliao emergente, mas madura que vai alm de uma cincia que apenas coleta fatos para incluir a infinidade de elementos humanos, polticos, sociais, culturais e contextuais que esto envolvidos. Chamamos essa nova abordagem A Quarta Gerao de Avaliao por sinalizar a interpretao nossa de que essa forma transcende as geraes previamente existentes, caracterizadas como orientados para mensurao, descrio e julgamento, caminhando para um nvel novo, cuja chave dinmica a negociao (Traduo nossa). Nesta perspectiva, a quarta gerao de avaliao implica a participao e o envolvimento dos grupos de interesse. Furtado (2001, p. 169) define esses da seguinte forma: (...) grupos de interesse ou implicados ou ainda stakeholders so definidos como organizaes, grupos ou indivduos potencialmente vtimas ou beneficirios do processo avaliativo. De modo geral, os grupos de interesse so formados por pessoas com caractersticas comuns (gestores, usurios, etc) que tm algum interesse na performance, no produto ou no impacto do objeto da avaliao, isto , esto de alguma maneira envolvidos ou potencialmente afetados pelo programa e por eventuais conseqncias do processo avaliativo (WEISS, 1983; GUBA & LINCOLN, 1989; ROSSI et al., 1999, apud FURTADO, 2001, p. 169). Guba & Lincoln (1989, p. 8-11) observam que esta forma de avaliao tem algumas propriedades relevantes: 1. Os resultados de uma avaliao no descrevem como as coisas realmente so, mas representam construes produzidas por diversos atores, sejam eles indivduos ou grupos para dar sentido s situaes nas quais eles se encontram. Os resultados so construdos num processo interativo que inclui o avaliador e os grupos de interesse. Observa-se que freqentemente as propostas de polticas pblicas e as avaliaes destas polticas ignoram que a realidade socialmente construda;

Pesquisas e Prticas Psicossociais, v. 1, n. 2, So Joo del-Rei, dez. 2006

ALMEIDA, V. de P. Avaliao de Programas Sociais: De Mensurao de Resultados para uma Abordagem Construtivista.

10

2. As construes atravs das quais as pessoas do sentido s suas situaes,

so modeladas pelos valores de quem produz os sentidos. Isto teria poucas implicaes, se todos partilhassem um sistema de valores comum. Nesta situao a construo compartilhada poder parecer o estado das coisas e viver esta iluso causaria poucos danos. Porm, na realidade, qualquer sociedade moderna, inclusive aquelas supostamente primitivas, em pases de terceiro mundo, so pluralistas no que diz respeito a valores. Por isso, a questo de quais valores esto sendo considerados, e, como posies diferentes a respeito de valores so acomodadas, passa a ser sumamente importante (GUBA & LINCOLN, 1989, p. 8). Aqui no h lugar para uma metodologia que se diz livre de valores, pois teria pouca utilidade; 3. As construes so intrinsecamente ligadas a especficos contextos fsicos, psicolgicos, sociais e culturais, dentro dos quais elas so produzidas e aos quais se referem. O contexto proporciona o ambiente, dentro do qual as pessoas que produzem as construes vivem, e ao qual elas procuram dar sentido. Ao mesmo tempo, o ambiente permanece sem forma, at as construes das pessoas dentro dele o dotarem com parmetros, caractersticas e limites. .Em um sentido muito literal o contexto que d vida para, e recebe vida dessas construes que as pessoas vm a formar e a manter (GUBA & LINCOLN, 1989, p. 8-9, Traduo nossa). Pelo fato de que as pessoas compartilham contextos sociais, no de se estranhar que ao longo do tempo surjam construes sociais compartilhadas. No entanto, Guba & Lincoln afirmam que o consenso no implica num maior grau de realidade, qualquer que seja o acordo. Alm disto o consenso produzido num determinado contexto, e contribui pouco para quem vive num outro contexto. ...nada pode ser considerado verdadeiro num sentido absoluto, nem mesmo uma aproximao da verdade (GUBA & LINCOLN, 1989, p. 9);

4. Essa nova abordagem reconhece que avaliaes podem ser feitas para
empoderar ou enfraquecer grupos de interesse. Evidentemente, poder ocorrer uma incluso seletiva de grupos de interesses no projeto e na implementao da avaliao. Se apenas o avaliador e seu cliente decidirem a respeito da metodologia de coleta de dados e da interpretao destes dados, outros grupos de interesse no conseguiro realizar seus interesses. mesma forma, a divulgao seletiva de dados poder favorecer desfavorecer determinados grupos de interesse; Da ou

Pesquisas e Prticas Psicossociais, v. 1, n. 2, So Joo del-Rei, dez. 2006

ALMEIDA, V. de P. Avaliao de Programas Sociais: De Mensurao de Resultados para uma Abordagem Construtivista.

11

5. A avaliao deve ter uma orientao voltada para ao que defina o percurso
que dever ser seguido e estimule os grupos de interesse envolvidos a segulo. Entretanto, freqentemente os resultados da avaliao no so utilizados. Guba & Lincoln apontam que os avaliadores costumam culpar, alternadamente, os clientes pela falta de ao a despeito de recomendaes aparentemente muito racionais ou a si prprios pela dificuldade de levantar e vender um produto que tem que estar de acordo com o que o cliente deseja. Entretanto, h de se considerar que muitas vezes as recomendaes atendem apenas aos objetivos do avaliador e seu cliente. Para se chegar a uma ao, necessrio um processo de negociao que considere os valores de cada grupo de interesses e lhes propicie um motivo para agir;

6. Finalmente, pelo fato de que a avaliao envolve atores humanos (clientes,

grupos de interesse) como fontes de informao de perspectivas diferentes, cabe ao avaliador interagir com esses atores, respeitando sua dignidade, sua integridade e sua privacidade. Guba & Lincoln enfatizam que o sentido pleno de respeitar sua dignidade, sua integridade e sua privacidade, vai muito alm de normas padronizadas utilizadas, normalmente, por avaliadores, tais como consentimento informado e garantias para a privacidade. Implica envolvimento dos grupos de interesse com participao plena, tornando estes grupos parceiros em todas as fases do processo e em relao a todos os aspectos da avaliao. Significa, tambm, que estes parceiros se comprometem a compartilhar suas construes e a colaborar com a construo comum, visando tambm ser melhor informados e a no se tornarem meros objetos de estudo ou experimentao. Em contraposio s avaliaes tradicionais, a alternativa da quarta gerao se fundamenta num paradigma construtivista. Esta, de acordo com Guba & Lincoln, marcada por: 1. Uma ontologia relativista que afirma que a realidade socialmente construda; 2. Uma epistemologia monista que valoriza os aspectos subjetivos, para a qual o investigador e o investigando so de tal forma interrelacionados que os resultados de uma investigao so uma construo do processo de investigao; 3. Uma metodologia hermenutica que envolva uma dialtica contnua de anlise, crtica, retomada da anlise, etc. at chegar a uma construo compartilhada (Guba & Lincoln, 1989, p. 83-90).

Pesquisas e Prticas Psicossociais, v. 1, n. 2, So Joo del-Rei, dez. 2006

ALMEIDA, V. de P. Avaliao de Programas Sociais: De Mensurao de Resultados para uma Abordagem Construtivista.

12

Comparada s trs geraes anteriores, a avaliao da quarta gerao se distingue pelos seguintes aspectos: 1. , antes de tudo, um processo scio-poltico; 2. um processo compartilhado e colaborativo; 3. um processo de ensino e aprendizagem; 4. um processo contnuo, recursivo e altamente divergente; 5. um processo emergente e substancialmente imprevisvel; 6. um processo com resultados imprevisveis; 7. um processo que constri uma realidade. CONSIDERAES FINAIS No incio deste texto apontamos que a avaliao de programas sociais, e tambm sua elaborao e execuo, precisam estar comprometidos com uma nova forma de se fazer poltica, que hoje se fundamenta no mais novo documento sobre a assistncia social no pas, a Norma Operativa Bsica do Sistema nico de Assistncia Social NOB/SUAS 2005. Como poltica pblica, a assistncia social considera no s as necessidades dos indivduos alvo das intervenes, mas tambm a forma como acontecem as relaes sociais, preocupada com o impacto das aes nas populaes atendidas. Tal princpio est comprometido com o SUAS, que se prope operar em um modelo emancipatrio, que requeira a proviso de medidas de Poltica Social que responda s necessidades sociais e coletivas, e tambm seja capaz de atuar a partir de inmeros requerimentos individuais e privados, decorrentes da situao de vida das famlias (SUAS, p. 18). Dentro desta linha de pensamento, a Psicologia Social requisitada a propor metodologias que auxiliem na formulao e avaliao dos projetos sociais, j que essa nova proposta visa intervir no s para suprir necessidades, mas tambm reconhecendo e respeitando a subjetividade das pessoas ou grupos alvos da interveno. Com isto, entendemos que a avaliao no uma descrio de uma verdade, ou de como as coisas realmente so, mas representa construes que atores individuais ou grupos de atores formam para dar sentido s situaes nas quais se encontram. As descobertas feitas pela avaliao no so fatos, com sentido definitivo, mas sim criaes feitas atravs de um processo interativo que inclui o avaliador e os grupos de interesse. O que surge desse processo uma ou mais construes que so partes de uma dada realidade. Neste sentido, a forma construtivista proposta por Guba & Lincoln, e chamada por eles de Quarta Gerao de Avaliao tem, como chave dinmica, a negociao. Parece-nos portanto um mtodo que pode auxiliar na avaliao das polticas pblicas que tm sido desenvolvidas, verificando impactos, e redefinindo estratgias, pois considera a capacidade dos indivduos de participar e controlar as polticas que lhe so endereadas.

Pesquisas e Prticas Psicossociais, v. 1, n. 2, So Joo del-Rei, dez. 2006

ALMEIDA, V. de P. Avaliao de Programas Sociais: De Mensurao de Resultados para uma Abordagem Construtivista.

13

REFERNCIAS BIBLIOGRFICAS AGUILAR, M. J. & ANDER-EGG E. Avaliao de servios e programas sociais. Petrpolis: Ed. Vozes, 1994. BRASIL. Norma Operativa Bsica do SUAS. Ministrio do Desenvolvimento Social e Combate Fome, Braslia, Julho de 2005. FURTADO, J. P. Um mtodo construtivista para a avaliao em sade. Cincia e Sade Coletiva, 6(1), 2001, p. 165-181. GIL, A. C. Mtodos e tcnicas de pesquisa social. So Paulo: Ed. Atlas, 1.999. GUBA, E. G. & LINCOLN, Y. S. Fourth generation evaluation. London: Sage Publications, 1989. MACHADO, M. N. M. Entrevista de pesquisa: a interao pesquisador/entrevistado. Belo Horizonte: Ed. C/arte, 2002. RIZZINI, I. O sculo perdido: razes histricas das polticas pblicas para a infncia no Brasil. Rio de Janeiro: Ed. Universitria, 1997. ROCHA, C. V. Idias dispersas sobre o significado de polticas pblicas. In: STENGEL, M. et al. Polticas pblicas de apoio scio-familiar. Curso de Capacitao de Conselheiros Tutelares e Municipais. Coleo Infncia e Adolescncia. Belo Horizonte: Ed. PUC Minas, 2001.

CONTATO Vicente de Paulo Almeida Endereo Eletrnico: vipaalm@yahoo.com.br CATEGORIA: Ensaio Terico Recebido em 30 de out 2006 Aprovado em 28 de nov 2006

Pesquisas e Prticas Psicossociais, v. 1, n. 2, So Joo del-Rei, dez. 2006