Entenda a Teoria de Respostas ao Item (TRI), utilizada no Enem Camila Akemi Karino Dalton Francisco de Andrade Usualmente, quando

desejamos medir a proficincia de um aluno em determinada rea do conhecimento, fazemos uso do escore (nmero de acertos) do aluno em um teste com um determinado nmero de itens (questes). Esta forma de avaliao, conhecida como a Teoria Clssica dos Testes (TCT), apresenta limitaes quando se pretende comparar desempenhos de alunos submetidos a provas diferentes. Isso ocorre devido a dependncia que existe entre a avaliao das caractersticas do teste e a amostra de respondentes. O ndice de discriminao (grau com que o item diferencia pessoas com nveis distintos de proficincias) e a dificuldade do item depende fundamentalmente do grupo de respondentes, ou seja, o item discrimina mais ou menos, ou mais ou menos difcil de acordo com o grupo de respondentes. Um grupo de pessoas com menos proficincia submetido a um teste fcil pode obter como resultado um mesmo escore que um grupo de indivduos de maior proficincia submetidos a um teste difcil. A comparao dos percentuais de acerto indicar que os grupos possuem a mesma profincia, sendo que na verdade os grupos possuem proficincias diferentes. Para contornar estas dificuldades e tambm para permitir uma medida mais apropriada da proficincia do aluno, foi desenvolvida a TRI, cujo foco principal o item e no o teste como um todo. Dentro do contexto da TRI, as caractersticas dos itens e dos testes so estimadas independentemente das proficincias dos alunos. Para exemplificar, suponha que desejemos medir a altura de uma pessoa, em metros, por meio de um questionrio utilizando a TRI. Uma pergunta (item) que poderia ser feita Voc consegue guardar sua bagagem de mo no avio sem pedir ajuda?. Uma pessoa que responda sim a este item deve ter, no mnimo, 1,65m. Esta seria ento a altura do item. Um outro item: Voc acha que se daria bem em um time de basquete?. A altura deste item seria algo em torno de 1,90m. Ao final de um conjunto de perguntas como esta, seria possvel saber, com uma certa preciso, a altura do respondente. No existe um nico conjunto de itens capazes de medir a altura. possvel obter a altura de maneira isonmica a partir de provas diferentes, ou seja, a partir de um conjunto diferente de questes. Itens de mesma altura sero respondidos de

maneira igual por pessoas de mesma altura. O mesmo ocorre com o Enem que, ao invs de medir altura, mede proficincia. A deciso de implementar no Exame Nacional do Ensino Mdio (ENEM) a Teoria de Resposta ao Item (TRI) teve duas finalidades principais: (1) permitir a comparabilidade dos resultados entre os anos e (2) permitir a aplicao do Exame vrias vezes ao ano. O uso da TRI em avaliaes educacionais teve incio no Brasil com o Sistema de Avaliao da Educao Bsica (SAEB) em 1995 e, posteriormente, foi implementado tambm no ENCCEJA, Prova Brasil e ENEM. No mbito internacional, a TRI vem sendo utilizada largamente por diversos pases: Estados Unidos, Frana, Holanda, Coreia do Sul, China, sem falar nos pases participantes do PISA (Programa Internacional de Avaliao de Estudantes). Um dos grandes exemplos de avaliao utilizando a TRI o exame de proficincia em lngua inglesa (TOEFL). Este exame surgiu em 1964 e amplamente utilizado em todo o mundo. Desde o ano de sua origem, este exame j avaliou mais de 25 milhes de alunos e tem sido administrado por mais de 4.500 centros em 165 pases do mundo. No TOEFL, os alunos marcam o horrio em um dos centros credenciados e podem realiz-lo vrias vezes ao ano. A prova adaptativa, realizada no computador, e cada candidato responde a um conjunto de itens (questes) diferentes. Apesar de em cada aplicao o candidato receber uma prova distinta, todos os resultados so comparveis e considerados isonmicos. Outro exame bastante importante e mais semelhante ao ENEM o SAT (Scholastic Aptitude Test ou Scholastic Assessment Test). Este um exame educacional padronizado dos Estados Unidos, aplicado a estudantes do Ensino Mdio, que serve de critrio para admisso nas universidades norte-americanas. O exame aplicado sete vezes ao ano, em outubro, novembro, dezembro, janeiro, maro (ou abril), maio e junho. Novamente, apesar de aplicaes realizadas em momentos distintos e com provas diferentes, a existncia de uma escala padro possibilita a comparabilidade de desempenhos. O modelo utilizado no ENEM o modelo logstico de trs parmetros que alm dos parmetros de discriminao e de dificuldade, tambm faz uso de um parmetro para controlar o acerto casual O parmetro de dificuldade representa a proficincia mnima que um respondente deve possuir para que sua probabilidade de acerto seja alta, ou seja, a proficincia do item. O parmetro de discriminao deve ser um valor

mnimo de modo a garantir que respondentes com proficincias diferentes tenham probabilidades diferentes de acerto. A elaborao de uma boa prova exige o conhecimento dos parmetros dos itens. Isto conseguido atravs de pr-testagens de itens em amostras apropriadas de alunos nas quais estimamos os parmetros dos itens em uma mesma escala de proficincia. Deste modo, posicionamos os itens em uma escala de acordo com o nvel de proficincia que eles exigem. O conjunto desses itens passa a formar um banco de itens na escala de proficincia desejada e a partir dele podemos construir um ou mais testes, de acordo com as necessidades. O importante que as proficincias dos alunos submetidos a esses diferentes testes so medidas na mesma escala e, portanto, comparveis entre si. Da mesma forma, as medidas de proficincia de um aluno submetido a dois testes construdos com itens desse banco sero iguais. Por ltimo, vale a pena ressaltar que em avaliaes onde o acerto casual possvel, caso do ENEM, a medida de proficincia da TRI leva em conta no s o nmero de acertos, mas tambm o padro de respostas do aluno. Em outras palavras, dois alunos com o mesmo escore podem receber da TRI diferentes valores de proficincia. Receber maior proficincia aquele aluno que apresentar respostas aos itens de forma mais coerente com o construto que est sendo medido.