1

A avaliao psicolgica na prtica dos psiclogos: As provas psicolgicas

usadas em Portugal 1

Leandro S. Almeida, Antnio M. Diniz, Lcia G. Pais & M. Adelina Guisande 2

(Universidade do Minho, Instituto Superior de Psicologia Aplicada &

Universidade de Santiago de Compostela)

Introduo

A avaliao psicolgica acompanha a prtica da psicologia nas suas vrias

especialidades ou campos de aplicao, seja na psicologia clnica (Bnony, 2002;
Emmanuelli, 2004; Maarse, Mulder, Brand, & Akkerman, 2003), seja na
psicologia forense (Heilbrun, 2001; Pinard & Pagani, 2001; Rogers & Schuman,
2000), seja na psicologia da educao (Andrews, Saklosfski, & Janzen, 2001;
Leito, 2004), ou na psicologia organizacional (Edenborough, 2005; Thomas,
2003), aceitando-se a sua generalizao a todos os contextos da psicologia
aplicada (Fernndez-Ballesteros, 1999; Suzuki, Ponterotto, & Meller, 2001). Quer
pelas provas usadas e diagnsticos produzidos, quer pelos fundamentos tcnicos
ou pelos referenciais tericos inerentes s provas e aos constructos avaliados,
importa no menosprezar esta componente identitria dos psiclogos (Simes,
2005).
Ao se assumir que a avaliao psicolgica integra a definio do perfil
profissional dos psiclogos, vrios compromissos e responsabilidades so
partilhados. No se podendo reduzir a avaliao psicolgica s provas e sua
utilizao, mesmo assim importa cuidar da objectividade, preciso e validade dos
resultados com elas obtidos. Por norma, muitas das crticas avaliao

1 Estudo resultante do projecto Contextos profissionais, tarefas de avaliao psicolgica e

utilizao de provas psicolgicas numa amostra de psiclogos portugueses, financiado pelo
Centro de Investigao e Interveno (CII) do ISPA Instituto Superior de Psicologia Aplicada,
Lisboa, Portugal.
2 Financiada pelo Ministerio de Educacin y Ciencia (Espanha)
 2

psicolgica confundem-se com crticas ao mtodo dos testes. So sobretudo

apontados os problemas de falta de equivalncia transcultural nos constructos
avaliados atravs de provas importadas de outros pases (Dana, 2005; Hambleton,
Merenda, & Spielberger, 2005; Poortinga, 1989, 1993; Poortinga & Van De
Vijver, 1987), a fraca inovao nas provas disponveis (Sternberg & Kaufman,
1996) e, nomeadamente em Portugal, a falta de dados normativos ou de outros
referentes interpretativos devidamente actualizados para os resultados nas provas
(Almeida, Simes, & Gonalves, 1995; Simes, 1993). Se o primeiro problema
exige mais cuidados na adaptao das provas psicolgicas a novas populaes, o
segundo apela a estudos cclicos de normalizao mais consistentes e
representativos, assim como a anlises mais aturadas a propsito da rentabilizao
informativa dos resultados nas provas para as diferentes decises em que o seu
uso aparece sugerido.
Um outro problema na avaliao psicolgica, e consequente rea de
compromisso, passa pelos prprios psiclogos. Pela relevncia das provas
psicolgicas na prtica dos psiclogos e na vida das pessoas e instituies
enquanto seus clientes importa um treino aturado por parte dos psiclogos no
seu manuseio (Almeida, 1994; Bartram, 2001; Eignor, 2001). Ningum, pelo
simples facto de ser psiclogo, pode considerar-se automaticamente preparado
para usar e rentabilizar, de forma eficiente e eticamente responsvel, os testes
psicolgicos. Como qualquer instrumento, apela-se a mos preparadas para a
sua utilizao adequada. O psiclogo tem que ser melhor do que os testes que usa,
ou seja, tem que saber utilizar inteligentemente os instrumentos de que necessita
na sua prtica.
Escolas e associaes cientficas e profissionais, a par das editoras e
distribuidoras das provas, tm particulares responsabilidades na qualificao da
avaliao psicolgica. Vrios organismos definiram, e mantm actualizadas,
directrizes acerca da construo, validao e utilizao de testes (American
Psychological Association, 1999; International Test Commission, 2001; Turner,
 3

DeMers, Fox, & Reed, 2001). Registe-se a traduo e adaptao para lngua
portuguesa das Directrizes Internacionais para a construo, validao e utilizao
de testes psicolgicos, da autoria da International Test Commission (2001), a
cargo de um grupo alargado de psiclogos portugueses (International Test
Commission, 2003). A avaliao psicolgica, com efeito, remete para um processo
complexo de tomada de deciso, envolvendo tarefas de escolha, de inferncia e
de formulao de juzos clnicos, e de integrao dos resultados no quadro de um
conjunto alargado de informao de natureza e origem diversa (Diniz, 2004;
Krishnamurthy et al., 2004; Simes, 1993). Em nossa opinio, essa
complexidade do processo de anlise e deciso do psiclogo que permite que os
relatrios psicolgicos ultrapassem as meras tabelas e as snteses propostas por
programas informticos de tratamento dos resultados associados avaliao
assistida por computador.
Neste estudo e artigo, na sequncia de investigaes nacionais anteriores
(Almeida & Cruz, 1985, 1988; Cruz & Almeida, 1987; Muiz, Prieto, Almeida, &
Bartram, 1999), analisamos alguns aspectos referentes prtica da avaliao
psicolgica pelos psiclogos portugueses. No caso concreto deste artigo, o
enfoque so as provas psicolgicas mais usadas em Portugal, e em que medida
essa utilizao assenta em estudos de validao e normalizao que suportem o
seu uso.

Mtodo

Amostra
Participaram neste estudo 265 psiclogos portugueses, com idades
compreendidas entre os 25 e os 67 anos (M=39 anos) e na sua maioria do sexo
feminino (78,9%). Em termos de rea de graduao ou de rea de pr-
especializao da sua licenciatura, a maioria dos respondentes reporta-se
psicologia clnica (64,3%), seguindo-se a psicologia educacional (22,1%), a
 4

psicologia social/organizacional (11,2%) e a psicologia forense (2,3%). O valor

residual que esta ltima apresenta poder dever-se sua recente criao como
rea de diferenciao da formao dos psiclogos, ao mesmo tempo que no se
encontra generalizada, como as outras trs reas, nos vrios cursos de psicologia
disponveis em Portugal. Por exigncia do prprio estudo, todos os psiclogos
considerados tinham, pelo menos, trs anos de prtica profissional como
psiclogos.

Instrumento
Partindo de questionrios similares (Almeida & Cruz, 1985; Muiz et
al.,1999; Poortinga et al., 1982), o questionrio usado neste estudo inclui questes
reportadas formao e prtica profissional dos inquiridos, dando-se particular
destaque aos aspectos da sua prtica na avaliao psicolgica e uso de provas
psicolgicas para esse efeito (neste artigo o enfoque so as provas psicolgicas
mais utilizadas). Assim, inclui um primeiro grupo de questes descritivas dos
respondentes (e.g., percurso de formao). O segundo agrupamento de questes
versava aspectos relativos actividade profissional propriamente dita (e.g.,
contexto de exerccio). O terceiro agrupamento de questes versava aspectos
relativos avaliao psicolgica no contexto da actividade profissional (e.g.,
utilizao de tcnicas/instrumentos). Finalmente, o quarto agrupamento de
questes destinava-se s opinies e necessidades dos respondentes relacionadas
com a utilizao de provas psicolgicas (e.g., marca distintiva/identitria da
prtica psicolgica). Como referimos atrs, este artigo reporta-se s provas
psicolgicas mais utilizadas pelos respondentes.

Procedimento
Foram expedidos por carta (com envelope de porte pago para resposta)
1312 questionrios, havendo pouco mais de 50 que no chegaram aos seus
destinatrios, nomeadamente por problemas nos endereos. Responderam ao
 5

inqurito e devolveram 289 psiclogos, o que corresponde a uma taxa de resposta

de 23%. Foram anulados 24 questionrios porque respondidos por psiclogos com
menos de trs anos de prtica profissional. Os dados foram inseridos e tratados
estatisticamente atravs da verso 14.0 para windows do SPSS.

Resultados

Tomando as questes que nos permitem descrever os respondentes em

termos de formao e de prticas, verifica-se que o seu exerccio da psicologia
oscila entre 3 e 34 anos de prtica profissional (29,1% com seis anos ou menos e
33,1% com quinze anos ou mais). Por outro lado, a maioria considera como
adequada a sua formao acadmica na rea da avaliao psicolgica (61,3%),
registando-se 20,7% que a considera pouco ou nada adequada e 18% que a
considera muito adequada. De acrescentar que 65,6% dos sujeitos menciona ter
recebido superviso no incio da sua prtica profissional. Entretanto, um quinto
(20,5%) dos respondentes fez um curso de especializao em termos de ps-
graduao, 23,6% realizou mestrado e 9,5% doutoramento (havendo ainda 16%
que mencionam estar a frequentar estudos ps-graduados).
Quanto aos contextos de actividade profissional, a maioria dos
respondentes trabalha em contexto escolar (22,3%) e hospitalar (19,1%). Registe-
se, ainda, 15,2% no Ensino Superior e 10,5% nas instituies da administrao da
justia. Um menor nmero de psiclogos encontra-se a trabalhar noutras
instituies, como empresas (5,9%) e instituies militares/policiais (7,8%). De
salientar, tambm, a reduzida percentagem de respondentes que centram a sua
principal actividade profissional na consulta privada (9,4%). Por ltimo, um
nmero ainda mais escasso de respondentes trabalha em Instituies Particulares
de Solidariedade Social para crianas e jovens (3,1%), autarquias (2%),
instituies de ensino especial (2,3%), centros para toxicodependentes (1,2%),
centros de reabilitao profissional (0,8%) e lares idosos (0,4%).
 6

Quanto idade da populao-alvo de interveno dos respondentes, 43,8%

afirmaram trabalhar com adultos, 35% com crianas e adolescentes e 21,2% com
vrias combinaes destas faixas etrias. De referir, ainda, que 47,3% dos
respondentes desenvolvem a sua interveno exclusivamente ao nvel individual.
Por ltimo, cerca de um tero dos respondentes (30,6%) afirmaram ter uma
segunda actividade profissional como psiclogos, complementar actividade
principal assinalada, embora tomemos aqui apenas a informao relativa
actividade principal.
Nos quadros 1 e 2 listamos as provas psicolgicas mais mencionadas pelos
psiclogos quando lhes foi pedido para referir, por ordem decrescente, as cinco
que mais utilizavam. As provas que tiveram ocorrncias residuais e que foram
listadas nas ltimas posies (utilizao relativa menos dominante) no constam
nas tabelas. No quadro 1 a listagem reporta-se s provas de inteligncia, enquanto
no quadro 2 essa listagem considera as provas psicolgicas da rea da
personalidade. De referir que acrescentamos um asterisco sempre que a prova se
encontra devidamente aferida para a populao portuguesa (dois asteriscos
quando essa aferio est em curso), alertando desde j para vrias dificuldades e
para possveis imperfeies nesta classificao.

Quadro 1 Provas de inteligncia mais utilizadas pelos psiclogos

Designao Ocorrncias
WPPSI (6) + WPPSI-R* (3) 9
WISC* (59) + WISC-R (20) + WISC-III* (32) 111
WAIS (39) + WAIS-R (9) + WAIS-III** (3) 51
Matrizes de Raven: Standard (53) + Coloridas* (11) 64
Desenho da Figura Humana (Goodenough) 13
Bateria de Provas de Raciocnio/BPRD* (32) 32
DAT* (6) + PMA* (4) + GATB* (8) 18
Barragem de Ateno TP* 21
Figura Complexa de Rey** 42
Bender (16) + Benton (5) 24
Legenda: * = aferida; ** = aferio em curso; (n)

Observando o Quadro 1, destacam-se, como mais frequentemente

utilizadas, as provas de Wechsler, principalmente a WISC (listada em primeiro
 7

lugar 35,7% das vezes e 23,2% em segundo). Ainda que com menor expresso,
tambm assinalvel a utilizao da WAIS (listada quer em primeiro quer em
segundo lugar 28,2% das vezes), embora nenhuma das suas verses se encontre
aferida para Portugal. Tambm o testes das Matrizes Progressivas de Raven
(listado em primeiro lugar 11,5% das vezes e 23,1% em segundo), aparece
bastante utilizado, seja na sua verso standard seja na verso colorida (apenas esta
ltima verso est devidamente aferida em Portugal). De referir, ainda, a Bateria
de Provas de Raciocnio/Bateria de Provas de Raciocnio Diferencial (listada em
primeiro lugar 11,5% das vezes e 37,1% em segundo) e a Figura Complexa de
Rey (listada em primeiro lugar 4,8% das vezes e 14,3% em segundo), cuja
aferio se encontra em curso. Por ltimo, aparecem menos usados os testes de
aptides diferenciadas (DAT, PMA e GATB) e outras tantas provas para avaliao
de processos cognitivos bsicos (TP, Bender e Benton).
Como podemos reconhecer, tendencialmente so mais usadas as provas
previamente aferidas para Portugal, muito embora no pode deixar de se apontar
um uso bastante substancial da escala de Wechsler para adultos (WAIS) quando
no se encontra devidamente aferida, por contraste com a baixa utilizao da
escala pr-escolar deste mesmo autor (WPPSI-R) j aferida.

Quadro 2 Provas de personalidade mais utilizadas pelos psiclogos

Designao Ocorrncias
Rorschach 71
TAT (43) + CAT (45) 88
MMPI (26) + MMPI-II (3) + MMPI-R (1) + Mini-Mult (12) 42
MCMI (10) + MCMI-II (7) (Multiaxial de Millon) 17
CPI (California) 10
NEO-PI-R* (12) 12
Inventrios de Depresso: Beck* (13) + IACLIDE* (3) + Hamilton (2) 18
Desenho da Famlia (20) + Livre (8) + HTP (3) + rvore (2) 33
Legenda: * = aferida; ** = aferio em curso; (n)

As tcnicas projectivas, nomeadamente o Rorschach (listado em primeiro

lugar 36,6% das vezes e 19,7% em segundo), aparecem amplamente usadas. O
seu uso suplanta claramente a utilizao dos questionrios de personalidade,
 8

sendo certo que vrios destes no se encontram aferidos para a populao

portuguesa. Tambm o MMPI (listado em primeiro lugar 34,6% das vezes e
15,4% em segundo) aparece bastante usado entre os respondentes, mesmo que
ainda no aferido. Assiste-se, ainda, a uma certa utilizao das tcnicas de
desenho, em particular do Desenho da Famlia (listada em segundo e terceiro
lugar 29,4% das vezes). Como em relao a alguns contrastes feitos a propsito
das provas de inteligncia aferidas e no aferidas, verifica-se uma menor
utilizao do questionrio NEO-PI-R face s verses do MMPI, quando estas
ltimas ao contrrio do primeiro no se encontram aferidas para Portugal.
Excluindo as provas passveis de derivao terica em termos de anlise
dos resultados (Rorschach, TAT, CAT e Desenho da Famlia), escassa a
percentagem de provas de personalidade devidamente validadas para a populao
portuguesa utilizadas pelos respondentes. Esta situao, sem paralelo ao nvel das
provas de inteligncia, poder significar uma utilizao mais liberal destas
provas, por exemplo como guies de entrevistas, ou ento srias dificuldades de
objectividade e validade dos relatrios produzidos atravs do recurso s provas
assinaladas. Com efeito, tomando os resultados obtidos neste inqurito, o recurso
em Portugal a provas psicolgicas no validadas especialmente evidente para os
inventrios de personalidade (s o NEO-PI-R est validado).
A terminar, importa referir algumas outras provas psicolgicas
mencionadas pelos respondentes. Em primeiro lugar, verifica-se uma certa
utilizao da Escala de Desenvolvimento de Griffiths (23 ocorrncias) que, muito
embora no aferida em termos nacionais, foi objecto de alguns estudos sectoriais
conhecidos e que provavelmente enquadram a sua utilizao em situaes
especficas (de referir tratar-se de uma escala que abarca diversas reas do
desenvolvimento psicolgico e desde idades bastantes precoces, o que poder
justificar um nmero bem superior de ocorrncias face WPPSI-R, embora esta
ltima se encontre devidamente aferida para Portugal). Em segundo lugar,
verificaram-se 12 ocorrncias para um conjunto de provas psicolgicas de
 9

avaliao dos interesses (Kuder, CDI, Holland), nenhuma delas devidamente

aferida a nvel nacional, e 10 ocorrncias para escalas de auto-conceito (Piers-
Harris, Susan-Harter, Rosenberg), apenas com alguns estudos de validao
associados.

Discusso

Tomando os elementos de caracterizao dos respondentes, podemos

referir a juventude dos profissionais de psicologia em Portugal (menos que um
tero destes profissionais com mais de 15 anos de prtica). O aparecimento tardio
dos cursos de Psicologia nas universidades portuguesas (final da dcada de 1970)
e o aumento exponencial dos cursos de psicologia oferecidos em instituies
privadas do Ensino Superior em Portugal, nos ltimos anos, justificam esta
juventude (alis no se consideraram psiclogos com menos de 3 anos de prtica
profissional). Como seria expectvel, a larga maioria dos psiclogos trabalha em
contextos de clnica/sade e de educao.
Descrevendo as percepes e as prticas dos psiclogos portugueses no
que diz respeito avaliao psicolgica, a larga maioria considera a sua formao
acadmica na rea como adequada (apenas cerca de 20% aponta fragilidades
nessa formao). Mesmo assim, assiste-se a uma taxa bastante elevada de
utilizao de provas psicolgicas no devidamente validadas e aferidas na
populao portuguesa. Esta situao mais frequente na rea da personalidade do
que na rea da inteligncia, mesmo que aqui se verifique, nalguns casos, uma
certa utilizao de provas no aferidas (certos servios, mormente servios
pblicos, recorrem a tal utilizao na base de estudos prprios de validao). No
entanto, como dizamos, a situao particularmente grave na rea da avaliao
da personalidade seja ao nvel das tcnicas projectivas seja ao nvel dos
questionrios. Dever ser objecto de maior preocupao a avaliao e
 10

consequente relatrio assente em provas apenas circunscritamente validadas na

rea da personalidade.
Tudo isto torna clara a necessidade de sensibilizar os psiclogos
portugueses, nomeadamente os acadmicos, para a necessidade de mais estudos
de aferio para Portugal de provas psicolgicas, especialmente na rea da
personalidade. Os custos humanos e materiais envolvidos justificam que um
maior nmero de provas acadmicas, a nvel de mestrado e de doutoramento,
possa ser dedicado a este tipo de estudos. Reclamando-se a avaliao psicolgica
e seus relatrios para situaes sociais bem especficas, acreditamos que s a
percia do profissional no suficiente para algumas das afirmaes que,
certamente, integram os relatrios por si produzidos. A ausncia de tais estudos
tambm acaba por condicionar, de forma negativa, a investigao e a prtica da
psicologia no nosso Pas.

Referncias

Almeida, L. S. (1994). Inteligncia: Definio e medida. Aveiro: CIDInE.

Almeida, L. S., & Cruz, O. M. R. (1985). Utilizao dos testes psicolgicos: Resultados de um
inqurito junto dos psiclogos portugueses. Jornal de Psicologia, 4(5), 11-18.
Almeida, L. S., & Cruz, O. M. R. (1988). O uso dos testes como revelador dos modelos de prtica
psicolgica em Portugal. Psicologia: Teoria e pesquisa, 4(3), 207-224.
Almeida, L. S., Simes, M. R., & Gonalves, M. M. (1995). Provas psicolgicas em Portugal:
Situao actual, limitaes e desafios. In L. S. Almeida, M. M. Gonalves, & M. R. Simes
(Eds.), Provas psicolgicas em Portugal (pp. I-IX). Braga: APPORT.
American Psychological Association (1999). Standards for educational and psychological tests.
Washington, DC: APA.
Andrews, J. L., Saklofski, D., & Janzen, H. (Eds.) (2001). Handbook of psychoeducational
assessment. New York, NY: Academic Press.
Bartram, D. (2001). Guidelines for test users: A review of national and international initiatives.
European Journal of Psychological Assessment, 17(3), 173-186.
Bnony, H. (2002). L examen psychologique et clinique de ladolescent. Paris: Nathan.
Cruz, O. M. R., & Almeida, L. S. (1987). A utilizao dos testes psicolgicos em Portugal:
Anlise segundo a formao e o domnio de prtica profissional. Jornal de Psicologia, 6(1),
13-19.
Dana, R. H. (2005). Multicultural assessment: Principles, applications and examples. Mahwah,
NJ: Erlbaum.
Diniz, A. M. (2004). Sobre essas coisas a que chamamos crenas. Lisboa: Climepsi.
Edenborough, R. (2005). Assessment methods in recruitment, selection and performance: A
managers guide to psychometric testing, interviews and assessment centres. New York, NY:
Kogan Page.
 11

Eignor, D. (2001). Standards for the development and use of tests: The standards for educational
and psychological testing. European Journal of Psychological Assessment, 17(3), 157-173.
Emmanuelli, M. (2004). Lexamen psychologique en clinique. Paris: Dunod.
Fernndez-Ballesteros, R. (1999). Psychological assessment: Futures, challenges and progresses.
European Psychologist, 4, 248-262.
Hambleton, R. K., Merenda, P. F., & Spielberger, C. D. (Eds.) (2005). Adapting educational and
psychological tests for cross-cultural assessment. Mahwah, NJ: Erlbaum.
Heilbrun, K. (2001). Principles of forensic mental health assessment. New York, NY: Kluwer
Academic/Plenum.
International Test Commission (2001). ITC guidelines on test use [On-line]. Retrieved August
2003 from http://www.intestcom.org/itc_projects.htm
International Test Commission (ITC) (1999/2003). Adaptao portuguesa das Directrizes
Internacionais para a utilizao de testes. Lisboa: Cegoc. [Comisso para a Adaptao
Portuguesa: Abel Pires, Antnio Menezes Rocha, Leandro Almeida, Maria Joo Afonso,
Maria Joo Seabra Santos, Mrio R. Simes & Rui Brtolo Ribeiro].
Krishnamurthy, R., VandeCreek, L., Kaslow, N. J., Tazeau, Y. N., Miville, M. L., Kernes, R.,
Stegman, R., Suzuki, L., & Benton, S.A. (2004). Achieving competency in psychological
assessment: Directions for Education and training. Journal of Clinical Psychology, 60(7),
725-739.
Leito, L. M. (Coord.) (2004). Avaliao psicolgica em orientao escolar e profissional.
Coimbra: Quarteto.
Maarse, F. J., Mulder, L. J. M., Brand, A. N., & Akkerman, A. E. (2003). Clinical assessment,
computerized methods, and instrumentation. Sweets & Zeitlinger.
Muiz, J., Prieto, G., Almeida, L. S., & Bartram, D. (1999). Tests use in Spain, Portugal and Latin
American Countries. European Journal of Psychological Assessment, 15(2), 151-157.
Pinard, G. F., & Pagani, L. (Ed.) (2001). Clinical assessment of dangerousness: Empirical
contributions. Cambridge: Cambridge University Press.
Poortinga, Y. H. (1989). Equivalence of Cross-Cultural Data: An Overview of Basic Issues.
International Journal of Psychology, 24, 737-756.
Poortinga, Y. H. (1993). La psychologie interculturelle et la dmythification de la culture. In F.
Tanon & G. Verms (Eds.), Lindividu et ses cultures (pp. 98-111). Paris: LHarmattan.
Poortinga, Y., Coetsier, P, Meuris, G., Miller, K. M., Samsonowitz, V., & Seisdedos, N. (1982). A
survey of attitude towards tests among psychologists in six European countries. International
Review of Applied Psychology, 31, 7-34.
Poortinga, Y. H., & Van De Vijver, F. (1987). Explaining cross-cultural differences. Bias analysis
and beyond. Journal of Cross-Cultural Psychology, 18, 259-282.
Rogers, R., & Shuman, D. W. (2000). Conducting insanity evaluations (2nd ed.). New York, NY:
Guilford.
Simes, M. R. (1993). Heursticas, enviesamentos e erros inferenciais na mecnica da avaliao
psicolgica. Anlise Psicolgica, XI (2), 253-266.
Simes, M. R. (2005). Potencialidades e limites do uso de instrumentos no processo de avaliao
psicolgica. Psicologia, Educao e Cultura, IX(2), 237-264.
Sternberg, R. J., & Kaufman, J.C. (1996). Innovation and intelligence testing: The curious case of
the dog that did not bark. European Journal of Psychological Assessment, 12 (3), 175-182.
Suzuki, L. A., Ponterotto, J. G., & Meller, P. J. (2001). Handbook of multicultural assessment:
Clinical, psychological and educational applications. New York, NY: Wiley.
Thomas, J. C. (Ed.) (2003). Comprehensive handbook of psychological assessment (Vol. 4:
Industrial and organizational assessment). New York, NY: Wiley.
Turner, S. M., DeMers, S. T., Fox, H. R., & Reed, G. M. (2001). APAs guidelines for test user
qualifications. American Psychologist, 56, 1099-1113.