Psico-USF, v. 12, n. 2, p. 211-219, jul./dez.

2007 211

Discutindo procedimentos psicomtricos a partir da anlise de um instrumento de

avaliao neuropsicolgica breve1
Josiane Pawlowski Universidade Federal do Rio Grande do Sul2
Clarissa Marceli Trentini Universidade Federal do Rio Grande do Sul
Denise Ruschel Bandeira Universidade Federal do Rio Grande do Sul

Resumo
A desatualizao e a falta de testes psicolgicos adequados para uso no Brasil apontam a necessidade de pesquisas
sobre validao, fidedignidade, padronizao e normatizao dos testes. Com relao avaliao neuropsicolgica,
existem poucos instrumentos nacionais para avaliar os prejuzos das funes cognitivas causados por
leses/disfunes cerebrais. O objetivo deste artigo discutir teoricamente o estudo psicomtrico de testes
neuropsicolgicos e exemplific-lo atravs das etapas de validao do Instrumento de Avaliao Neuropsicolgica
Breve NEUPSILIN, desenvolvido para avaliar algumas funes cognitivas. Especificamente, sero enfatizadas as
dificuldades encontradas no desenvolvimento de mtodos psicomtricos para a validao do NEUPSILIN e
sugeridas solues para essas dificuldades.
Palavras-chave: Validao; Avaliao neuropsicolgica; Mtodos psicomtricos.

Discussing psychometric procedures through the analysis of a brief neuropsychological

assessment instrument

Abstract
There are still some outdated and unstandardized psychological tests in Brazil. This evidence points to the lack of
researches about validity, reliability and normative data of psychological tests to be used with Brazilian people.
Besides, there are few instruments to assess damaged cognitive functions caused by brain injuries. The purpose of
this paper is to discuss the psychometric study of neuropsychological tests theoretically and to give the example of
NEUPSILIN, developed to assess some cognitive functions briefly. More specifically, we will point the difficulties
of developing psychometric methods to NEUPSILIN validation, as well as suggest solutions to these difficulties.
Keywords: Validation; Neuropsychological assessment; Psychometric methods.

Introduo Entretanto, essa rea mostra carncia no que se refere a

instrumentos para avaliao dos prejuzos das funes
Nos ltimos anos tm crescido o interesse dos cognitivas em decorrncia de leses/disfunes cerebrais.
pesquisadores pelas reas de avaliao psicolgica e Considerando a importncia de ambas reas e a carncia
neuropsicolgica. A primeira retomou a ateno da de instrumentos para avaliao neuropsicolgica, o
comunidade cientfica para a construo de instrumentos presente artigo objetiva evidenciar algumas das
de avaliao principalmente aps as discusses sobre a dificuldades no estudo psicomtrico de instrumentos de
desatualizao e a falta de instrumentos com qualidades avaliao neuropsicolgica, exemplificado a partir do
psicomtricas adequadas para uso no Brasil. Nesse sentido, processo de validao do Instrumento de Avaliao
o sistema de avaliao dos testes psicolgicos, criado Neuropsicolgica Breve NEUPSILIN (Fonseca, Salles &
atravs da Resoluo n 2/2003 do Conselho Federal de Parente, no prelo). Tambm sero sugeridas algumas
Psicologia (CFP, 2003), apontou a necessidade de maior propostas de soluo diante das dificuldades encontradas
oferta de instrumentos vlidos, fidedignos, padronizados e naquele processo.
normatizados para serem utilizados com a populao
brasileira. Com relao rea da neuropsicologia, o Os instrumentos de avaliao neuropsicolgica e sua
crescimento pode ser evidenciado pela sua recente carncia no Brasil
regulamentao, atravs da Resoluo CFP n 2/2004,
como uma especialidade da Psicologia (CFP, 2004). Os primeiros estudos sobre baterias de testes
1 Os autores agradecem ao Conselho Nacional de Pesquisa Cientfica CNPq pelo apoio e financiamento pesquisa.
2 Endereo para correspondncia:
Universidade Federal do Rio Grande do Sul Instituto de Psicologia
Rua Ramiro Barcelos, 2.600 sala 120 90035-003 Porto Alegre-RS Telefone: (51) 3308-5352
E-mail: josipski@yahoo.com.br
212 Pawlowski, J., Trentini, C. M., Bandeira, D. R. Discutindo procedimentos psicomtricos a partir da anlise de um instrumento...
neuropsicolgicos, de acordo com Pea-Casanova (1985),
foram publicados na obra de Weinsenburg e McBride em
1935, ao investigarem as afasias. Nessa mesma poca, foi
desenvolvida a bateria de Halstead-Reitan em duas etapas,
primeiro por Ward Halstead e, na dcada de 50, por Halph
Reitan. Segundo Kane (1991), entre as principais
vantagens das baterias fixas so destacadas: (1) a
possibilidade de descobrir dficits no esperados em
funo do detalhamento de um maior nmero de funes
cognitivas; (2) o desenvolvimento de uma ampla base de
dados normativos em razo de serem aplicados os
mesmos testes a todos os pacientes; e (3) a aprendizagem
mais rpida da aplicao por estudantes em treinamento.
Atualmente, dentre as baterias internacionais mais
utilizadas esto Halstead-Reitan Neuropsychological Test, Luria
Nebraska Neuropsychological Battery e Iowa-Benton
Neuropsychological Assessment (Tupper, 2000). A limitao
dessas baterias consiste no tempo prolongado de aplicao
e levantamento, o que torna seu uso invivel em algumas
situaes clnicas, alm da necessidade de um treino
especializado para sua aplicao (Ostrosky-Sols, Ardila &
Rosselli, 1999). Em conseqncia, instrumentos breves
tm sido desenvolvidos, tais como o Consortium to Establish
a Registry for Alzheimers Disease CERAD (Morris & cols.,
1989) e o NEUROPSI: Evaluacin Neuropsicolgica Breve en
Espaol (Ostrosky-Sols & cols., 1999). Recentemente,
novos estudos de normatizao da bateria CERAD foram
conduzidos por Beeri e colaboradores (2006),
considerando as variveis idade, sexo e escolaridade.
Dentre os instrumentos de avaliao das funes
cognitivas de forma breve utilizados no Brasil encontra-se
o Mini-Exame do Estado Mental (MEEM) (Folstein,
Folstein & McHugh, 1975, publicado no Brasil por
Bertolucci, Brucki, Campacci & Juliano, 1994), cuja
finalidade rastrear a presena de comprometimento
cognitivo, principalmente em populaes com um possvel
quadro de demncia. Os estudos nacionais com o MEEM
apresentam algumas sugestes de modificao no mesmo
a fim de uniformizar o uso com a populao brasileira
(Almeida, 1998; Brucki, Nitrini, Caramelli, Bertolucci &
Okamoto, 2003). Alm desse instrumento, Bertolucci e
colaboradores (2001) estudaram a aplicabilidade da bateria
neuropsicolgica CERAD em idosos brasileiros. Ainda,
visando ao diagnstico diferencial entre demncia leve e
depresso, Chaves e Izquierdo (1992) organizaram uma
bateria que inclui tarefas breves para avaliar prejuzos nas
funes de memria, linguagem, abstrao, clculo,
julgamento, bem como avaliar apraxias e agnosias. Essa
bateria tambm foi utilizada por Ferreira (1997) em uma
pesquisa sobre a avaliao de pacientes com demncias,
tendo sido denominada como Critrios de Positividade
para Dficit Cognitivo. Contudo, importante ressaltar
que nenhum desses instrumentos destina-se especi-
ficamente avaliao de pacientes com leses cerebrais
focais.
Evidencia-se, assim, que a elaborao de
instrumentos de avaliao neuropsicolgica tem crescido
nos ltimos anos, mas essa rea ainda pouco
desenvolvida no Brasil, onde os testes neuropsicolgicos
apresentam limitaes de uso principalmente em virtude
da falta de dados normativos e estudos com grupos
clnicos (Alchieri, 2004; Andrade, 2002; Bandeira, Serafini,
Fonseca, Salles & Parente, 2005; Capovilla, Joly &
Tonelotto, 2006; Mder, 2002; Simes, 2002). Alm disso,
a rea carece de testes que no demandem tempo
prolongado de aplicao, que sejam sensveis a danos
cerebrais leves ou que apontem prejuzos cognitivos
especficos. A fim de suprir essa lacuna, foi elaborado no
Brasil, por Fonseca e colaboradores (no prelo), o
Instrumento de Avaliao Neuropsicolgica Breve
NEUPSILIN. O objetivo desse teste fornecer um perfil
neuropsicolgico breve mediante a avaliao de reas de
competncia e dficits nas funes cognitivas: orientao
temporoespacial, ateno, percepo, memria, calculias,
linguagem, praxias e funo executiva (resoluo de
problemas e fluncia verbal), as quais so avaliadas por
meio de 32 tarefas. A pontuao final do NEUPSILIN
ainda est sendo avaliada, pois depende da coleta de dados
normativos e da ponderao de alguns escores. As
habilidades, as tarefas e os escores brutos foram
distribudos na construo do instrumento, como segue:
I) Orientao temporoespacial Tempo: resposta de dia
da semana, dia do ms, ms e ano, e Espao: resposta de
local, cidade, estado e pas (escore mximo = 8 pontos);
II) Ateno 1) Contagem inversa: contagem de 50 a 30
pelo examinando e contagem do tempo de realizao da
tarefa pelo examinador para avaliar a velocidade de
processamento (escore mximo = 20 pontos) e 2)
Repetio de seqncia de dgitos: repetio de uma
seqncia de sete nmeros (escore mximo = 7 pontos);
III) Percepo 1) Verificao de igualdade e diferena de
linhas: verificao de seis pares de linhas (escore mximo
= 6 pontos); 2) Heminegligncia visual: percepo de todo
espao de uma folha de papel repleta de traos que
devero ser riscados (escore = 1 ponto); 3) Percepo de
faces: avaliao, como iguais ou diferentes, de trs pares de
fotografias de faces, sendo uma delas de frente e outra de
perfil (escore mximo = 3 pontos); e 4) Reconhecimento
de faces: memorizao de dois rostos desenhados, que
devem ser reconhecidos entre quatro posteriormente
(escore mximo = 2 pontos);
IV) Memria 1) Memria de trabalho: a) Ordenamento
ascendente de dgitos: repetio em ordem crescente de 10
conjuntos de dois at seis dgitos (escore mximo = 10
pontos); b) Span auditivo de palavras em sentenas:
Psico-USF, v. 12, n. 2, p. 211-219, jul./dez. 2007
 Pawlowski, J., Trentini, C. M., Bandeira, D. R. Discutindo procedimentos psicomtricos a partir da anlise de um instrumento...
memorizao e evocao das ltimas palavras de frases,
aps a leitura de conjuntos de dois, trs, quatro e cinco
sentenas pelo examinador (escore mximo = 14 pontos);
2) Memria verbal: a) Evocao imediata: repetio de
nove palavras ditas pelo examinador (escore mximo = 9
pontos), b) Evocao tardia: emisso das mesmas nove
palavras em tempo posterior (escore mximo = 9 pontos),
e c) Reconhecimento: indicao, em uma lista de 18
palavras, da presena ou no da palavra na lista original
falada pelo examinador (escore mximo = 18 pontos); 3)
Memria semntica de longo prazo: resposta a duas
perguntas referentes a conhecimentos gerais (escore
mximo = 5 pontos); 4) Memria visual de curto prazo
(trs estmulos): memorizao de uma figura sem sentido
de cada vez e reconhecimento entre um conjunto de trs
figuras semelhantes (escore mximo = 3 pontos); 5)
Memria prospectiva: lembrana, ao final da testagem, da
instruo de escrever o nome em uma folha de papel
fornecida no incio da avaliao (escore mximo = 2
pontos);
V) Habilidades aritmticas resoluo de quatro clculos,
um de cada operao aritmtica bsica (escore mximo =
8 pontos);
VI) Linguagem 1) Linguagem oral: a) Nomeao de dois
objetos e duas figuras (escore mximo = 4 pontos); b)
Repetio de oito palavras reais e duas pseudopalavras
(escore mximo = 10 pontos); c) Linguagem automtica:
contagem de um a dez e verbalizao de todos os meses
do ano, em ordem (2 pontos); d) Compreenso oral (trs
conjuntos de figuras): indicao da figura correspondente
ao enunciado verbal do examinador (escore mximo = 3
pontos); e) Processamento de inferncias: explicao do
significado de um provrbio e de duas metforas (escore
mximo = 3 pontos); 2) Linguagem escrita: a) Leitura em
voz alta de dez palavras reais e de duas pseudopalavras
(escore mximo = 12 pontos); b) Compreenso escrita
(trs estmulos): leitura em silncio de palavras e frases e
indicao das figuras correspondentes (escore mximo = 3
pontos); c) Escrita espontnea de uma frase (escore = 2
pontos); d) Escrita copiada de uma frase (escore = 2
pontos) e e) Escrita ditada de dez palavras reais e de duas
pseudopalavras (escore mximo = 12 pontos);
VII) Praxias a) Ideomotora: realizao de trs gestos,
conforme instruo verbal do examinador (escore mximo
= 3 pontos); b) Construtiva: cpia de trs figuras
(quadrado, flor e cubo) e desenho de um relgio (escore
mximo = 16 pontos); c) Reflexiva: repetio de uma
seqncia de trs gestos (escore mximo = 3 pontos);
VIII) Resoluo de problemas resposta a duas perguntas
envolvendo raciocnio abstrato (escore mximo = 2
pontos);
Psico-USF, v. 12, n. 2, p. 211-219, jul./dez. 2007
213
IX) Funo executiva (fluncia verbal) verbalizao,
durante um minuto, de palavras que iniciem com a letra F.
Escore: contagem do nmero de itens verbalizados.
Como pode ser observado por essa descrio, as
tarefas do NEUPSILIN so curtas e de fcil resoluo por
pessoas que possuem preservadas as funes cognitivas
avaliadas pelo teste. O NEUPSILIN pode ser classificado
como um instrumento de avaliao neuropsicolgica
breve, porque possui um tempo reduzido de aplicao
(entre 30 e 40 minutos) e inclui tarefas para acessar vrias
funes cognitivas.
As etapas de construo de um instrumento de
avaliao psicolgica
A construo de um instrumento de qualidade
requer etapas bem definidas e procedimentos rigorosos.
De acordo com Pasquali (1999), existem alguns passos
necessrios, que incluem tarefas e mtodos especficos, os
quais devem ser realizados em uma seqncia temporal
determinada. Esses passos compem trs eixos distintos,
denominados por Pasquali procedimentos tericos,
empricos ou experimentais, e analticos ou estatsticos.
Os procedimentos tericos incluem a escolha do
sistema a ser estudado, a definio de suas propriedades
(atributos), a concepo da dimensionalidade desses
atributos, a definio constitutiva e operacional dos
mesmos, a construo de itens e a validao de contedo.
Essa etapa tem como primeiro objetivo a especificao das
categorias comportamentais que representam o objeto
psicolgico a ser medido, tornando-se necessria a
explicitao dos fundamentos tericos que orientam a
criao dos itens para que seja garantida a legitimidade da
medida (Pasquali, 1999). Dessa forma, a investigao
terica deve preceder a construo dos itens, o que
tambm fornece uma direo s etapas seguintes de
construo. Como o sistema psicolgico escolhido no
pode ser medido diretamente, so delimitados os atributos
ou propriedades que o definem, cuja escolha depende de
fatores tais como o interesse do pesquisador, a saturao
de estudos prvios e a relevncia do atributo para o
instrumento. Desses atributos so derivadas dimenses
dependentes tanto de argumentos tericos quanto de
anlises fatoriais realizadas em estudos exploratrios
posteriores, a fim de investigar se a teoria que fundamenta
a construo do teste ou no pertinente. Aps definidas
as dimenses, os construtos so descritos com base em
conceitos da teoria e devem ser transformados em itens
mensurveis, ou seja, devem ser definidos operacional-
mente. Construdos os itens, estes devem ser submetidos
anlise de juzes (peritos na rea do construto) e anlise
semntica que objetiva verificar se os mesmos podem ser
214 Pawlowski, J., Trentini, C. M., Bandeira, D. R. Discutindo procedimentos psicomtricos a partir da anlise de um instrumento...
compreendidos e se apresentam validade aparente (credi-
bilidade), etapa que compreende o estudo de validade de
contedo do instrumento.
Aps a verificao da validade de contedo do
teste, segue-se a realizao dos procedimentos empricos e
analticos. Os primeiros incluem a definio de amostras e
de instrues do teste, a administrao do instrumento
piloto e a coleta vlida para proceder verificao de suas
qualidades psicomtricas. J os procedimentos estatsticos
(analticos) so a ltima etapa da construo de um
instrumento, abrangendo anlises estatsticas a serem
efetuadas para validao, preciso e normatizao do teste.
Nessa etapa, de acordo com Pasquali (2003), so realizadas
as anlises da validade de construto e de critrio do
instrumento.
No que se refere construo do NEUPSILIN,
esse instrumento j foi submetido anlise de validade de
contedo, incluindo as anlises de juzes e semntica
(Fonseca, Salles & Parente, 2006). Alm disso, j foi
realizado um estudo piloto com a ltima verso do
instrumento (Pawlowski & colaboradores, 2006). Tais
anlises indicaram a adequao do teste quanto validade
de contedo e compreenso dos itens pelos
participantes. Entendendo-se a necessidade de prosseguir
as anlises das qualidades psicomtricas do NEUPSILIN,
o instrumento ainda ser submetido a estudos de outras
evidncias de validade e investigaes de fidedignidade,
padronizao e normatizao.
Dificuldades e possibilidades de anlises de validade
do NEUPSILIN
Aps o estudo de validade de contedo do
NEUPSILIN, as etapas seguintes de anlise de suas
qualidades psicomtricas devem incluir os estudos de
validade de construto e de critrio. A validade de construto
verifica se o teste constitui uma representao adequada
do construto terico ou trao e a validade de critrio avalia
a eficcia do teste em predizer o desempenho de um
grupo especfico de indivduos, sendo ento selecionados
grupos-critrio referentes aos construtos avaliados pelo
instrumento (Anastasi & Urbina, 2000; Pasquali, 2001).
Enquanto a anlise de validade de contedo do
NEUPSILIN seguiu as propostas de execuo
apresentadas na sesso anterior, investigaes de validade
de construto desse instrumento so mais restritas. Isso
ocorre em virtude das particularidades referentes forma
do teste, que inclui tarefas breves para avaliar vrias
funes cognitivas, e da maneira como realizado o seu
levantamento, ou seja, como o teste pontuado. Dessa
forma, mesmo existindo mtodos distintos para analisar a
validade de construto de um instrumento (Pasquali, 1999,
2001, 2003), algumas restries so verificadas no que se
refere ao estudo psicomtrico do NEUPSILIN, por
exemplo, nos seguintes procedimentos:
1) Diferenciao por idade: um procedimento utilizado
quando o teste avalia caractersticas de comportamento
que aumentam ou diminuem com a idade, por exemplo,
a inteligncia e o desenvolvimento psicomotor. Em um
estudo piloto realizado por Santos (2005) com o
NEUPSILIN, poucos subtestes apresentaram diferena
significativa na comparao dos escores entre adultos
jovens e uma populao de 59 a 75 anos. Assim, o
desempenho no NEUPSILIN tende a permanecer
estvel entre adultos jovens, podendo ser encontrada
tendncia de declnio no desempenho em indivduos
saudveis em conseqncia do envelhecimento, o que
tambm foi evidenciado no estudo de Ostrosky-Sols &
colaboradores (1999) com a bateria espanhola
NEUROPSI. possvel que a partir da idade de 75 anos
seja evidenciado um declnio mais representativo nas
tarefas do NEUPSILIN, devendo, para essa anlise, ser
controlados fatores como a escolaridade e hbitos de
leitura e escrita, que podem influenciar na manuteno
do desempenho cognitivo (Fonseca, 2006). Portanto, a
diferenciao por idade poderia contribuir no estudo de
validade do NEUPSILIN mediante a comparao de
suas faixas extremas;
2) Correlaes com testes que medem o mesmo construto: consiste
na aplicao de outro instrumento que mea o mesmo
construto daquele que se pretende validar. Na validao
do NEUPSILIN, esse procedimento dificultado em
razo da escassez de instrumentos para avaliao de
funes cognitivas que meam conjuntamente os
mesmos construtos avaliados por esse teste. De um
modo geral, os autores incluem em uma bateria subtestes
que avaliam diferentes funes cognitivas, de acordo com
seu interesse clnico ou de pesquisa. Uma possibilidade
para resolver essa questo seria administrar testes ou
tarefas de instrumentos j existentes que meam o
mesmo construto de cada razo includa no
NEUPSILIN. Para no ser necessrio um tempo de
aplicao muito longo, o que poderia gerar efeito de
reduo do desempenho em razo do cansao, poderiam
ser aplicados apenas alguns subtestes do NEUPSILIN e
seus testes correlatos, sendo formados grupos para a
anlise de todos os subtestes. Tambm possvel a
aplicao de testes em dias diferentes e ordens diversas
para controlar o efeito de aprendizado em tarefas
semelhantes, o que poderia enviesar o processo de
validao;
3) Anlise convergente-discriminante: nessa anlise necessrio
que o instrumento novo se correlacione significativamente
a variveis com as quais teoricamente deve estar
Psico-USF, v. 12, n. 2, p. 211-219, jul./dez. 2007
 Pawlowski, J., Trentini, C. M., Bandeira, D. R. Discutindo procedimentos psicomtricos a partir da anlise de um instrumento...
relacionado (validade convergente) e que no se
correlacione a variveis com as quais teoricamente deve
divergir (validade discriminante) (Anastasi & Urbina, 2000;
Pasquali, 2003). Considerando os diversos construtos
avaliados pelo NEUPSILIN, poderia ser realizada uma
anlise convergente entre esse instrumento e a inteligncia
ou raciocnio. J para a anlise discriminante, difcil eleger
algum teste que no se correlacione a qualquer das funes
avaliadas pelo NEUPSILIN. importante ressaltar, ainda,
que esse tipo de procedimento isolado dos demais fornece
pouca evidncia de validade do novo teste;
4) Intervenes experimentais: objetivam verificar se o teste
discrimina claramente grupos-critrio produzidos
experimentalmente em relao ao trao a ser medido, por
exemplo, diferenciar ansiosos de no-ansiosos atravs de
uma escala, devendo ter sido criada uma situao
potencialmente geradora de ansiedade qual um dos
grupos seria submetido (Pasquali, 2001). Quanto s
anlises com o NEUPSILIN, esse um procedimento de
difcil delineamento metodolgico em razo das questes
ticas envolvidas em uma possvel interveno
experimental a fim de manipular o funcionamento
cognitivo de um paciente. Um procedimento nessa rea
poderia ser considerado demasiadamente invasivo, alm de
ser necessria a realizao de uma pesquisa interdisciplinar
pela necessidade da participao de especialistas para a
realizao dos procedimentos clnicos com os pacientes;
5) Anlise fatorial: consiste na anlise da dimensionalidade
do instrumento, que tem a finalidade de verificar o
nmero de traos latentes (definidos teoricamente) que o
teste avalia. Nesse sentido, um instrumento tem validade
de construto quando h demonstrao emprica da
hiptese terica que o fundamenta (Pasquali, 2001). A
anlise fatorial pode ser aplicada ao NEUPSILIN desde
que se tenha uma amostra grande, com variabilidade de
desempenho. Alm disso, um mesmo item pode revelar-
se com peso em mais de um fator, ou itens de diferentes
subtestes podem carregar no mesmo fator. Essas
hipteses de configurao dos itens so geradas em razo
da alta correlao entre alguns dos subtestes e funes
avaliadas pelo instrumento, os quais podem ser
interdependentes, tais como a memria e a ateno;
6) Anlise da consistncia interna: consiste em calcular a
correlao entre cada item do teste e o restante dos itens
ou o escore total dos itens. O problema dessa anlise em
um teste neuropsicolgico breve tal como o
NEUPSILIN consiste na composio do instrumento
com itens que avaliam diferentes construtos, o que torna
inadequado o uso da anlise de consistncia interna do
instrumento como um todo. Da mesma forma, essa
anlise no se aplica aos subtestes, visto que muitos
Psico-USF, v. 12, n. 2, p. 211-219, jul./dez. 2007
215
escores apresentam pouca variabilidade, vrios subtestes
so compostos por um nmero reduzido de itens e
alguns possuem itens cujo grau de dificuldade aumenta, o
que no permite a realizao da anlise pelo de
Cronbach. Uma alternativa seria realizar anlises de
correlao simples entre os itens dos subtestes e o total
de cada funo cognitiva avaliada. Com relao a esse
procedimento, importante ressaltar ainda a
considerao de Pasquali (2001) de que a anlise de
consistncia interna no constitui prova cabal de validade
de construto do teste (p. 172), j que correlaes altas
entre itens no indicam necessariamente que estejam
medindo o mesmo construto.
Seguindo os procedimentos necessrios para a
validao de um instrumento, a anlise da validade de
critrio verifica a eficcia do teste em predizer o
desempenho de um grupo especfico de indivduos,
devendo ser selecionados grupos-critrio referentes aos
construtos avaliados pelo instrumento (Anastasi &
Urbina, 2000; Pasquali, 2001). Os critrios so avaliados
por outro tipo de tcnica e se referem a aspectos
externos ao que o instrumento mede, por exemplo,
desempenhos acadmico, profissional ou em um
treinamento especializado, diagnstico psiquitrico,
avaliaes de professores, orientadores ou colegas e
outros testes disponveis (Pasquali, 2003). Os
procedimentos para avaliar a validade de critrio so as
anlises concorrente e preditiva. Na anlise concorrente
realizada a avaliao simultnea da medida e do critrio,
por exemplo, a avaliao diagnstica por um instrumento
neuropsicolgico e por avaliao neurolgica. J na
anlise preditiva, a avaliao do critrio feita em um
perodo posterior avaliao da medida em questo
(predio de resultados futuros) e pode consistir na
avaliao de grupos contrastantes, correlao com outros
instrumentos j validados e avaliaes externas (Pasquali,
2001). Esse um tipo de validade pertinente anlise
psicomtrica do NEUPSILIN, visto que uma das suas
finalidades diferenciar alteraes produzidas por leses
no hemisfrio direito daquelas produzidas por leses no
hemisfrio esquerdo.
Contudo, necessrio considerar a possibilidade
de as leses produzirem alteraes comportamentais
diferentes nos indivduos graas complexidade das
associaes neuronais do crebro (Gil, 2002; Luria,
1973). Isso dificulta a definio de um critrio, por
exemplo, a formao de um grupo clnico mais
homogneo, ou seja, com alguma leso e com
manifestaes comportamentais semelhantes. Ainda, a
sua realizao requer um tempo mais prolongado, visto
que evidente a dificuldade para delimitar uma amostra
de sujeitos com um tipo especfico de leso em nmero
216 Pawlowski, J., Trentini, C. M., Bandeira, D. R. Discutindo procedimentos psicomtricos a partir da anlise de um instrumento...
suficiente para a realizao de anlises estatsticas. Apesar
desses entraves, esse um dos procedimentos que deve
ser realizado para a validao do NEUPSILIN, por ser o
que evidenciaria a validade do teste em medir diferenas
de leso de hemisfrio direito e esquerdo.
Evidncias de validade como alternativa ao processo de legitimao de
um instrumento
Os procedimentos citados anteriormente
compem um conjunto de passos que so a referncia
principal entre os pesquisadores que constroem
instrumentos para avaliao psicolgica. Entretanto, o
enfoque na anlise de diferentes tipos de validade
(contedo, critrio e construto) para obter um instrumento
de medida apropriado tem sido questionado entre alguns
pesquisadores (Urbina, 2007), sendo sugeridas novas
formas de estudar a validade de um teste. Nesse sentido, a
American Educational Research Association (AERA), a American
Psychological Association (APA) e o National Council on
Measurement in Education (NCME) (1999) elaboraram
padres para testagem educacional e psicolgica. Essas
associaes no consideram necessrias as divises de
estudos de validade segundo seus tipos distintos
(contedo, critrio e construto), pois entendem que
diferentes linhas de evidncias de validade podem fornecer
informaes relevantes para uma determinada
interpretao especfica dos escores de um teste. Dessa
forma, para AERA e colaboradores (1999), a validade
um conceito nico entendido como o grau em que todas
as evidncias acumuladas suportam a interpretao
pretendida dos escores do teste para o propsito a que se
destina (p. 11). Assim, as evidncias de validade podem
ser baseadas no contedo do teste, no processo de
resposta, na estrutura interna do teste, nas relaes com
outras variveis e nas conseqncias da testagem (AERA e
colaboradores, 1999).
No que se refere s evidncias baseadas no
contedo do teste e no processo de resposta, essas se
assemelham aos procedimentos para anlise da validade de
contedo sugerida por Pasquali (2003). Da mesma forma,
as evidncias baseadas na estrutura interna do instrumento
correspondem validade de construto por meio da anlise
fatorial. Para exemplificar essa semelhana, a evidncia de
validade baseada no processo de resposta inclui anlises
tericas e empricas dos processos das respostas dos testes,
as quais podem fornecer evidncias da adequao entre o
construto e as respostas ou desempenhos dos sujeitos
avaliados. Essas evidncias so provenientes, geralmente,
de anlises das respostas individuais e das estratgias
utilizadas para responder ao teste ou podem ser realizadas
a partir de outros aspectos envolvidos em um
desempenho, por exemplo, o tempo de resposta. As
inferncias sobre os processos envolvidos nas respostas do
sujeito podem ainda ser obtidas pela anlise da relao
entre partes do teste ou tambm entre o teste e outras
variveis. Esse tipo de evidncia contribui para a
interpretao dos escores do teste, a fim de ser verificada a
presena de capacidades irrelevantes ao construto que
podem estar influenciando sua resposta. Ainda, os estudos
sobre processos de resposta podem ser obtidos pela
anlise da consistncia entre a avaliao de juzes do
desempenho e os escores de interpretao pretendidos.
Evidencia-se, assim, a semelhana dessa proposta aos
procedimentos de validade de contedo.
As fontes de evidncia baseadas nas
conseqncias da testagem objetivam avaliar se o teste est
medindo caractersticas relacionadas ao construto ou se
mede outros aspectos adicionais. Portanto, responsvel
por examinar a super ou sub-representao de um
determinado construto, mediante a avaliao da
conseqncia da aplicao do teste em uma populao
especfica. J a evidncia baseada nas relaes com outras
variveis compreende anlises da relao dos escores do
teste com variveis externas ao mesmo, por exemplo,
medidas de algum critrio que se espera que o teste possa
predizer. Esse tipo de evidncia inclui procedimentos que
correspondem s anlises convergente e discriminante,
estudos de evidncias experimentais (tal como, examinar
se um teste de atividade acadmica diferencia grupos
instrudos de no-instrudos), alm de evidncias atravs da
relao teste-critrio (delineamentos de evidncias
preditivas e concorrentes). Portanto, so abarcados nessa
forma de avaliao de evidncias de validade tanto
procedimentos que compem estudos de validade de
construto quanto de critrio, tambm sugeridos por
Pasquali (2003). Um ponto a destacar nessa forma de
evidenciar a validade de um instrumento que ele tambm
inclui a possibilidade de analisar a relao entre os escores
de um teste e variveis categricas, incluindo as que
caracterizam os membros de um grupo. Essa anlise
relevante para a validade de um teste quando a teoria que
embasa o seu uso sugere que diferenas entre os grupos,
segundo uma determinada varivel categrica, deveriam
estar presentes ou ausentes para a interpretao do teste
ser sustentada (AERA e colaboradores, 1999).
De acordo com a AERA e colaboradores (1999),
a validade de um instrumento garantida pela integrao
de vrias evidncias de validade, as quais, juntamente com
a teoria, possam sustentar a interpretao pretendida aos
escores de um teste para uso especfico. Portanto, as
diretrizes da AERA e colaboradores ampliam as
possibilidades do pesquisador que estuda as propriedades
psicomtricas de um instrumento de avaliao
neuropsicolgica. Por exemplo, em um estudo possvel
apresentar evidncias da validade de um teste que mede o
desempenho em diversas funes cognitivas, tal como o
Psico-USF, v. 12, n. 2, p. 211-219, jul./dez. 2007
 Pawlowski, J., Trentini, C. M., Bandeira, D. R. Discutindo procedimentos psicomtricos a partir da anlise de um instrumento...
NEUPSILIN, pela relao dos escores do teste com
variveis que so apresentadas pelos sujeitos que iro
responder aos instrumentos, ou seja, variveis categricas,
tal como o nvel de escolaridade.
Procedimentos finais para a anlise das qualidades psicomtricas de
instrumentos de avaliao neuropsicolgica
Para finalizar o processo de anlise psicomtrica
de um instrumento necessria a realizao do estudo da
fidedignidade ou da preciso do teste, que se refere ao
quanto o escore obtido no teste se aproxima do escore
verdadeiro do sujeito num trao qualquer (Pasquali, 1999,
p. 66). A fidedignidade pode ser obtida a partir das
anlises: (a) Teste-reteste do instrumento: a fim de avaliar a
sua estabilidade temporal; (b) Formas paralelas: em que
so aplicadas duas formas de um mesmo teste com o
objetivo de analisar a equivalncia das mesmas; e (c)
Consistncia interna: que pode ser analisada por meio da
correlao simples, do alfa () de Cronbach ou do mtodo
das duas metades, em que um teste dividido em duas
partes equivalentes, sendo calculada a correlao entre os
escores obtidos nas duas metades. No estudo psicomtrico
do NEUPSILIN, podem ser realizados os procedimentos
de anlise de fidedignidade teste-reteste, correlao simples
entre os itens dos subtestes e o resultado total da funo
avaliada, e concordncia entre avaliadores na pontuao de
alguns escores. De acordo com Urbina (2007), avaliadores
ou juzes diferentes podem designar escores distintos ao
desempenho em um mesmo teste ainda que existam
instrues de pontuao detalhadas em um manual, pois o
julgamento subjetivo dos avaliadores pode influenciar na
determinao de um escore do teste.
Por fim, Pasquali (1999) afirma que a construo
de um instrumento com qualidades psicomtricas
satisfatrias e, portanto, com condies de medir um
determinado fenmeno de forma eficaz, precisa incluir
ainda pesquisas de normatizao e padronizao. Por meio
da normatizao estabelecido um padro de referncia
para os resultados do teste, e a padronizao aponta os
meios adequados de aplicao e levantamento do
instrumento. A realizao de tais procedimentos concluiria
as anlises psicomtricas do Instrumento de Avaliao
Neuropsicolgica Breve NEUPSILIN.
Concluso e consideraes finais
Este artigo objetivou discutir o processo de
validao psicomtrica de instrumentos de avaliao
neuropsicolgica breve, indicando possibilidades de anlise
para uma bateria com subtestes que medem diferentes
construtos. Atualmente, evidencia-se na rea da neuro-
psicologia no Brasil a escassez de instrumentos adequados
quanto s condies psicomtricas para avaliao das
funes cognitivas. Muitos dos profissionais da rea
Psico-USF, v. 12, n. 2, p. 211-219, jul./dez. 2007
217
utilizam baterias elaboradas por eles mesmos e que
incluem diferentes testes ou tarefas, os quais no foram
submetidos a estudos psicomtricos de validade. Dessa
forma, a comparao do sujeito avaliado com o seu grupo
de iguais fica comprometida e restrita ao conhecimento
terico e prtico do profissional.
Nesse contexto, a discusso dos mtodos de
validao do NEUPSILIN contribui para o delineamento
de futuras pesquisas de anlises psicomtricas do
instrumento. Ainda mais relevante, a preocupao em
desenvolver o NEUPSILIN seguindo pressupostos
psicomtricos de validao pretende equipar os
profissionais com um material de qualidade para uso em
avaliaes neuropsicolgicas. Diante da carncia na
neuropsicologia de testes nessas condies, o objetivo do
NEUPSILIN fornecer um perfil neuropsicolgico breve
atravs da avaliao de habilidades cognitivas preservadas e
deficitrias. O instrumento possibilita delimitar, em apenas
uma sesso, as funes com algum prejuzo, embasando a
seleo de testes ou baterias neuropsicolgicas especficas
a serem utilizados em uma investigao mais aprofundada.
Alm disso, pode fornecer dados qualitativos por meio de
indcios de uso de estratgias cognitivas (anlise dos tipos
de erros). Apresenta tambm a vantagem de permitir a
diferenciao de seqelas neuropsicolgicas de leses nos
hemisfrios cerebrais direito e esquerdo, principalmente
aquelas relacionadas aos processamentos perceptivo,
mnemnico e comunicativo. O NEUPSILIN pode ser
classificado como um instrumento de avaliao neuro-
psicolgica breve, porque possui um tempo reduzido de
aplicao (entre 30 e 40 minutos) e inclui tarefas para
acessar vrias funes cognitivas. Por essa razo, classifica-
se entre os instrumentos de rastreamento (screenings) e as
baterias completas. Em funo da carncia desse tipo de
instrumento, evidencia-se a relevncia de sua construo e
a importncia de questionar os meios mais adequados de
demonstrar a sua validade.
Essa discusso pretende instigar e instrumentalizar
os pesquisadores a construrem e adaptarem instrumentos
neuropsicolgicos vlidos e confiveis para a realidade
brasileira, considerando a especificidade da anlise
psicomtrica para cada bateria. Demonstra tambm a
preocupao com a rea da avaliao neuropsicolgica, a
qual vem crescendo amplamente, mas ainda carece de
instrumental de avaliao adequado.
Referncias
American Educational Research Association, American
Psychological Association & National Council on
Measurement in Education (1999). Standards for educational
and psychological testing. Washington, DC: American
Educational Research Association Publications.
218 Pawlowski, J., Trentini, C. M., Bandeira, D. R. Discutindo procedimentos psicomtricos a partir da anlise de um instrumento...
Alchieri, J. C. (2004). Aspectos instrumentais e
metodolgicos da avaliao psicolgica. Em V. M.
Andrade, F. H. dos Santos & O. F. A. Bueno (Orgs.).
Neuropsicologia hoje (pp. 13-36). So Paulo: Artes Mdicas.
Almeida, O. P. (1998). Miniexame do Estado Mental e o
diagnstico de demncia no Brasil. Arquivos de
Neuropsiquiatria, 56(3B), 605-612.
Anastasi, A. & Urbina, S. (2000). Testagem psicolgica. Porto
Alegre: Artmed.
Andrade, V. M. (2002). Das bases histricas da
neuropsicologia avaliao neuropsicolgica. Em R. M.
Cruz, J. C. Alchieri & J. J. Sard Jr. (Orgs.). Avaliao e
medidas psicolgicas: produo do conhecimento e da interveno
profissional (pp. 27-44). So Paulo: Casa do Psiclogo.
Bandeira, D. R., Serafini, A. J., Fonseca, R. P., Salles, J. F. &
Parente, M. A. M. P. (2005). Contribuies da psicometria para
a rea de avaliao neuropsicolgica. Trabalho apresentado no
II Congresso Brasileiro de Avaliao Psicolgica,
Gramado, RS.
Beeri, M. S., Schmeidler, J., Sano, M., Wang, J., Lally, R.,
Grossman, H. & Silverman, J. M. (2006). Age, gender,
and education norms on the CERAD neuropsychological
battery in the oldest old. Neurology, 67(2), 1006-1010.
Bertolucci, P. H. F., Brucki, S. M. D., Campacci, S. R. &
Juliano, Y. (1994). O Miniexame do Estado Mental em
uma populao geral: impacto da escolaridade. Arquivos de
Neuropsiquiatria, 52(1), 1-7.
Bertolucci, P. H. F., Okamoto, I. H., Brucki, S. M. D.,
Siviero, M. O., Neto, J. T. & Ramos, L. R. (2001).
Aplicability of the CERAD neuropsychological batttery to
Brazilian elderly. Arquivos de Neuropsiquiatria, 59(3A), 532-
536.
Brucki, S. M. D, Nitrini, R., Caramelli, P., Bertolucci, P. H. F.
& Okamoto, I. H. (2003). Sugestes para o uso do
Miniexame do Estado Mental no Brasil. Arquivos de
Neuropsiquiatria, 61(3B), 777-781.
Capovilla, A. G. S., Joly, M. C. R. A. & Tonelotto, J. M. F.
(2006). Avaliao neuropsicolgica e aprendizagem. Em
A. P. P Noronha, A. A. A. dos Santos & F. F. Sisto
(Orgs.). Facetas do fazer em avaliao psicolgica (pp. 141-
162). So Paulo: Vetor.
Chaves, M. L. F. & Izquierdo, I. (1992). Differential
diagnosis between dementia and depression: A study of
efficiency increment. Acta Neurologica Scandinavica, 85, 378-
382.
Conselho Federal de Psicologia (2004). Resoluo CFP n
2/2004. Braslia: CFP.
Conselho Federal de Psicologia (2003). Resoluo CFP n
2/2003. Braslia, CFP.
Ferreira, E. D. (1997). Avaliao de pacientes com demncia do
tipo Alzheimer e multinfarto: um estudo de coorte. Dissertao
de Mestrado. Porto Alegre: Universidade Federal do
Rio Grande do Sul Curso de Ps-Graduao em
Clnica Mdica.
Fonseca, R. P. (2006). Bateria Montreal de Avaliao da
Comunicao: estudos tericos, scio-demogrfico, psicomtrico e
neuropsicolgico. Tese de Doutorado. Porto Alegre:
Universidade Federal do Rio Grande do Sul Instituto
de Psicologia.
Fonseca, R. P., Salles, J. F. & Parente, M. A. M. P. (2006).
Construo do Instrumento de Avaliao Neuro-
psicolgica Breve NEUPSILIN: Anlise semntica dos
itens. Anais do 2 Congresso Brasileiro de Crebro,
Comportamento e Emoes, Bento Gonalves, Brasil.
Fonseca, R. P., Salles, J. F. & Parente, M. A. M. P. (no
prelo). Instrumento de Avaliao Neuropsicolgica Breve
NEUPSILIN. So Paulo: Vetor.
Gil, R. (2002). Neuropsicologia. So Paulo: Santos.
Kane, R. L. (1991). Standardized and flexible batteries in
neuropsychology: An assessment update. Neuropsychology
Review, 2(4), 281-339.
Luria, A. R. (1973). The working brain: An introduction to
neuropsychology. New York: Basic Books.
Mder, M. J. (2002). Avaliao neuropsicolgica: da
pesquisa prtica clnica com adultos. Em R. M. Cruz,
J. C. Alchieri & J. J. Sard Jr. (Orgs.). Avaliao e medidas
psicolgicas: produo do conhecimento e da interveno profissional
(pp. 47-68). So Paulo: Casa do Psiclogo.
Morris, J. C., Heyman, A., Mohs, R. C., Hughes, J. P., van
Belle, G., Fillenbaum, G., Mellits, E. D. & Clark, C.
(1989). The Consortiun to Establish a Registry for
Alzheimers Disease (CERAD). Part I. Clinical and
neuropsychological assessment of Alzheimers disease.
Neurology, 39, 1159-1165.
Ostrosky-Sols, F., Ardila, A. & Rosselli, M. (1999).
NEUROPSI: A brief neuropsychological test battery in
Spanish with norms by age and educational level. Journal
of the International Neuropsychological Society, 5, 413-433.
Pasquali, L. (1999). Instrumentos psicolgicos: manual prtico de
elaborao. Braslia: LabPAM/ IBAPP.
Pasquali, L. (2001). Tcnicas de exame psicolgico TEP:
manual. So Paulo: Casa do Psiclogo.
Pasquali, L. (2003). Psicometria: teoria dos testes na psicologia e na
educao. Petrpolis: Vozes.
Pawlowski, J., Bandeira D. R., Parente M. A. M. P.,
Fonseca, R. P., Salles, J. F. & Gonchoroski, M. V. C.
(2006). Estudo piloto do Instrumento de Avaliao
Psico-USF, v. 12, n. 2, p. 211-219, jul./dez. 2007
 Pawlowski, J., Trentini, C. M., Bandeira, D. R. Discutindo procedimentos psicomtricos a partir da anlise de um instrumento... 219

Neuropsicolgica Breve NEUPSILIN. Anais do 2 psicolgica (pp. 26-34). So Paulo: Impresso Digital do
Congresso Brasileiro de Crebro, Comportamento e Emoes, Brasil.
Bento Gonalves, Brasil. Tupper, D. E. (2000). Introduction: Neuropsychological
Pea-Casanova, J. (1985). La exploracion neuropsico- assessment aprs Luria. Neuropsychological Review, 9(2), 57-
lgica. VII Congreso Nacional de Neurologa. Barcelona: 61.
Sociedad Espaola de Neurologa. Urbina, S. (2007). Fundamentos da testagem psicolgica (C.
Santos, D. O. (2005). Influncia do envelhecimento no desempenho Dornelles, Trad.). Porto Alegre: Artes Mdicas.
de adultos no Instrumento de Avaliao Neuropsicolgica Breve (Original publicado em 2004).
NEUPSILIN. Monografia de Especializao. Porto
Alegre: Universidade Federal do Rio Grande do Sul
Instituto de Psicologia. Recebido em junho de 2006
Simes, M. R. (2002). Avaliao psicolgica em crianas e Reformulado em agosto de 2007
adolescentes. Em R. Primi (Org.). Temas em avaliao Aprovado em setembro de 2007

Sobre as autoras:

Josiane Pawlowski psicloga, doutoranda em Psicologia pelo Programa de Ps-Graduao em Psicologia da

Universidade Federal do Rio Grande do Sul (UFRGS), mestre em Psicologia (UFRGS) e especialista em Psicologia
Clnica nfase em Avaliao Psicolgica (UFRGS).

Clarissa Marceli Trentini psicloga, doutora em Cincias Mdicas: Psiquiatria pela Universidade Federal do Rio
Grande do Sul (UFRGS) e professora do Instituto de Psicologia e do Programa de Ps-Graduao em Psicologia da
UFRGS.

Denise Ruschel Bandeira psicloga, doutora em Psicologia pela Universidade Federal do Rio Grande do Sul
(UFRGS) e professora do Instituto de Psicologia e do Programa de Ps-Graduao em Psicologia da UFRGS.

Psico-USF, v. 12, n. 2, p. 211-219, jul./dez. 2007

220 Pawlowski, J., Trentini, C. M., Bandeira, D. R. Discutindo procedimentos psicomtricos a partir da anlise de um instrumento...

Psico-USF, v. 12, n. 2, p. 211-219, jul./dez. 2007