PIAAC

Programa Internacional para a Análise das Competências dos Adultos

POAT FSE: Gerir, Conhecer e Intervir

O PIAAC • O PIAAC é o “Programa Internacional para a Análise das Competências dos Adultos” (Programme for the International Assessment of Adult Competencies) • É a mais abrangente pesquisa internacional para a avaliação de competências cognitivas alguma vez realizada • Irá investigar e medir conhecimentos e competências da população adulta necessários para participar nas sociedades actuais • Envolve a OCDE, um consórcio internacional e instituições de investigação de vários países
POAT FSE: Gerir, Conhecer e Intervir

O PIAAC

Países participantes:
Alemanha Austrália Áustria Bélgica Canada Coreia Dinamarca Eslováquia Espanha Estados Unidos da América Estónia Finlândia França Federação Russa Hungria Irlanda Itália Japão Noruega Países Baixos Polónia Portugal Reino Unido Republica Checa Suécia

O PIAAC

POAT FSE: Gerir, Conhecer e Intervir

Participação de Portugal no PIAAC
• Representação no Board of Participating Countries pela ANQ (Agência Nacional para a Qualificação, I.P.), sendo suplementes GEPE-ME e GEP-MTSS
O PIAAC em Portugal

• Coordenação científica e execução do projecto (National Project Manager) pelo ISCTE - Instituto Universitário de Lisboa, através do CIES (Centro de Investigação e Estudos de Sociologia) • Parceria com o INE • Comissão de Acompanhamento

POAT FSE: Gerir, Conhecer e Intervir

Comissão de Acompanhamento

NPM (Patrícia Ávila e António Firmino da Costa) – coord. Comissão Acompanhamento Peritos: • Luís Rothes • Lucília Salgado • Maria de Lourdes Dionísio • Carlos Gonçalves • João Sebastião • Fátima Suleman • Fernando Luís Machado • Ana Cláudia Valente

O PIAAC em Portugal

• Delegada oficial do PIAAC no BPC (Maria do Carmo Gomes, ANQ) • Representante do GEPE (ME) • Representante do GEP (MTSS) • Representante do IGFSE • Representante do GAVE (ME) • Representante do CNE • Representante do INE • Representante do MCTES

POAT FSE: Gerir, Conhecer e Intervir

Equipa Nacional PIAAC (CIES, ISCTE-IUL) o Patrícia Ávila (coord.): CIES, ISCTE-IUL
o António Firmino da Costa: CIES, ISCTE-IUL
O PIAAC em Portugal

o Rosário Mauritti (coord. recolha de dados): CIES, ISCTE-IUL o Pedro Ramos (coordenador de IT): CIES, ISCTE-IUL o Maria do Carmo Botelho (coordenadora amostragem): ISCTE-IUL o Elisabete Rodrigues: CIES, ISCTE-IUL

POAT FSE: Gerir, Conhecer e Intervir

Estudos internacionais de avaliação de competências de adultos promovidos pela OCDE

IALS (International Adult Literacy Survey) (1994-2000) 22 países ALL (Adult Literacy and Lifeskills Survey) 2002-2006 11 países PIAAC (Programme for International Assessment of Adult Competencies) (2008-2013) 26 países

POAT FSE: Gerir, Conhecer e Intervir

IALS International Adult Literacy Survey (1994-2000)

POAT FSE: Gerir, Conhecer e Intervir

Avaliação de Competências de Literacia no IALS
•22 países (incluindo Portugal) •Avaliação directa de competências •Três domínios de competências (literacy skills)
IALS

Literacia em prosa Literacia documental Literacia quantitativa •5 Níveis de literacia, de complexidade crescente (1-5)

POAT FSE: Gerir, Conhecer e Intervir

Definição de Literacia (IALS / ALL) Segundo a definição avançada nestas pesquisas, entende-se por literacia “a capacidade de utilizar informação escrita e impressa para responder às necessidades da vida em sociedade, para alcançar objectivos pessoais e para desenvolver os conhecimentos e os potenciais próprios” (Kirsch, Jungeblut, Jenkins e Kolstad, 1993:2). Concepção: - não dicotómica - dinâmica (processual) e - multidimensional
POAT FSE: Gerir, Conhecer e Intervir

IALS

Resultados do IALS

POAT FSE: Gerir, Conhecer e Intervir

Resultados de Portugal no IALS
4,4 3,2 5,2 18,5 16,6 23,0 29,0 31,0 30,2 48,0 49,1 41,6

Nível 4/5 Nível 3 Nível 2 Nível 1
0,0

Prosa Documental Quantitativa

10,0

20,0

30,0 %

40,0

50,0

60,0

Fonte: IALS, 1998.

POAT FSE: Gerir, Conhecer e Intervir

IALS, percentagem da população com idade entre os 16-65 anos, por nível de literacia (prosa)

Competências de literacia (pontuações médias) segundo a escolaridade

315 300 285 270 255 Médias 240 225 210 195 180 165 150 Até B2 B3 Secundário Superior
Fonte: IALS, 1998, base de dados Portugal

Prosa Documental Quantitativa

Níveis de literacia (prosa) segundo a escolaridade
100%
5,7 5,7 1 4,4 27,2

80%

24,1 32,0

60%

52,7

Nível 4 Nível 3
54,2

%
40%
70,1

Nível 2 Nível 1

50,7

20%

28,9 1 5,4 1 ,6 1

0% Até B2 B3

4,0

3,3

Secundário

Superior

Fonte: IALS, 1998, base de dados Portugal

Literacia e escolaridade
320,00

Tertiary education Upper secondary education Less than upper secondary education

300,00

280,00

Prose (means)

260,00

240,00

220,00

200,00

180,00

SWE FIN

NOR CAN BEL NLD AUS DEU UKM USA IRL

NZL

PRT CHE CZE DNK CHE CHE SVN POL CHL HUN _I _F _D

Country

Source: IALS, 1998.

DISTRIBUIÇÕES INTERNACIONAIS DE LITERACIA: PERFIS MÉDIOS E DESIGUALDADES
Suécia Finlândi Noruega Holanda Canada Alemanha N.Zeland Dinamarc Australi EUA Bélgica Repúblic R.Unido Irlanda Suíça(F) Suíça(I) Suíça(A) Hungria Eslovéni Polónia Portugal Chile 150 170 190 210 230 250 270 290

EUA Portugal Canada Australi Polónia R.Unido Eslovéni N.Zeland Irlanda Bélgica Suíça(A) Suíça(F) Chile Suíça(I) Suécia Finlândi Hungria Alemanha Holanda Noruega Repúblic Dinamarc 0 50 100 150 200 250

Pontuações médias (prosa)

Dispersão das pontuações (diferença entre percentis 5 e 95)

Fonte: IALS, 1998.

PERFIL MÉDIO DE LITERACIA E AMPLITUDE DA DISPERSÃO NOS VÁRIOS PAÍSES (literacia em prosa)
320,00

Pontuações médias (escala 0-500)

Suécia

300,00
Noruega Holanda Finlândia

280,00

Dinamarca

Alemanha República Checa

Canada N. Zelândia Bélgica Suíça(I) Irlanda R. Unido Austrália EUA

260,00

Suíça(F)

Suíça(A)

Hungria

240,00
Eslovénia Polónia Chile Portugal

220,00 120,00 140,00 160,00 180,00 200,00 220,00 240,00

Dispersão das pontuações (diferença entre os percentis 5 e 95) Fonte: IALS, 1998.

PIAAC

Programme for the International Assessment of Adult Competencies
PIAAC

(2008-2013)

POAT FSE: Gerir, Conhecer e Intervir

População alvo: População residente, em cada país, com idades entre os 16 e os 65 anos

PIAAC

Amostra por país: Probabilística, 5000 casos (entrevistas individuais realizadas no alojamento)

POAT FSE: Gerir, Conhecer e Intervir

Que competências serão avaliadas no PIAAC?
Literacia: Capacidade de compreender e utilizar informação escrita, em diversos contextos e suportes Numeracia: Capacidade de usar, aplicar, interpretar e transmitir informações e raciocínios matemáticos Resolução de problemas em ambientes tecnológicos: Capacidade de usar a tecnologia para resolver problemas e executar tarefas complexas. Componentes de Leitura: Competências básicas para ler eficazmente, que permitem o reconhecimento de palavras, a descodificação e a compreensão de frases.

PIAAC

POAT FSE: Gerir, Conhecer e Intervir

Literacy
Literacy definition: Literacy is understanding, evaluating, using and engaging with written texts to participate in society, to achieve one’s goals, and to develop one’s knowledge and potential
Texts:
a) b) c) d) e) f) Medium (print and digital) a) Access and identity Format (continuous and non-continuous) information in the text Type (rhetorical stance) Physical layout (type of matrix organization) b) Integrate and interpret (relate parts of text to Features unique to digital texts, and each other) Social context c) Evaluate and reflect
POAT FSE: Gerir, Conhecer e Intervir

Task aspects:

Defining problem solving in technology-rich environments
“Problem solving in technology rich environments involves using digital technology, communication tools and networks to acquire and evaluate information, communicate with others and perform practical tasks” “The first PIAAC problem solving survey will focus on the abilities to solve problems for personal, work and civic purposes by setting up appropriate goals and plans, accessing and making use of information through computers and computer networks"

POAT FSE: Gerir, Conhecer e Intervir

Three core dimensions of problem solving in technology-rich environments

POAT FSE: Gerir, Conhecer e Intervir

Domínios de competências avaliados nos estudos internacionais

IALS 1994-2000

ALL 2002-2006

PIAAC 2008-2013 Componentes de leitura

Literacia em prosa Literacia documental Literacia quantitativa

Literacia em prosa Literacia documental Numeracia Resolução de problemas

Literacia em leitura Literacia em leitura Numeracia Resolução de problemas em cenários tecnologicamente enriquecidos
Fonte: PIAAC, 2009
POAT FSE: Gerir, Conhecer e Intervir

Exemplos de tarefas PIAAC

POAT FSE: Gerir, Conhecer e Intervir

LITERACIA

LITERACIA

NUMERACIA

NUMERACIA

?

RESOLUÇÃO DE PROBLEMAS EM CENÁRIOS TECNOLOGICAMENTE ENRIQUECIDOS

Questionário de Caracterização (QC)
A – Informação Geral B – Educação e Formação C – Situação no Trabalho e Histórico D – Trabalho Actual E – Último Trabalho F – Competências no Trabalho G – Literacia, Numeracia e TIC no Trabalho H – Literacia, Numeracia e TIC no Dia-a-Dia I – Valores e Atitudes J – Caracterização do Contexto de Origem

POAT FSE: Gerir, Conhecer e Intervir

Principais elementos do PIAAC

POAT FSE: Gerir, Conhecer e Intervir

Principais desafios e aspectos inovadores:
Número de países participantes Alargamento das dimensões cognitivas investigadas Centralidade do uso quotidiano das tecnologias da informação Utilização de computadores na administração de uma prova internacional Assegurar a comparabilidade dos resultados: - Entre países (transversalidade cultural das competências medidas; equivalência das traduções) - Entre estudos (IALS, ALL, PIAAC) - Entre formas de administração da prova (papel, computador)
PIAAC

POAT FSE: Gerir, Conhecer e Intervir

Calendário do PIAAC 2008
Desenvolvimento do quadro conceptual Desenvolvimento dos instrumentos

2009

2010

2011

2012

2013

Pré-teste
Análise de Dados; revisão dos instrumentos

Pesquisa Principal
Análise de Dados

Relatório Internacional

Pré-teste Início do trabalho de campo: 6 de Abril de 2010 Fim do trabalho de campo: 18 de Julho de 2010
• Testar: o os procedimentos de amostragem o estrutura do trabalho de campo o a formação de entrevistadores e supervisores o a supervisão e o controle de qualidade o os materiais de suporte à recolha de informação o os procedimentos de classificação e codificação • Determinar quais os itens que serão utilizados no Inquérito Principal • Comparar os resultados obtidos via computador vs papel
POAT FSE: Gerir, Conhecer e Intervir

Estratégias implementadas para maximizar a taxa de resposta (pré-teste):
• Sítio nacional do PIAAC (www.piaac.com.pt) • Nº verde (114 chamadas recebidas) • Carta enviada a cada alojamento (com íman, uma semana antes do contacto do entrevistador), com indicação do endereço do site e nº verde • Oferta no final (luz de leitura)

POAT FSE: Gerir, Conhecer e Intervir

Balanço pré-teste

Nº de entrevistas realizadas: 1010
Região
Porto Lisboa Algarve Total


262 493 255 1010

POAT FSE: Gerir, Conhecer e Intervir

Tempo médio (minutos):

duração

das

entrevistas

Nº médio minutos
QC Sessão TIC Prova em computador Caderno PP1 (literacia) Caderno PP2 (literacia) Caderno PP3 (numeracia) Caderno PP4 (numeracia) Tempo médio total 37,8m 1,4m 78,2m 96,8m 79,7m 99,5m 74,2m 144,9m

POAT FSE: Gerir, Conhecer e Intervir

O que se pode esperar do PIAAC?
a) Conhecimento substantivo b) Avanços teóricos e metodológicos c) Possibilidades de aplicações relevantes

POAT FSE: Gerir, Conhecer e Intervir