perspectivas actuales y futuras de la medición y...
TRANSCRIPT
A la vanguardia de la evaluación psicológica
Perspectivas actuales y futuras de la medición y evaluación psicológicas
David Arribas Águila
TEA EDICIONES: Dpto. de I+D+i
Septiembre de 2014
A la vanguardia de la evaluación psicológica
• Editora de tests desde hace 57
años
• Adaptación, creación y publicación
de tests de evaluación y
programas de recuperación.
• Áreas: Trabajo, clínica,
educativa….
• 50 profesionales
• Miembro del ETPG
TEA EDICIONES…
A la vanguardia de la evaluación psicológica
A la vanguardia de la evaluación psicológica
A la vanguardia de la evaluación psicológica
A la vanguardia de la evaluación psicológica
A la vanguardia de la evaluación psicológica
A la vanguardia de la evaluación psicológica 9/4/2014
A la vanguardia de la evaluación psicológica
Precisión: 0,85 – 0,95
Tests de inteligencia
Precisión: 0,70 – 0,85
Tests de personalidad
Precisión: 0,95
Longitud Brazo D/I
Precisión: 0,50
Presión sanguínea
Precisión: 0,50 - 0,60
Colesterol en sangre
A la vanguardia de la evaluación psicológica 9/4/2014
Métodos selectivos
Correlación
% de incremento del poder predictivo
sobre el uso de los tests de inteligencia
Tests de inteligencia
0,51
Pruebas de trabajo real
0,54
24
Autoinformes (personalidad)
0,41
27
Entrevista estructurada
0,51
24
Entrevista libre
0,38
8
Pruebas de conocimientos
0,48
14
Observación de la conducta anterior
0,45
14
Análisis de referencias
0,26
12
Años de experiencia
0,18
6
Datos biográficos
0,35
2
Assessment center
0,37
4
Años de formación
0,10
2
Grafología
0,02
0
Schmidt y Hunter, 1998
Los tests psicométricos son los mejores predictores del éxito en la escuela y en el mundo laboral (Hunt,
1997; Colom y Andrés-Pueyo, 1999).
A la vanguardia de la evaluación psicológica
PSICÓLOGOS
A DOS VELOCIDADES
A la vanguardia de la evaluación psicológica
Haciendo un poco de historia… Materiales
A la vanguardia de la evaluación psicológica
Haciendo un poco de historia… Aplicación
A la vanguardia de la evaluación psicológica
Haciendo un poco de historia… Corrección
A la vanguardia de la evaluación psicológica
Haciendo un poco de historia… Desarrollo de tests
A la vanguardia de la evaluación psicológica
VAT. Realidad virtual BAMI. Aptitudes TEA-SYSTEM. Personalidad
Segunda velocidad: Hitos importantes
A la vanguardia de la evaluación psicológica
Banco de ítems para su aplicación por PDA
•Desde 2004
•Aptitudes: Atención, Razonamiento, Numérico, Verbal,
Mecánica, Espacial.
•Personalidad y competencias
•Gestión de datos y resultados: en red por XML.
Tercera velocidad: Hitos importantes
A la vanguardia de la evaluación psicológica
TRASI. TAI APTITUDES • Fecha de publicación: 2003
• Test adaptativo informatizado en CD
• Razonamiento secuencial e inductivo
• Ítems: 98
Tercera velocidad…
A la vanguardia de la evaluación psicológica
• Aplicaciones desde 2003: 1.147 • Aplicaciones 2011: 165. • Facturación 2011: 450 euros. • 6/1000 de TEA Ediciones.
• Aplicaciones 2011: 9.400.
• Facturación 2011: 20.000 euros.
• 285/1000 de TEA Ediciones.
PMA-R. Razonamiento
Tercera velocidad…
TRASI. TAI APTITUDES
A la vanguardia de la evaluación psicológica
• Corrección y obtención de resultados online.
• Equivalente a las plantillas antiguas.
• Aplicación en papel y lápiz.
• Lanzamiento: 2005.
• 52 tests disponibles.
• Simple cambio de formato con grandes repercusiones para la profesión.
Segunda velocidad: www.teacorrige.com
A la vanguardia de la evaluación psicológica
Segunda velocidad: www.teacorrige.com
A la vanguardia de la evaluación psicológica
• Primera plataforma europea de aplicación de tests online.
• Tests informatizados de primera generación.
• Lanzamiento: 2001
• Adaptada a todo tipo de tests.
• 65 tests disponibles (20 autoinformes; 45 tests cognitivos).
Tercera velocidad: www.e-teaediciones.com
A la vanguardia de la evaluación psicológica
Tercera velocidad: www.e-teaediciones.com
A la vanguardia de la evaluación psicológica
Tercera velocidad: www.e-teaediciones.com
A la vanguardia de la evaluación psicológica
• Tests: 65
• Aplicaciones desde 2001: 123 020
• Usuarios: 1 268
• Tests: 50
• Aplicaciones desde 2005: 2 327 539
• Usuarios: 31 491
Psicólogos a dos velocidades…
A la vanguardia de la evaluación psicológica
Test 2010 2011 Male Female
BFQ 42.9% 57.1% 46.6% 53.4% 23,647
BIP 54.3% 45.7% 41.6% 58.4% 51,943
compeTEA 43.6% 56.4% 44.1% 55.9% 47,437
NEO PI-R 46.5% 53.5% 42.5% 57.5% 22,055
TPT 48.7% 51.3% 52.3% 47.7% 61,713
16PF-5 46.8% 53.2% 46.2% 53.8% 150,473
TOTAL 169,832 187,436 157,106 182,924 357,268
Year GenderTOTAL
International Test Commission (2012)
A la vanguardia de la evaluación psicológica
International Test Commission (2012)
A la vanguardia de la evaluación psicológica
International Test Commission (2012)
0
10
20
30
40
50
60
70
80
90
100
Spain Panama C. Rica
1.7%
98.3%
PPT CBT0
10
20
30
40
50
60
70
80
90
100
Spain Colombia Honduras
BFQ N=23,647
A la vanguardia de la evaluación psicológica
International Test Commission (2012)
0
10
20
30
40
50
60
70
80
90
100
Spain Guatemala Colombia
1.9%
98.1%
PPT CBT0
10
20
30
40
50
60
70
80
90
100
Spain Others
NEO PI-R N=22,055
A la vanguardia de la evaluación psicológica
International Test Commission (2012)
0
10
20
30
40
50
60
70
80
90
100
Spain Colombia Others
4.6%
95.4%
PPT CBT0
10
20
30
40
50
60
70
80
90
100
Spain Colombia Honduras
16PF-5 N=150,473
A la vanguardia de la evaluación psicológica
International Test Commission (2012)
0
10
20
30
40
50
60
70
80
90
100
Spain Colombia Others
7.2%
92.8%
PPT CBT0
10
20
30
40
50
60
70
80
90
100
Spain Colombia Honduras
TPT N=61,713
A la vanguardia de la evaluación psicológica
International Test Commission (2012)
0
10
20
30
40
50
60
70
80
90
100
Spain Colombia Peru
11.1%
88.9%
PPT CBT
0
10
20
30
40
50
60
70
80
90
100
Spain Colombia Others
BIP N= 51,943
A la vanguardia de la evaluación psicológica
International Test Commission (2012)
0
10
20
30
40
50
60
70
80
90
100
Spain Colombia Peru
31.4%
68.6%
PPT CBT0
10
20
30
40
50
60
70
80
90
100
Spain Colombia C. Rica
compeTEA N=47,437
A la vanguardia de la evaluación psicológica
TOTAL
N=357,268
International Test Commission (2012)
A la vanguardia de la evaluación psicológica
International Test Commission (2014)
Test Spanish-American local norms
16PF-5
BFQ
BIP
COMPETEA
CPS
CTI
CUIDA
IPP-R
NEO PI-R
TPT
A la vanguardia de la evaluación psicológica
Colombia: Baremos disponibles
A la vanguardia de la evaluación psicológica
Muestras y muestreo
Test Initial sample
compeTEA 98,050
CPS 107,455
CUIDA 98,655
TPT 173,666
Total 477,826
Test Sample
compeTEA 31,069
CPS 38,950
CUIDA 6,909
TPT 39,116
Total 116,044
Gender
Age
Personnel Selection
A la vanguardia de la evaluación psicológica
compeTEA: Evaluación de competencias Country N
Spain 12,316
Argentina 432
Colombia 7,391
Costa Rica 2,912
Chile 712
Ecuador 836
El Salvador 290
Guatemala 1,208
Honduras 326
Mexico 1,942
Nicaragua 274
Panama 286
Paraguay 281
Peru 1,332
Dominican Rep. 237
Uruguay 294
TOTAL 31,069
EST: Emotional Stability
CONFI: Self-confidence
RES: Resistance to Adversity
COM: Communication
REL: Establishment of relationships
NEG: Negotiation
INF: Influence
ORRES: Goal orientation
ANAL: Analysis capability
DECI: Decision making
CONO: Company consciousness
VIS: Vision
ORCLI: Customer Orientation
APER: Openness
IDEN: Identifying with the Company
DIR: Management
LID: Leadership
ORG: Organization and Planning
SIN: Sincerity
Scales
A la vanguardia de la evaluación psicológica
compeTEA: Evaluación de competencias
EST CONFI RES COM REL NEG INF EQUI INI ORRES ANAL DECI CONO VIS ORCLI APER IDEN DIR LID ORG SIN d Median
Argentina 0.04 0.12 0.05 0.08 0.08 0.19 0.18 0.03 0.07 0.10 0.04 0.08 0.10 0.05 0.25 0.09 0.09 0.18 0.21 0.23 0.09 0.09
Colombia 0.27 0.60 0.39 0.43 0.04 0.20 0.83 0.18 0.16 0.27 0.25 0.24 0.41 0.62 0.16 0.15 0.66 0.59 0.22 0.29 0.42 0.27
Costa Rica 0.22 0.36 0.19 0.11 0.10 0.03 0.47 0.06 0.09 0.17 0.01 0.21 0.21 0.46 0.01 0.08 0.37 0.32 0.00 0.04 0.30 0.17
Chile 0.28 0.45 0.28 0.22 0.04 0.03 0.55 0.16 0.12 0.17 0.15 0.21 0.30 0.32 0.15 0.07 0.37 0.49 0.15 0.12 0.09 0.17
Ecuador 0.12 0.56 0.06 0.07 0.15 0.14 0.65 0.16 0.08 0.28 0.02 0.23 0.22 0.53 0.05 0.39 0.54 0.55 0.11 0.07 0.39 0.16
El Salvador 0.29 0.46 0.30 0.13 0.08 0.09 0.58 0.01 0.10 0.32 0.12 0.16 0.28 0.47 0.02 0.21 0.46 0.51 0.08 0.11 0.54 0.21
Guatemala 0.23 0.47 0.16 0.16 0.04 0.06 0.61 0.01 0.08 0.31 0.07 0.21 0.35 0.47 0.14 0.26 0.56 0.59 0.17 0.01 0.53 0.21
Honduras 0.12 0.42 0.09 0.11 0.12 0.05 0.69 0.02 0.13 0.24 0.04 0.22 0.29 0.53 0.03 0.19 0.43 0.55 0.22 0.01 0.41 0.19
Mexico 0.04 0.41 0.06 0.11 0.15 0.09 0.41 0.21 0.05 0.05 0.15 0.01 0.08 0.20 0.03 0.11 0.36 0.18 0.10 0.21 0.29 0.11
Nicaragua 0.10 0.09 0.13 0.03 0.17 0.09 0.56 0.18 0.17 0.00 0.03 0.00 0.17 0.54 0.23 0.06 0.42 0.37 0.19 0.07 0.57 0.17
Panama 0.14 0.36 0.11 0.01 0.17 0.10 0.58 0.17 0.05 0.12 0.07 0.04 0.14 0.43 0.13 0.23 0.29 0.20 0.08 0.07 0.31 0.14
Paraguay 0.01 0.31 0.09 0.05 0.28 0.02 0.40 0.24 0.03 0.03 0.02 0.07 0.04 0.24 0.15 0.04 0.24 0.37 0.10 0.37 0.21 0.10
Peru 0.37 0.64 0.31 0.26 0.05 0.33 0.71 0.11 0.22 0.31 0.17 0.36 0.34 0.67 0.19 0.23 0.57 0.63 0.19 0.09 0.17 0.31
Dominican R. 0.16 0.30 0.37 0.36 0.15 0.16 0.74 0.17 0.37 0.20 0.29 0.24 0.32 0.59 0.09 0.23 0.57 0.55 0.28 0.27 0.49 0.29
Uruguay 0.00 0.06 0.08 0.04 0.08 0.21 0.11 0.01 0.11 0.02 0.14 0.23 0.07 0.02 0.25 0.11 0.12 0.16 0.23 0.29 0.14 0.11
d Median 0.14 0.41 0.13 0.11 0.10 0.09 0.58 0.16 0.10 0.17 0.07 0.21 0.22 0.47 0.14 0.15 0.42 0.49 0.17 0.11 0.31 0.16
• Cohen’s d: 0.1796
Multivariate test Effect Sizes: Local vs Original
Null Medium
Small Large
55.2%
34.0% 0.3%
10.5%
A la vanguardia de la evaluación psicológica
EST: Emotional Stability
ANS: Anxiety
AUC: Self-concept
EFI: Efficiency
CSG: Self-confidence
IND: Independence
DOM: Dominance
CCG: Cognitive Control
SOC: Sociability
AJS: Social Adjustment
AGR: Aggressiveness
TOL: Tolerance
INS: Social Intelligence
INH: Integrity
LID: Leadership
SIN: Sincerity
DES: Social Desirability
CNT: Control Scale
Country N
Spain 12,628
Argentina 297
Chile 342
Colombia 13,874
Costa Rica 3,500
El Salvador 300
Guatemala 4,806
Honduras 814
Mexico 1,200
Panama 597
Peru 292
Dominican Rep. 300
TOTAL 38,950
Scales
A la vanguardia de la evaluación psicológica
EST ANS AUC EFI CSG IND DOM CCG SOC AJS AGR TOL INS INH LID SIN DES CNT d Median
Chile 0.02 0.02 0.37 0.24 0.06 0.08 0.51 0.05 0.23 0.15 0.01 0.19 0.08 0.23 0.57 0.20 0.23 0.06 0.17
Colombia 0.28 0.07 0.58 0.49 0.22 0.15 0.36 0.12 0.15 0.03 0.23 0.15 0.08 0.01 0.70 0.18 0.10 0.19 0.16
Costa Rica 0.17 0.03 0.33 0.26 0.21 0.08 0.20 0.03 0.31 0.00 0.18 0.11 0.12 0.05 0.39 0.02 0.03 0.20 0.15
El Salvador 0.25 0.14 0.21 0.19 0.06 0.24 0.17 0.10 0.34 0.04 0.49 0.24 0.03 0.22 0.44 0.04 0.16 0.21 0.20
Argentina 0.02 0.01 0.32 0.29 0.16 0.00 0.45 0.06 0.03 0.08 0.15 0.21 0.04 0.04 0.54 0.03 0.05 0.14 0.07
Guatemala 0.15 0.07 0.25 0.28 0.07 0.08 0.12 0.03 0.40 0.11 0.34 0.13 0.05 0.16 0.36 0.16 0.06 0.23 0.14
Honduras 0.10 0.19 0.16 0.13 0.05 0.16 0.30 0.13 0.61 0.23 0.08 0.20 0.06 0.25 0.44 0.17 0.36 0.18 0.18
Mexico 0.03 0.10 0.10 0.11 0.03 0.19 0.17 0.19 0.44 0.24 0.09 0.07 0.10 0.38 0.27 0.30 0.32 0.26 0.18
Panama 0.13 0.03 0.22 0.12 0.03 0.19 0.10 0.02 0.31 0.03 0.15 0.08 0.07 0.27 0.30 0.36 0.14 0.31 0.14
Peru 0.33 0.24 0.48 0.44 0.34 0.02 0.30 0.27 0.05 0.04 0.04 0.01 0.22 0.03 0.54 0.33 0.14 0.07 0.23
Dominican R. 0.32 0.15 0.44 0.34 0.17 0.18 0.48 0.18 0.16 0.19 0.00 0.18 0.16 0.03 0.70 0.22 0.03 0.16 0.18
d Median 0.15 0.07 0.32 0.26 0.07 0.15 0.30 0.10 0.31 0.08 0.15 0.15 0.08 0.16 0.44 0.18 0.14 0.19 0.15
• Cohen’s d: 0.2010
Multivariate test
Null Medium
Small Large
61.6%
34.3% 0.0%
Effect Sizes: Local vs Original
4.2%
A la vanguardia de la evaluación psicológica
AL: Altruism
AP: Openness
AS: Assertiveness
AT: Self-esteem
RP: Problem coping
EM: Empathy
EE: Emotional Stability
IN: Independence
FL: Flexibility
RF: Reflectiveness
SC: Sociability
TF: Frustration Tolerance
AG: Attachment Style
DL: Mourning copying
DS: Social Desirability
AGR: Aggressiveness
Country TOTAL
Spain 2,305
Bolivia 531
Colombia 1,331
Costa Rica 419
El Salvador 330
Guatemala 253
Honduras 188
Mexico 1,316
Panama 112
Paraguay 121
TOTAL 6,909
Scales
A la vanguardia de la evaluación psicológica
AL AP AS AT RP EM EE IN FL RF SC TF AG DL DS AGR d Median
Bolivia 0.11 0.33 0.11 0.23 0.36 0.75 0.16 0.17 0.47 0.21 0.85 0.47 0.81 0.30 0.13 0.31 0.30
Colombia 0.06 0.16 0.48 0.38 0.11 0.36 0.11 0.13 0.49 0.12 0.28 0.21 0.32 0.19 0.20 0.11 0.20
Costa Rica 0.04 0.03 0.34 0.27 0.13 0.37 0.16 0.17 0.17 0.02 0.23 0.04 0.27 0.25 0.02 0.04 0.16
El Salvador 0.30 0.02 0.32 0.43 0.20 0.29 0.25 0.01 0.11 0.29 0.19 0.16 0.14 0.32 0.29 0.18 0.22
Guatemala 0.19 0.09 0.12 0.11 0.12 0.56 0.01 0.16 0.40 0.03 0.49 0.26 0.42 0.19 0.37 0.21 0.19
Honduras 0.41 0.09 0.10 0.28 0.05 0.40 0.23 0.29 0.42 0.13 0.22 0.21 0.36 0.03 0.26 0.05 0.23
Mexico 0.33 0.16 0.24 0.28 0.17 0.53 0.20 0.47 0.29 0.02 0.29 0.06 0.14 0.26 0.23 0.06 0.23
Panama 0.21 0.22 0.11 0.13 0.11 0.16 0.09 0.28 0.36 0.11 0.38 0.08 0.29 0.35 0.05 0.03 0.15
Paraguay 0.27 0.33 0.17 0.12 0.13 0.29 0.06 0.34 1.15 0.05 0.28 0.53 0.65 0.57 0.58 0.44 0.31
d Median 0.21 0.16 0.17 0.27 0.13 0.37 0.16 0.17 0.40 0.11 0.28 0.21 0.32 0.26 0.23 0.11 0.21
• Cohen’s d: 0.2383
Multivariate test Effect sizes: Local vs Original
Null Medium
Small Large
45.8%
47.2%
4.9%
2.1%
A la vanguardia de la evaluación psicológica
DAJ: Maladjustment
ANS: Anxiety
DEP: Depression
EST: Stress Tolerance
ACO: Self-concept
TOL: Tolerance & Flexibility
ADA: Adaptation to Changes
CUL: Interest in Other Cultures
DIS: Availability
ISO: Social Intelligence
INS: Social Integration
EQU: Teamwork
PRO: Professional Self-demanding
DIN: Dynamism
TES: Tenacity & Constancy
SIN: Sincerity
Country TOTAL
Spain 23,340
Argentina 249
Colombia 5,988
Costa Rica 1,203
Chile 862
Ecuador 503
Guatemala 2,200
Honduras 932
Mexico 1,564
Panama 1,182
Peru 816
Uruguay 248
TOTAL 39,116
Scales
A la vanguardia de la evaluación psicológica
EST ANS DEP EST ACO TOL ADA CUL DIS ISO INS EQU PRO DIN TES SIN d Median
Argentina 0.06 0.05 0.04 0.05 0.01 0.13 0.19 0.23 0.18 0.06 0.09 0.41 0.01 0.06 0.09 0.07 0.06
Colombia 0.04 0.18 0.23 0.12 0.06 0.03 0.47 0.14 0.18 0.46 0.20 0.10 0.34 0.15 0.03 0.04 0.15
Costa Rica 0.16 0.02 0.16 0.02 0.08 0.06 0.27 0.09 0.38 0.05 0.10 0.40 0.01 0.10 0.18 0.24 0.10
Chile 0.09 0.06 0.31 0.04 0.13 0.24 0.17 0.04 0.26 0.01 0.13 0.24 0.12 0.10 0.06 0.12 0.12
Ecuador 0.36 0.03 0.03 0.04 0.20 0.36 0.38 0.05 0.21 0.08 0.07 0.28 0.11 0.04 0.31 0.04 0.09
Guatemala 0.36 0.10 0.11 0.04 0.16 0.23 0.12 0.37 0.39 0.15 0.19 0.67 0.01 0.08 0.19 0.32 0.17
Honduras 0.62 0.41 0.22 0.30 0.41 0.65 0.10 0.28 0.72 0.27 0.49 0.81 0.28 0.43 0.54 0.12 0.41
Mexico 0.17 0.07 0.16 0.10 0.19 0.06 0.27 0.18 0.29 0.08 0.04 0.34 0.23 0.03 0.15 0.05 0.16
Panama 0.28 0.16 0.04 0.20 0.09 0.01 0.38 0.07 0.32 0.27 0.11 0.38 0.11 0.19 0.21 0.13 0.18
Peru 0.18 0.02 0.05 0.21 0.22 0.42 0.37 0.08 0.35 0.16 0.01 0.29 0.25 0.01 0.22 0.05 0.20
Uruguay 0.01 0.09 0.16 0.03 0.02 0.00 0.28 0.10 0.20 0.07 0.05 0.28 0.12 0.03 0.09 0.06 0.08
d Median 0.17 0.07 0.16 0.05 0.13 0.13 0.27 0.10 0.29 0.08 0.10 0.34 0.12 0.08 0.18 0.07 0.12
• Cohen’s d: 0.1418
Multivariate test Effect sizes: Local vs Original
Null Medium
Small Large
64.8%
31.8%
2.8%
0.6%
A la vanguardia de la evaluación psicológica
Baremos globales
N = 10,102
N = 5,046
N = 10,000
N = 7,000
A la vanguardia de la evaluación psicológica
• La tecnología está a la altura.
• Dos o incluso tres velocidades claramente diferenciadas.
• Recursos informatizados: Aplicaciones individuales y muy
concretas.
• Prevalencia de NNTT: 9-10%, pero aumentando...
• Importancia de acciones formativas y de difusión.
La evaluación psicológica…
A la vanguardia de la evaluación psicológica
• Probablemente derivado del fenómeno de la
globalización, la tendencia a nivel mundial es la
elaboración de baremos internacionales o continentales.
• La ausencia de diferencias notables en la mayoría de
los países de habla hispana apoyan esta posibilidad, pero
con reservas.
• Los baremos locales incrementan la precisión de
algunas escalas, así como la buena imagen de las
pruebas en los países de destino.
La medición psicológica…
A la vanguardia de la evaluación psicológica
COLOMBIA
A la vanguardia de la evaluación psicológica
Uso Pruebas psicométricas Colombia
A la vanguardia de la evaluación psicológica
Uso Pruebas psicométricas Colombia
A la vanguardia de la evaluación psicológica
Uso Pruebas psicométricas Colombia
A la vanguardia de la evaluación psicológica
La evaluación psicológica en Colombia…
• Buenas perspectivas.
• Sólido uso de instrumentos psicométricos, especialmente en el
campo del reclutamiento.
• Objetividad
• Rentabilidad
• Eficiencia
• Uso de nuevas tecnologías: ahora es el momento...
A la vanguardia de la evaluación psicológica
“Los psicólogos, como los físicos, no
podemos liberarnos de los efectos de los
instrumentos que empleamos: lo que
observamos está invariablemente
desvirtuado por las pruebas que elegimos
para observar el fenómeno”
(Das, Kar y Parrila, 1996)
A la vanguardia de la evaluación psicológica