2.a edición Evaluación psicológica Conceptos, métodos y estudio de casos Directora ROCÍO FERNÁNDEZ-BALLESTEROS CATEDRÁTICA EMÉRITA DE LA UNIVERSIDAD AUTÓNOMA DE MADRID 2.a edición Evaluación psicológica Conceptos, métodos y estudio de casos EDICIONES PIRÁMIDE COLECCIÓN «PSICOLOGÍA» Director: Francisco J. Labrador Catedrático de Modificación de Conducta de la Universidad Complutense de Madrid Edición en versión digital Está prohibida la reproducción total o parcial de este libro electrónico, su transmisión, su descarga, su descompilación, su tratamiento informático, su almacenamiento o introducción en cualquier sistema de repositorio y recuperación, en cualquier forma o por cualquier medio, ya sea electrónico, mecánico, conocido o por inventar, sin el permiso expreso escrito de los titulares del copyright. © Rocío Fernández-Ballesteros, 2013 © Primera edición electrónica publicada por Ediciones Pirámide (Grupo Anaya, S. A.), 2013 Para cualquier información pueden dirigirse a piramide_legal@anaya.es Juan Ignacio Luca de Tena, 15. 28027 Madrid Teléfono: 91 393 89 89 www.edicionespiramide.es ISBN digital: 978-84-368-2870-2 Relación de autores Antonio-León Aguado Díaz Jaime Fúster Juan Antonio Amador Campos Maite Garaigordobil Landazabal María Teresa Anarte Ortiz Ana García León Álvaro de Ansorena Cao Antonio Godoy Ávila David Arribas Águila Montserrat Gómez de Terreros Guardiola María Victoria del Barrio Gándara Remedios González Barrón María Dolores Calero García Héctor González Ordi Isabel Calonge Romano Montserrat Lacalle Sisteré Soledad Cruz Sáez Serafín Lemos-Giráldez Rocío Fernández-Ballesteros García Carmen Maganto Mateo Eduardo Fonseca-Pedrero María Oliva Márquez Sánchez María Forns i Santacana José Muñiz Sylvia Font-Mayolas Manuel Muñoz López Inmaculada Fuentes Durá María Pilar Muro Sans Universidad de Oviedo Universidad de Barcelona Universidad de Málaga Euroresearch TEA Ediciones Universidad Nacional de Educación a Distancia (UNED) Universidad de Granada Universidad Complutense de Madrid Universidad del País Vasco Universidad Autónoma de Madrid Universidad de Oviedo Universidad de Barcelona Universidad de Girona Universidad de Valencia © Ediciones Pirámide Universidad de Valencia Universidad del País Vasco Universidad de Jaén Universidad de Málaga Universidad de Sevilla Universidad de Valencia Universidad Complutense de Madrid Universidad Autónoma de Barcelona Universidad de Oviedo Universidad del País Vasco Universidad Autónoma de Madrid Universidad de Oviedo Universidad Complutense de Madrid Universidad de Barcelona 8 / Relación de autores Nuria de la Osa Chaparro Víctor Rubio Franco José Luis Padilla García Javier Rubio Salto Universidad Autónoma de Barcelona Universidad de Granada Mercedes Paino Universidad de Oviedo Noemí Pereda Beltrán Universidad de Barcelona Eloísa Pérez-Santos Universidad Complutense de Madrid Diana Pons Cañaveras Universidad de Valencia José Manuel Rodríguez González Universidad de Sevilla Universidad Autónoma de Madrid TEA Ediciones José Santacreu Mas Universidad Autónoma de Madrid María Valdés Díaz Universidad de Sevilla Carmen Vizcarro Guarch Universidad Autónoma de Madrid María Dolores Zamarrón Casinello Universidad Autónoma de Madrid © Ediciones Pirámide Índice Introducción ................................................................................................................ 21 PARTE PRIMERA Conceptos y metodología básica 1. 2. © Ediciones Pirámide Conceptos y modelos básicos. Rocío Fernández-Ballesteros ......................... 27 1. 2. 3. Introducción...................................................................................................... Algunas distinciones terminológicas ................................................................. Breve reseña histórica reciente .......................................................................... 3.1. Constitución ............................................................................................ 3.1.1. Los «padres» de la evaluación psicológica .................................. 3.1.2. Otros autores relevantes .............................................................. 3.2. Diez hitos históricos: desde 1910 hasta 1970 ........................................... 3.3. Evaluación psicológica y psicología......................................................... 4. Modelos en evaluación psicológica ................................................................... 4.1. Formulación teórica ................................................................................ 4.2. Clases de variables ................................................................................... 4.3. Métodos básicos y técnicas...................................................................... 4.4. Niveles de inferencia ................................................................................ 4.5. Objetivos .................................................................................................. 4.6. Ámbitos de aplicación ............................................................................. 5. Alternativas polémicas ...................................................................................... 5.1. Lo idiográfico versus lo nomotético ........................................................ 5.2. Lo cualitativo versus lo cuantitativo ........................................................ 5.3. La evaluación tradicional versus la evaluación conductual ..................... 6. Síntesis conceptual ............................................................................................ Conclusiones............................................................................................................ Bibliografía básica ................................................................................................... Referencias bibliográficas ........................................................................................ 28 29 30 31 31 32 33 35 36 38 40 40 42 44 45 46 46 47 49 51 56 57 57 El proceso como procedimiento científico y sus variantes. Rocío Fernández-Ballesteros ....................................................................................................... 61 1. 62 Introducción...................................................................................................... 10 / Índice 2. 3. 3. El proceso de evaluación: generalidades ........................................................... El proceso: su enfoque descriptivo-predictivo ................................................... 3.1. Fase 1. Primera recogida de información ................................................ 3.1.1. Especificar la demanda y fijar objetivos sobre el caso................. 3.1.2. Especificar las condiciones históricas y actuales potencialmente relevantes al caso ......................................................................... 3.2. Fase 2. Formulación de hipótesis y deducción de enunciados verificables .............................................................................................. 3.2.1. Formulación de hipótesis ............................................................ 3.2.2. Deducción de enunciados verificables ......................................... 3.3. Fase 3. Contrastación: administración de tests y otras técnicas de evaluación ..................................................................................................... 3.4. Fase 4. Comunicación de resultados: el informe...................................... 3.4.1. Integración de resultados ............................................................ 3.4.2. Comunicación de resultados: el informe oral y/o escrito............. 4. El proceso: su enfoque interventivo-valorativo ................................................. 4.1. Fase 5. Plan de tratamiento y su valoración ............................................ 4.1.1. Teoría sobre el caso ..................................................................... 4.1.1.1. Selección de las variables dependientes e independientes ................................................................................. 4.1.1.2. Selección de medidas de las variables dependientes e independientes .............................................................. 4.1.1.3. Criterios u objetivos de cambio .................................... 4.1.2. Selección de las técnicas de intervención y de las variables potencialmente contaminadoras ...................................................... 4.1.2.1. Selección de las técnicas de intervención ...................... 4.1.2.2. Evaluación y control de las variables potencialmente contaminadoras ............................................................ 4.1.3. Selección del diseño de valoración .............................................. 4.2. Fase 6. Tratamiento: diseño y administración y, en su caso, evaluación continua ................................................................................................... 4.3. Fase 7. Valoración ................................................................................... 4.3.1. Recogida y análisis de datos y valoración de resultados ............. 4.3.1.1. Recogida de información.............................................. 4.3.1.2. Análisis de datos .......................................................... 4.3.1.3. Valoración de resultados .............................................. 4.3.2. Comunicación de resultados: el informe ..................................... 4.3.3. Seguimiento ................................................................................ 5. Indicaciones ...................................................................................................... 6. Las técnicas durante el proceso de evaluación psicológica ............................... Conclusiones............................................................................................................ Bibliografía básica ................................................................................................... Referencias bibliográficas ........................................................................................ 87 87 89 89 90 91 93 93 94 95 97 98 98 Comunicación de los resultados: el informe psicológico. Rocío Fernández-Ballesteros ....................................................................................................... 101 1. 2. 102 103 Introducción...................................................................................................... Normas y guías para el informe........................................................................ 62 65 66 67 67 69 70 71 74 76 76 77 77 78 80 80 82 83 83 83 84 85 © Ediciones Pirámide Índice / 11 3. Tipos de informe ............................................................................................... 4. Características del informe ................................................................................ 5. Organización del informe .................................................................................. 6. La información del informe .............................................................................. 7. Un caso práctico ............................................................................................... Conclusiones............................................................................................................ Bibliografía básica ................................................................................................... Referencias bibliográficas ........................................................................................ 105 106 109 113 113 120 120 121 PARTE SEGUNDA Métodos de recogida de información 4. Garantías científicas y éticas de la evaluación psicológica. Rocío Fernández-Ballesteros y María Dolores Calero ................................................................ 1. 2. 3. 5. © Ediciones Pirámide 125 Introducción...................................................................................................... Tests, técnicas y otros procedimientos de evaluación ........................................ Puntuaciones utilizadas ..................................................................................... 3.1. Escalas de medida.................................................................................... 3.2. Puntuaciones directas y referidas a criterios y a normas ......................... 4. Garantías de los tests y otras técnicas de evaluación ........................................ 4.1. Fiabilidad ................................................................................................ 4.2. Validez ..................................................................................................... 4.3. Selección de instrumentos según sus garantías ........................................ 5. Garantías del proceso de evaluación ................................................................. 5.1. Las Guías del Proceso de Evaluación (GAP) .......................................... 5.2. Garantía de los datos recogidos .............................................................. 6. Directrices y guías que afectan a la evaluación psicológica .............................. 6.1. Criterios sobre la revisión de los tests...................................................... 6.2. Directrices para la traducción y adaptación de tests ............................... 6.3. Directrices internacionales para el uso de los tests .................................. 6.4. Directrices internacionales para la evaluación informatizada y tests aplicados por Internet ................................................................................... 7. Garantías éticas: el código deontológico........................................................... Conclusiones............................................................................................................ Bibliografía básica ................................................................................................... Referencias bibliográficas ........................................................................................ 126 126 128 128 129 132 133 135 141 142 144 144 154 156 157 157 La entrevista. María Oliva Márquez...................................................................... 167 1. 2. 168 Introducción...................................................................................................... La entrevista como instrumento básico del proceso de evaluación-intervención psicológica......................................................................................................... 2.1. El inicio de la evaluación ......................................................................... 2.1.1. Los contenidos ............................................................................ 2.1.2. La realización de la primera entrevista........................................ 2.1.3. El análisis de la información obtenida en la entrevista ............... 2.2. La entrevista en la comprobación de hipótesis ........................................ 162 163 167 167 167 169 170 171 173 175 176 12 / Índice 2.2.1. 6. Comprobación de hipótesis basadas en el supuesto de cuantificación .......................................................................................... 2.2.2. Comprobación de hipótesis basadas en el supuesto de semejanza ............................................................................................ 2.3. La entrevista en la comunicación de resultados ...................................... 3. Análisis de la interacción .................................................................................. 3.1. El entrevistador ....................................................................................... 3.2. El entrevistado ......................................................................................... 4. Garantías de la información ............................................................................. 4.1. Garantizar la relevancia de la información.............................................. 4.2. Asegurar la fiabilidad y validez de la información obtenida ................... 4.3. El nivel de estructuración ........................................................................ Conclusiones............................................................................................................ Bibliografía básica ................................................................................................... Referencias bibliográficas ........................................................................................ Apéndices ................................................................................................................ 177 179 179 180 181 182 183 184 186 188 188 188 191 La observación. Rocío Fernández-Ballesteros.................................................... 193 1. 2. 199 195 195 196 196 197 197 198 201 201 202 203 203 204 206 207 210 210 211 211 211 212 213 215 216 218 219 220 222 223 3. 4. 5. 6. Introducción...................................................................................................... Unidades de análisis (¿qué observar?) ............................................................... 2.1. Continuo del comportamiento................................................................. 2.2. Atributos ................................................................................................. 2.3. Conductas ................................................................................................ 2.4. Interacciones ............................................................................................ 2.5. Productos de conducta ............................................................................ 2.6. Unidades de medida (¿qué medir de la unidad?) ..................................... Técnicas de registro (¿con qué observar?) ......................................................... 3.1. Registros narrativos ................................................................................. 3.2. Escalas de apreciación ............................................................................. 3.3. Protocolos observacionales de conducta.................................................. 3.3.1. Registros de conductas ................................................................ 3.3.2. Matrices de interacción ............................................................... 3.3.3. Mapas de conducta ..................................................................... 3.4. Códigos o sistemas de categorías ............................................................. 3.5. Registro de productos de conducta.......................................................... 3.6. Procedimientos automáticos de registro .................................................. 3.6.1. Medios técnicos de registro ......................................................... 3.6.2. Aparatos de registro a distancia u ocultos................................... 3.6.3. Observación mediante aparatos................................................... Muestreo (¿cuándo y/o a quién observar?)........................................................ 4.1. Muestreo de tiempo ................................................................................. 4.2. Muestreo de situaciones .......................................................................... 4.3. Muestreo de sujetos ................................................................................. Lugar de la observación (¿dónde observar?) ..................................................... 5.1. Observación en situaciones naturales ...................................................... 5.2. Observación en situaciones artificiales..................................................... Garantías científicas de la observación ............................................................. 6.1. Fuentes de error de la observación .......................................................... 176 © Ediciones Pirámide 7. Índice / 13 6.1.1. Procedentes del sujeto observado ................................................ 6.1.2. Procedentes del observador ......................................................... 6.1.3. Procedentes del sistema de observación ...................................... 6.2. Algunas cuestiones sobre fiabilidad, validez y exactitud de la observación .......................................................................................................... Conclusiones............................................................................................................ Bibliografía básica ................................................................................................... Referencias bibliográficas ........................................................................................ 221 222 229 Los autoinformes. Rocío Fernández-Ballesteros ................................................ 235 1. 2. 237 237 237 238 239 242 244 244 246 246 247 248 249 249 249 250 250 251 251 252 252 252 252 252 253 253 253 254 255 255 258 262 264 264 266 267 268 268 Introducción...................................................................................................... Características de los autoinformes................................................................... 2.1. Procesamiento de información y autoinformes........................................ 2.2. Sobre qué se informa ............................................................................... 2.3. Accesibilidad y contrastabilidad .............................................................. 2.4. Autoinformes directos versus indirectos .................................................. 3. Unidades de análisis o variables a evaluar ........................................................ 3.1. Rasgos, dimensiones o factores................................................................ 3.2. Estados .................................................................................................... 3.3. Repertorios conductuales ........................................................................ 3.4. Repertorios cognitivos ............................................................................. 3.5. Construcciones idiográficas y narrativa ................................................... 4. Condiciones del autoinforme ............................................................................ 4.1. El contexto .............................................................................................. 4.1.1. Autoinformes realizados en el laboratorio o la consulta ............. 4.1.2. Autoinformes en situación natural .............................................. 4.2. Las preguntas .......................................................................................... 4.2.1. Preguntas estructuradas .............................................................. 4.2.2. Preguntas semiestructuradas ....................................................... 4.2.3. Preguntas no estructuradas ......................................................... 4.3. Las respuestas .......................................................................................... 4.3.1. Respuesta dicotómica .................................................................. 4.3.2. Respuestas escalares .................................................................... 4.3.3. Alternativas ordinales .................................................................. 4.3.4. Respuesta abierta......................................................................... 4.4. Construcción de los autoinformes y tratamiento de los resultados ......... 4.4.1. Construcción de los autoinformes ............................................... 4.4.2. Tratamientos de los resultados .................................................... 5. Principales tipos de autoinformes ..................................................................... 5.1. Cuestionarios, inventarios y escalas ......................................................... 5.2. Autorregistros .......................................................................................... 5.3. Pensamiento-en-voz-alta .......................................................................... 5.4. La entrevista ............................................................................................ 5.5. La autobiografía ...................................................................................... 6. Algunas cuestiones sobre la calidad de los autoinformes ................................. 6.1. Simulación ............................................................................................... 6.2. Deseabilidad social .................................................................................. 6.3. Tendencias de respuesta ........................................................................... © Ediciones Pirámide 229 230 231 232 14 / Índice 8. 9. Conclusiones............................................................................................................ Bibliografía básica ................................................................................................... Referencias bibliográficas ........................................................................................ 269 269 270 Otras técnicas: objetivas y proyectivas. María Dolores Calero, María Oliva Márquez, Carmen Vizcarro y Rocío Fernández-Ballesteros ................................. 275 1. 2. 3. 4. Introducción...................................................................................................... Las técnicas objetivas: introducción .................................................................. Técnicas objetivas perceptivas, motoras y cognitivas ........................................ Instrumentación psicofisiológica ....................................................................... 4.1. El proceso de medición psicofisiológica................................................... 4.2. Garantías del registro .............................................................................. 4.3. Aplicaciones............................................................................................. 5. Las técnicas proyectivas: introducción .............................................................. 5.1. Características y tipos de técnicas proyectivas ......................................... 5.2. Perspectivas de futuro de las técnicas proyectivas.................................... Bibliografía básica ................................................................................................... Referencias bibliográficas ........................................................................................ 276 277 279 284 285 287 288 290 292 294 295 296 Técnicas psicométricas: los tests. María Dolores Calero y José Luis Padilla... 299 1. 2. 300 Introducción...................................................................................................... Proceso general de construcción de tests desde la teoría clásica de los tests (TCT) ................................................................................................................ 3. Otras aproximaciones a la construcción de tests desde la teoría clásica de los tests ................................................................................................................... 3.1. Construcción racional.............................................................................. 3.2. Construcción empírica ............................................................................. 3.3. Construcción analítico-factorial .............................................................. 4. Proceso de construcción desde la teoría de respuesta al ítem ........................... 4.1. Bancos de ítems ....................................................................................... 4.2. Tests adaptativos...................................................................................... 5. Clasificación de los tests psicométricos ............................................................. 5.1. Tests de inteligencia ................................................................................. 5.1.1. Evaluación individual de la inteligencia ...................................... 5.1.2. Tests de inteligencia colectivos: inteligencia general frente a baterías de aptitudes........................................................................ 5.1.3. Baterías de aptitudes ................................................................... 5.2. Tests de personalidad............................................................................... 5.2.1. Cuestionarios de personalidad multidimensionales ..................... 5.3. Escalas y cuestionarios monorrasgo ........................................................ 6. Evaluación informatizada ................................................................................. 6.1. Administración de técnicas ...................................................................... 6.2. Corrección e interpretación de técnicas ................................................... 6.3. Limitaciones actuales de la evaluación informatizada ............................. 7. Presente y futuro de los test psicométricos ....................................................... Guías de recursos .................................................................................................... 302 307 307 308 308 309 311 311 312 315 315 316 320 322 322 327 327 328 329 330 331 332 © Ediciones Pirámide Índice / 15 Bibliografía básica ................................................................................................. Referencias bibliográficas....................................................................................... 332 333 PARTE TERCERA Estudio de casos 10. Evaluación en la infancia y la adolescencia. Nuria de la Osa Chaparro y Montserrat Lacalle Sisteré .................................................................................... 339 Introducción .......................................................................................................... Fase 1. Primera recogida de información............................................................... Fase 2. Formulación de hipótesis y deducción de enunciados verificables ............. Fase 3. Contrastación, administración de pruebas de evaluación .......................... Fase 4. Comunicación de resultados: el informe .................................................... Conclusiones .......................................................................................................... Referencias bibliográficas....................................................................................... 340 340 343 349 353 356 356 11. Evaluación del deterioro cognitivo. María Dolores Zamarrón ........................ 357 Introducción .......................................................................................................... Fase 1: Primera recogida de información............................................................... Fase 2: Formulación de hipótesis y enunciados verificables................................... Fase 3: Contrastación: administración de tests y otras técnicas de evaluación ...... Fase 4: Comunicación de resultados: el informe .................................................... Conclusiones .......................................................................................................... Bibliografía básica ................................................................................................. Referencias bibliográficas....................................................................................... Anexo..................................................................................................................... 358 358 361 367 371 374 374 375 377 12. Diagnóstico clínico: un caso de ansiedad. María Teresa Anarte y Antonio Godoy .................................................................................................................... 381 1. Introducción .................................................................................................... 1.1. Diferencia entre tarea diagnóstica, juicio diagnóstico y emisión del juicio diagnóstico ....................................................................................... 1.2. Motivos para realizar un diagnóstico formal ......................................... 1.3. Requisitos que debe cumplir el profesional clínico para la realización de un diagnóstico formal ....................................................................... 1.4. El proceso diagnóstico ........................................................................... Fase 1. Primera recogida de información............................................................... Fase 2. Formulación de hipótesis y deducción de enunciados empíricamente comprobales ............................................................................................................... Fase 3. Contrastación de las hipótesis: segunda recogida de información ............. Fase 4. Informe psicológico ................................................................................... Bibliografía básica ................................................................................................. Referencias bibliográficas....................................................................................... © Ediciones Pirámide 382 382 382 383 384 385 389 393 397 402 402 16 / Índice 13. Orientación vocacional. María Forns i Santacana............................................ 403 Introducción .......................................................................................................... Fase 1. Primera recogida de información............................................................... Fase 2. Formulación de hipótesis y deducción de enunciados verificables ............. Fase 3. Contrastación: administración de tests y de otras técnicas de evaluación y realización de tareas de orientación .................................................................... Fase 4. Comunicación de resultados: el informe .................................................... Conclusiones .......................................................................................................... Bibliografía básica ................................................................................................. Referencias bibliográficas....................................................................................... 404 404 411 419 430 435 436 436 14. Selección de personal. Álvaro de Ansorena Cao y Rocío Fernández-Ballesteros....................................................................................................................... 439 Introducción .......................................................................................................... Fase 1. Primera recogida de información............................................................... Fase 2. Formulación de hipótesis y deducción de enunciados verificables ............. Fase 3. Contrastación: administración de tests y otras técnicas de evaluación ...... Fase 4. Comunicación de resultados: el informe .................................................... Conclusiones .......................................................................................................... Bibliografía básica ................................................................................................. Referencias bibliográficas....................................................................................... 440 441 443 449 453 458 459 459 15. Evaluación y valoración del tratamiento en un problema de depresión. Rocío Fernández-Ballesteros ............................................................................... 461 Introducción .......................................................................................................... Fase 1. Primera recogida de información............................................................... Fase 2. Formulación de hipótesis y deducción de enunciados verificables ............. Fase 3. Contrastación: administración de tests y otras técnicas de evaluación ...... Fase 4. Comunicación de resultados: el informe .................................................... Fase 5. Planificación del tratamiento y su valoración ............................................ Fase 6. Tratamiento: diseño y administración ....................................................... Fase 7. Valoración y (en su caso) seguimiento ....................................................... Conclusiones .......................................................................................................... Bibliografía básica ................................................................................................. Referencias bibliográficas....................................................................................... Anexo..................................................................................................................... 462 462 465 469 472 477 483 483 488 488 488 490 © Ediciones Pirámide Índice APÉNDICE Tests, técnicas y procedimientos de evaluación Carmen Vizcarro Guarch y M.a Oliva Márquez Sánchez (coordinadoras) Sección 1. 1.1. 1.2. 1.3. 1.4. 1.5. 1.6. 1.7. 1.8. 1.9. 1.10. BAS-II, Escalas de Aptitudes Intelectuales de C. D. Elliott. David Arribas Águila K. BIT, Test Breve de Inteligencia de Kaufman (C) de A. S. Kaufman y N. L. Kaufmann. Maite Garaigordobil Landazabal WAIS-III, Escala de Inteligencia de Wechsler para Adultos III (C). Juan Antonio Amador Campos WISC-R, Escala de Inteligencia de Wechsler para Niños-Revisada (C). Juan Antonio Amador Campos WPPSI, Escala de Inteligencia para Preescolar y Primaria (C) de Wechsler. Soledad Cruz Sáez y Carmen Maganto Mateo Matrices Progresivas de Raven (B). Escalas CPM de Color, SPM General y APM Superior. Maite Garaigordobil Landazabal DAT-5, Test de Aptitudes Diferenciales 5 (B) de Bennet et al. María Teresa Anarte Ortiz y Antonio Godoy Ávila PMA, Aptitudes Mentales Primarias (B) de Thurstone. Ana García León TRASI, Test Informatizado para la Evaluación del Razonamiento General Secuencial e Inducción. Víctor Rubio Franco RIAS, Escalas de Inteligencia de Reynolds. Maite Garaigordobil Landazabal Sección 2. 2.1. 2.2. 2.3. 2.4. 2.5. 2.6. 2.7. © Ediciones Pirámide Funcionamiento intelectual y aptitudes Desarrollo y aprendizaje Escalas de desarrollo MERRILL PALMER-R. Isabel Calonge Romano CBCL/6-18, Inventario de Conducta Infantil de Achenbach. Nuria de la Osa Chaparro MSCA, Escalas de Aptitudes y Psicomotricidad para Niños de McCarthy. AntonioLeón Aguado Díaz BATELLE, Inventario de Desarrollo de Newborg y otros. Antonio-León Aguado Díaz EPA-2, Evaluación del Potencial de Aprendizaje de Fernández-Ballesteros, Calero, Campllonch y Belchi. María Dolores Calero García DiViSA, Un test para evaluar la atención en niños. José Santacreu Mas Columbia: Escala de Madurez Mental de Columbia. Antonio-León Aguado Díaz 18 / Índice 2.8. Escalas de Apreciación de Conners Revisadas, CRS-R. Nuria de la Osa Chaparro 2.9. BASC, Sistema de Evaluación de la Conducta de Niños y Adolescentes. Nuria de la Osa Chaparro Sección 3. Personalidad 3.1. EPI, Cuestionario de Personalidad de Eysenck y Eysenck. María Valdés Díaz 3.2. EPQ-R, Cuestionario Revisado de Personalidad de Eysenck. María Valdés Díaz 3.3. BFQ, Cuestionario Big-Five de Caprara. Remedios González Barrón 3.4. 16 PF-5, Cuestionario Factorial de Personalidad (B) de Cattell. Inmaculada Fuentes Durá y Jaime Fúster 3.5. PAI, Cuestionario de Personalidad de Morey. Sylvia Font-Mayolas 3.6. CPQ, Cuestionario de Personalidad para Niños (B) de Porter y Cattell. Montserrat Gómez de Terreros Guardiola 3.7. BAS, Batería de Socialización de Silva y Martorell. Maite Garaigordobil Landazabal 3.8. TAMAI, Test Autoevaluativo Multifactorial de Adaptación Infantil de Hernández Hernández. Montserrat Gómez de Terreros Guardiola 3.9. ACS, Escala de Afrontamiento para Adolescentes de Frydenberg y Lewis. Noemí Pereda Beltrán y María Forns Santacana 3.10. LAEA, Listado de Adjetivos para la Evaluación del Autoconcepto en Adolescentes y Adultos. Maite Garaigordobil Landazabal Sección 4. Motivación, intereses y valores 4.1. IPP, Inventario de Intereses y Preferencias Profesionales (A) de De la Cruz. Juan Antonio Amador Campos 4.2. KUDER-C, Registro de Preferencias Vocacionales (A) de Kuder. Juan Antonio Amador Campos 4.3. SOSIA, Gestión de Competencias de Gordon, ECPA y TEA. Javier Rubio Salto Sección 5. Comportamiento anormal 5.1. MMPI-2, Inventario Multifásico de Personalidad de Minnesota-2 (C) de Hathaway y McKinley. José Manuel Rodríguez González 5.1.bis MMPI-2-RF, Inventario de Personalidad de Minnesota-2 Reestructurado de BenPorath y Tellepeg. Héctor González Ordi 5.2. MCMI-II, Inventario Multiaxial Clínico de Millon. Eloísa Pérez-Santos y Manuel Muñoz 5.3. MACI, Inventario clínico para adolescentes de Millon. María Forns Santacana 5.4. SCL-90-R, Inventario de Síntomas Revisado de Derogatis. Carmen Maganto Mateo y Soledad Cruz Sáez 5.5. ISRA, Inventario de Situaciones y Respuestas de Ansiedad (B) de Miguel Tobal y A. Cano Vindel. Diana Pons Cañaveras 5.6. STAI, Cuestionario de Ansiedad Estado/Rasgo de Spielberger et al. María Valdés Díaz 5.7. STAIC, Cuestionario de Ansiedad Estado/Rasgo para niños (B) de Spielberger. María Valdés Díaz 5.8. STAXI-2, Inventario de Expresión de Ira Estado-Rasgo de Speilberger. María Valdés Díaz © Ediciones Pirámide Índice 5.9. 5.10. 5.11. 5.12. 5.13. 5.14. 5.15. 5.16. / 19 EDI-2, Inventario de Trastornos de la Conducta Alimentaria de Garner. Pilar Muro Sans FSS-III, Cuestionario de Temores de Wolpe. Manuel Muñoz López y Eloísa PérezSantos PES, Escala de Sucesos Placenteros de MacPhillamy y Lewinshon. Manuel Muñoz López Inventario de Asertividad de Rathus. Manuel Muñoz López y Eloísa Pérez-Santos Inventario de Depresión de Beck (Beck Depressión Scale, BDS). Eloísa Pérez-Santos y Manuel Muñoz López CDI, Inventario de Depresión para niños de María Kovacs. María Victoria del Barrio Gándara Sistemas de Clasificación del Comportamiento Anormal: DSM-IV-TR e ICD-10. María Teresa Anarte y Antonio Godoy Ávila ESQUIZO-Q, Cuestionario Oviedo para la Evaluación de la Esquizotipia. Eduardo Fonseca-Pedrero, Serafín Lemos-Giráldez, Mercedes Paino y José Muñiz Sección 6. Neuropsicológicos 6.1. RBMT, Test Conductual de Memoria Rivermead. Montserrat Gómez de Terreros Guardiola 6.2. TRVB, Test de Retención Visual de Benton. José María Rodríguez González 6.3. MMSE, Examen Cognoscitivo Minimental de Lobo. Manuel Muñoz López y Eloísa Pérez-Santos Sección 7. Formatos de entrevista 7.1. Entrevista conductual y Hoja de Valoración de la Entrevista (HVE). Rocío FernándezBallesteros García 7.2. Entrevistas Clínicas Estructuradas para los Trastornos del DSM-IV y el ICD-10. Antonio Godoy Ávila y María Teresa Anarte Ortiz 7.3. Esquema tipo de la entrevista de evaluación en el proceso de selección. Álvaro de Ansorena Cao Sección 8. Otros materiales 8.1. Hoja de Planificación de Análisis Conductual (PAC). Rocío Fernández-Ballesteros García 8.2. Plan de Intervención y Valoración (PIV). Rocío Fernández-Ballesteros García 8.3. Código deontológico (CDP) 8.4. Código de la APA © Ediciones Pirámide Introducción La evaluación psicológica es aquella disciplina de la psicología científica que se ocupa de la exploración y análisis del comportamiento (a los niveles de complejidad que se estime oportunos) de un sujeto humano (o grupo especificado de sujetos) con distintos objetivos aplicados (descripción, diagnóstico, selección/predicción, explicación, cambio y/o valoración de los tratamientos o intervenciones aplicadas). La evaluación psicológica implica un proceso de solución de problemas y toma de decisiones que comienza con una demanda de un cliente y/o sujeto (o grupo de sujetos) a un psicólogo. Este proceso implica una serie de actividades científicas y profesionales, realizadas en una secuencia establecida, con las que se pretende dar respuesta a esa demanda; entre otras, la administración de una serie de tests, técnicas de medida y procedimientos de recogida de información. Tal disciplina —al igual que ocurre en otros países— ha formado parte, bajo distintas rúbricas («psicodiagnóstico», «exploración psicológica», etc.), de los distintos planes de estudio que han existido en las universidades españolas desde la caracterización de la psicología como carrera universitaria. A lo largo de la historia, la evaluación psicológica ha experimentado momentos de auge y crisis (véase capítulo 1); en los últimos diez años se ha expansionado extraordinariamente. Así, de una parte, desde una perspectiva científica, en las últimas décadas se han creado nuevos órganos de difusión periódicos (Psychological Assessment, Assessment, Internacional Journal of Testing, European Journal of Psychological Assessment, © Ediciones Pirámide Revista Iberoamericana de Diagnóstico y Evaluación Psicológica). También los avances tecnológicos han permitido el desarrollo de nuevos procedimientos de recogida de información, así como de su análisis, valoración e información. En España, se han desarrollado nuevos instrumentos de evaluación, al tiempo que se han traducido y adaptado otros. Además, se han fundado nuevas instituciones dedicadas a la expansión de la evaluación psicológica (como, por ejemplo, la European Association of Psychological Assessment, EAPA, creada a partir de la Sociedad Española de Evaluación Psicológica, SEEP, la Asociación Iberoamericana de Diagnóstico y Evaluación Psicológica), se ha producido una gran expansión de otras, como la International Test Comision (ITC), se han incorporado secciones de evaluación a las sociedades internacionales y se ha producido una importante presencia de la evaluación en foros de discusión psicológica, organizándose reuniones científicas monográficas dedicadas a tal fin. Al mismo tiempo, dichas asociaciones internacionales han articulado una serie de principios normativos o guías de actuación que han facilitado la regulación de la acción evaluadora (véase capítulo 4). Asimismo, el siglo XXI se ha inaugurado con la publicación de dos enciclopedias de evaluación psicológica (Fernández-Ballesteros, 2003; Hersen, 2004). Por último, desde una perspectiva aplicada, también en los últimos años, la investigación que trata de estudiar la propia acción del psicólogo ha puesto de relieve que una gran parte de su tiempo lo dedica a realizar tareas evaluativas en todas las áreas de aplicación; en otras palabras, 22 / Introducción que todo psicólogo ha de ejecutar tareas evaluativas, cualquiera que sea su trayectoria y ámbito profesional o académico. Todo lo dicho hasta aquí habla en favor de la importancia (científica y aplicada) y, también, de la diversidad de la evaluación psicológica. Sin embargo, estos datos no deben hacer pensar al lector que con ellos lo que se pretende es resaltar la importancia de esta disciplina entre otras que conforman los estudios de psicología. Ni mucho menos; la formación de un buen psicólogo parte de unos conocimientos teóricos, empíricos y metodológicos básicos que son fundamentales en la práctica de la psicología: los saberes sobre fundamentos biológicos y sociales del comportamiento, de los procesos atencionales y perceptivos, memoria, aprendizaje, solución de problemas, personalidad, psicopatología, las diferencias individuales y su evolución, los conocimientos y competencias metodológicas que se requieren a la hora de la investigación en psicología. Todo ello es necesario y previo al aprendizaje y conocimiento de la evaluación y, desde luego, al establecimiento de competencias específicamente evaluativas. Es más, sería imposible llegar a realizar una adecuada evaluación psicológica sin otros conocimientos y competencias más generales procedentes de esas materias básicas. Podríamos decir que nuestra disciplina requiere la aplicación de todo el acervo de saberes y competencias psicológicas aplicables en la práctica del caso individual por lo que se refiere a la exploración y análisis del comportamiento de concretos seres humanos o grupos especificados o, incluso, sus acciones (tratamientos, intervenciones, programas). Por otra parte, ya se ha dicho que la evaluación conlleva un determinado proceso (de las mismas características y naturaleza que el proceso a través del cual la ciencia progresa) a lo largo del cual, entre otras acciones, ha de recogerse información mediante tests, técnicas y procedimientos de evaluación. Así pues, nuestra disciplina posee un componente tecnológico importante, fundamentalmente por lo que se refiere a la debida selección y aplicación de las herramientas de evaluación más idóneas en cada caso. Ello relaciona a la evaluación psicológica con la metodología de las ciencias del comportamiento y, esencialmente, con la psicometría como disciplina que se ocupa de la construcción y elaboración de tales instrumentos de medida, así como, también, la evaluación psicológica se desgrana en otras disciplinas complementarias que desarrollan concretas áreas de contenido relevantes tanto en el ámbito individual (como, por ejemplo, el diagnóstico, la orientación y el consejo, la selección, etc.) como en otros ámbitos aplicados, tales como la evaluación de ambientes o de programas. La evaluación psicológica es una materia relevante en los planes de estudio del grado de psicología. Así ha sido contemplado, y en todos los planes de estudio de la licenciatura en psicología ha existido una disciplina básica con tal título, y así ocurre tras Bolonia. Y, por las razones que decíamos antes, tal disciplina se incardina con otras materias psicológicas básicas, de contenido y metodológicas, que se requieren a la hora de lograr su necesaria comprensión. Sin embargo, conviene anunciar que, como es lógico, esta evaluación psicológica troncal tiene un carácter introductorio que, en las distintas especialidades que elija el futuro psicólogo, asumirá contenidos específicos, como evaluación en la clínica y contextos de salud, evaluación neuropsicológica y selección de personal, entre otras muchas especialidades. Esta obra pretende constituir un texto básico para los estudiantes del grado de psicología, de modo que facilite los aprendizajes en el amplio ámbito de la evaluación y permita el aprendizaje de competencias evaluativas. Por otra parte, conviene resaltar que Evaluación psicológica. Conceptos, métodos y estudio de casos, en su segunda edición, es heredera de dos obras anteriores: Psicodiagnóstico (UNED, 1983) e Introducción a la evaluación psicológica (Pirámide, 1992). ¿Qué cambios se han producido y por qué se han realizado? En primer lugar, como ya se ha comentado, se ha reducido su extensión; ello se debe a la reducción efectuada en los planes de estudio que han llevado consigo la transformación de estudios de Licenciatura a estudios de Grado de psicología para así alcanzar la necesaria confluencia euro© Ediciones Pirámide Introducción pea inspirados en los planteamientos de Bolonia, focalizando aquellos temas que parecen centrales, enfatizando el aprendizaje de competencias y dejando otros para la especialización. Por todo ello, se han reducido algunos temas, se han ampliado otros y, lo largo de toda la obra, se han destacado las competencias que el alumno debe desarrollar facilitando su aprendizaje mediante el estudio de casos. En segundo lugar, la utilización en la docencia universitaria de las distintas ediciones del texto, durante casi treinta años, ha puesto de relieve la necesidad de enfatizar el proceso de evaluación como espina dorsal de la evaluación y dejar los tests y otras técnicas de evaluación como lo que son, auxiliares tecnológicos para la recogida de información. Finalmente, los propios avances y desarrollos experimentados por la evaluación psicológica en los últimos años, a los que nos referíamos más arriba, han exigido una puesta al día de todo el texto anterior. Por ello, Evaluación psicológica. Conceptos, métodos y estudio de casos es una obra renovada en la que, amén de recortes en los aspectos que requieren una mayor especialización, se actualizan aquellos capítulos que versan sobre conceptos y métodos básicos, incluyéndose los basados en nuevas tecnologías; se hace bascular toda la obra sobre el proceso, y todo ello se ejemplifica mediante casos concretos y, finalmente, se introducen los tests, técnicas y otros procedimientos de recogida de información en forma de vademécum de los más utilizados en un CD. Con el fin de fomentar el desarrollo de competencias, todos los capítulos van precedidos por los objetivos que se pretenden, y la mayor parte de ellos permiten al alumno realizar tareas prácticas relacionadas con el material presentado que se han visto completadas en el último año por una obra complementaria, realizada con la colaboración de las profesoras Márquez, Vizcarro y Zamarrón, el SIMAPE o Sistema Interactivo Multimedia para el Aprendizaje del Proceso de Evaluación (Pirámide, 2011). Esta obra se articula en cuatro partes fundamentales. La parte primera trata los conceptos básicos, modelos y procesos en evaluación psicológica. Así, en el capítulo 1 se realiza una serie de © Ediciones Pirámide / 23 distinciones terminológicas junto a una breve reseña de la historia reciente para, posteriormente, hacer referencia a los distintos modelos teóricos que han desencadenado alternativas polémicas, terminando por presentar una síntesis conceptual. El capítulo 2 versa sobre el proceso como procedimiento científico y sus dos variantes fundamentales, que responden a objetivos descriptivos-predictivos e interventivos-valorativos. En el capítulo 3 se presenta el informe como elemento esencial de la comunicación de resultados. Finalmente, en el capítulo 4 se tratan las garantías científicas y éticas de la evaluación psicológica, procurando insistir tanto en los conceptos básicos de psicometría en su aplicación a la evaluación como en los planteamientos normativos y deontológicos. En la parte segunda se exponen los métodos básicos en evaluación psicológica; en primer lugar, el capítulo 5 aborda la entrevista como el método más general de recogida de información siempre necesario en el comienzo de toda evaluación psicológica; en él se examinan sus distintos formatos, sus variantes en función de los objetivos de evaluación, así como sus ventajas y limitaciones. El capítulo 6 trata sobre la observación, pormenorizando las unidades de análisis y las técnicas de registro más frecuentes, así como las técnicas de muestreo, el lugar en el que se realiza la observación y particularidades sobre las garantías científicas que toda observación debe conllevar. El capítulo 7 versa sobre los autoinformes como uno de los procedimientos de más frecuente utilización para la recogida de información de todo tipo de eventos y el único vehículo para evaluar el mundo subjetivo del individuo y que, por todo ello, es la base de la gran mayoría de cuestionarios y escalas; en este capítulo se revisan las variables que a través de ellos se indagan, así como sus condiciones y tipos básicos, y se finaliza con la consideración de aquellas cuestiones que optimizan la calidad de estos dispositivos de recogida de información. En el capítulo 8 se presentan otros tipos de técnicas (a los que en ediciones anteriores se les habían dedicado sendos capítulos) objetivas y proyectivas por cuanto requieren un nivel de especialización que trasciende los estudios básicos 24 / Introducción de la disciplina. Termina la parte segunda con el capítulo 9, que versa sobre las técnicas psicométricas y en el que se revisan los principales métodos para su construcción, valoración y uso, terminando por presentar sus tipos más extendidos: los tests de inteligencia y personalidad, así como el uso informatizado de los tests. La parte tercera está dedicada a la evaluación psicológica de casos concretos; se trata de aplicar los conocimientos de la primera y segunda partes en seis casos que presentan distintos objetivos evaluativos. A tal propósito, el capítulo 10 versa sobre la evaluación en la infancia y adolescencia; el capítulo 11 se dedica a la evaluación de un potencial deterioro cognitivo; en el capítulo 12 se describe un caso de diagnóstico de un trastorno de ansiedad; en el capítulo 13 se plantea una orientación vocacional; en el 14, se describe una situación de selección de personal y, finalmente, el capítulo 15 se dedica a la evaluación, tratamiento y valoración en un caso de depresión. Finalmente, el CD presenta un apéndice con 55 tests, técnicas y otros procedimientos de reco- gida de información ordenados en los siguientes apartados: inteligencia y aptitudes, desarrollo y aprendizaje, personalidad, motivación, comportamiento anormal y neuropsicológicos, a los cuales se añaden tres formatos de entrevista y, finalmente, se presentan otros materiales didácticos del proceso de evaluación. En definitiva, Evaluación psicológica. Conceptos, métodos y estudio de casos en su segunda edición pretende constituir un texto dedicado al estudiante del Grado de Psicología, de fácil lectura y estudio, y en el que se engranan los conocimientos que se consideran básicos a la hora de procurar competencias relacionadas con la difícil tarea de describir, diagnosticar, seleccionar y orientar el tratamiento del comportamiento humano y valorar adecuadamente lo tratado. Madrid, abril de 2011. ROCÍO FERNÁNDEZ-BALLESTEROS Catedrática Emérita de la Universidad Autónoma de Madrid © Ediciones Pirámide PARTE PRIMERA Conceptos y metodología básica Conceptos y modelos básicos ROCÍO FERNÁNDEZ-BALLESTEROS 1 OBJETIVOS DEL CAPÍTULO • Conectar la evaluación psicológica con la evolución histórica de la psicología y conocer sus hitos más importantes y los modelos derivados. • Conocer la terminología básica de la evaluación y diferenciar los conceptos básicos. • Conocer los contextos en los que se demanda la actividad evaluadora. • Ser capaz de diferenciar los distintos modelos teóricos según un conjunto de condiciones y sus distintas aplicaciones. • Ser capaz de diferenciar entre los distintos objetivos de evaluación. • Conocer las distintas polémicas de la evaluación y sus posibilidades de síntesis. • Saber diferenciar entre las distintas agrupaciones de variables implicadas en un amplio modelo de evaluación presentado como síntesis conceptual. © Ediciones Pirámide 1. InTrODUCCIón Un psicólogo está realizando una exploración a un sujeto internado en un hospital psiquiátrico con el fin de llegar a un diagnóstico y/o recomendar un determinado tratamiento. Indaga sobre el motivo de su ingreso, recaba datos de su biografía mediante entrevistas, dialoga con el paciente y sus familiares con el fin de conocer sus condiciones socioambientales, le aplica una serie de tests y técnicas de medida con el propósito de examinar algunas características psicológicas, observa su conducta en la sala hospitalaria, etc. Con base en todo ello, tras efectuar un pormenorizado análisis de los datos recogidos, emite un diagnóstico y/o recomienda un determinado tratamiento. Más tarde, una vez finalizado el tratamiento prescrito, el psicólogo vuelve a explorar al paciente valorando los cambios que se han producido en su comportamiento y, en su caso, recomendando su alta. Este psicólogo ha realizado una intervención psicológica en la que han existido distintos momentos de evaluación. En una escuela se está efectuando una labor de orientación a una serie de escolares; se trata de conocer sus aptitudes intelectuales, así como sus intereses y preferencias profesionales, con el fin de recomendar una determinada alternativa educativa. El psicólogo escolar realiza una serie de mediciones psicológicas mediante tests y entrevistas y en colaboración con cada uno de los escolares, y, en base a las oportunidas educativas existentes, logra establecer los estudios o la profesión más idónea para cada sujeto. También este profesional de la psicología ha realizado una evaluación psicológica base para la tarea de orientación vocacional. En una empresa se pide a un psicólogo que seleccione a los candidatos más idóneos para un determinado puesto de trabajo. El psicólogo, tras conocer el perfil del puesto de trabajo que el cliente pretende, efectúa una serie de exámenes psicológicos a los candidatos presentados a base de tests, entrevistas, observaciones, etc. Finalmente, a partir de los resultados, el psicólogo presentará un listado de aquellos candidatos especialmente idóneos. Ese psicólogo también llevó a cabo una evaluación psicológica como base de esa tarea de selección de personal. Se requiere un estudio pormenorizado de una institución infantil —pongamos por caso un centro de educación especial— con el fin de proceder a determinados cambios encaminados a una optimización de sus servicios. Un grupo de psicólogos y otros profesionales examinan, de ese contexto, aspectos físicos y arquitectónicos, de política organizativa, de clima social, analizan las relaciones entre tales condiciones y el comportamiento de los usuarios y, finalmente, llegan a establecer una serie de recomendaciones de cambio. Estos científicos sociales han tenido que realizar evaluaciones psicológico-ambientales antes de recomendar cambios ambientales. Se trata de valorar una intervención, tratamiento o programa con el que se desea conseguir una serie de cambios conductuales en función de una serie de objetivos propuestos. Los psicólogos encargados de tal valoración seleccionan una se© Ediciones Pirámide Conceptos y modelos básicos rie de tests o instrumentos de medida con el fin de evaluar los cambios comportamentales finales producidos por la intervención o indicadores sobre sus efectos. También, en este caso, se han de realizar evaluaciones que, cuando tienen que ver con la conducta, son también psicológicas. En un laboratorio universitario se está efectuando un experimento para tratar de comprobar los efectos de determinadas manipulaciones experimentales en una serie de parámetros de las respuestas (motoras, fisiológicas o cognitivas) de un grupo de sujetos. El proceso de recogida de datos sobre las variables dependientes mediante observación, de registros mediante aparatos o autoinformes supone, también, tareas evaluativas. Estos y otros muchos ejemplos son demostrativos de la importancia y diversidad de la evaluación psicológica en distintos contextos aplicados; incluso cabe decir que son tareas evaluativas las que con mayor frecuencia realizan los psicólogos (Fernández-Ballesteros, 1994). Sin embargo, a la hora de describir tales tareas hemos utilizado diferentes rúbricas, del mismo modo que los propósitos perseguidos en los distintos contextos de aplicación han sido diferentes. Todo ello requiere una aclaración; se trata de establecer el concepto de los diferentes términos utilizados (psicodiagnóstico, medición, evaluación, valoración) en la prosecución de distintos objetivos (diagnóstico, orientación, selección, cambio) con el fin de llegar a una definición de lo que es o comprende la evaluación psicológica. 2. ALgUnAS DISTInCIOnES TErmInOLógICAS La constante, en todos los ejemplos presentados en el apartado anterior, estriba en que existe una serie de actividades de exploración, medida o análisis de comportamientos o fenómenos psicológicos relativos a un sujeto, o grupo especificado 1 Contrariamente a lo sostenido por Meyer et al. (2001), que sitúan la evaluación psicológica en el contexto clínico (Fernández-Ballesteros, 2002). © Ediciones Pirámide / 29 de sujetos, que se realizan mediante un proceso de indagación y toma de decisiones. La diversidad estriba en que tales actividades se realizan con variados propósitos, en contextos diversos. Así, no tiene nada de extraño que tal pluralidad de actividades, contextos y objetivos psicológicos haya determinado que, a lo largo del tiempo y de los distintos contextos culturales, las acciones evaluativas hayan adoptado diferentes denominaciones. En primer lugar, como señalábamos en otro lugar (Fernández-Ballesteros, 1980, 1992, 2003; véase también Pelechano, 1988), el término psicodiagnóstico tomó carta de naturaleza, tanto en España como en otros contextos europeos, para hacer referencia a las actividades que nos ocupan y sirvió, incluso, como título de las correspondientes materias de los distintos planes de estudio de psicología durante muchos años. Con una clara semántica médica y origen europeo (inicialmente utilizado por Herman Rorschach para designar su conocida técnica de interpretación de manchas de tinta), tal denominación ha perdido, hoy en día, parte de su vigencia. Sin embargo, aunque su ámbito de generalidad haya decrecido, tal término sigue teniendo aplicabilidad cuando el objetivo de evaluación es el del diagnóstico psicopatológico: es decir, el de establecer la clasificación del sujeto en estudio con fines clínicos. Tal objetivo de la evaluación psicológica es coincidente y compartido con otros ámbitos profesionales dado que esos sistemas de clasificación psicopatológica usualmente proceden de una especialidad médica como es la psiquiatría. Sin embargo, la evaluación psicológica —que incluye el diagnóstico psicopatológico— trasciende este ámbito y abarca los distintos contextos de aplicación de la psicología1. Por otra parte, a lo largo de nuestros ejemplos hemos hecho referencia a la aplicación de tests, técnicas o métodos de evaluación que conlleva cualquier actividad evaluativa. Es decir, no cabe duda de que, cualquiera que sea el objetivo o el 30 / Evaluación psicológica. Conceptos, métodos y estudio de casos contexto de evaluación, han de ser aplicados una serie de dispositivos de medida o análisis en los que basar los juicios emitidos. Así, a lo largo de la historia de la evaluación psicológica se ha producido la equiparación de la evaluación psicológica con los procedimientos de recogida de información a través de los cuales se realiza ésta —y, más concretamente, con los tests—, que ha llevado, incluso, a denominar a nuestra disciplina «tests psicológicos». O, en otras palabras, se ha equiparado la evaluación con la pura acción de aplicar tests (o Testing; Anastasi, 1988). Evidentemente, la importancia de las técnicas a utilizar durante el proceso evaluativo es grande; ahora bien, el propio Cronbach (1990) señala cómo evaluación es un término más amplio que el correspondiente a la mera aplicación de tests, ya que connota la integración y valoración de la información recogida. El término «evaluación» comienza a utilizarse en Estados Unidos en los años cuarenta del pasado siglo por la Oficina de Servicios Estratégicos (OSS) con el fin de hacer referencia a la integración de un conjunto de observaciones realizadas en situaciones controladas y otros tests psicológicos cuyo objetivo era seleccionar a personas para determinados puestos (véase, por ejemplo, Cohen, Swerdik y Phillips, 1996). Por eso, hoy en día, también en bibliografía anglosajona, ha ido decayendo el término «tests psicológicos» a la vez que se ha ido consolidando el de «evaluación psicológica». Hasta aquí, brevemente, hemos tratado de diferenciar las tres denominaciones más importantes de la disciplina que va a desarrollarse a lo largo de estas páginas, con lo que, también, estamos justificando el propio título de esta obra. Pero, además, conviene añadir, como punto de partida (como ya lo señalábamos hace años; FernándezBallesteros, 1980, 1992, 2003; véase también Sundberg, 1977; Pelechano, 1988), que en los últimos veinte años se ha producido una ampliación del objeto de la evaluación psicológica. Así, en nuestros tres primeros ejemplos, la evaluación se dirigía, fundamentalmente, al estudio de las características psicológicas del/los sujeto/s en evaluación, mientras que en nuestro cuarto y quinto ejemplo la evaluación se refería a un específico contexto habitado o, incluso, en nuestro quinto ejemplo (y, en parte, en el primero) la evaluación o valoración se dirigía a una concreta intervención. Todo esto, que será ampliado convenientemente en las próximas páginas, plantea la necesidad de distinguir entre dos términos etimológicamente idénticos en español: «evaluación» y «valoración». Pues bien, tratando de diferenciar entre ambos, a través de un estudio empírico (Fernández-Ballesteros, 1985) se puso de relieve que «evaluación» (assessment) hace referencia, fundamentalmente, al examen o exploración de personas, mientras que «valoración» (evaluation) implica juicios de bondad referidos a objetos (puestos de trabajo, tratamientos, programas). Por todo ello, hemos adoptado el término «evaluación psicológica» por cuanto vamos a presentar una visión introductoria sobre el estudio científico, mediante una serie de procedimientos de recogida de información, de las actividades psicológicas de una persona (o grupo especificado de personas) con el fin de alcanzar los objetivos propuestos, que pueden ser de muy variado tipo, desde el diagnóstico psicopatológico al análisis de un cambio de conducta o a la valoración de intervenciones. Hasta aquí, una referencia sincrónica de los elementos definicionales pertinentes a esta disciplina. A continuación vamos a tratar de hacer una breve reseña con el fin de presentar un análisis diacrónico de los hallazgos e hitos históricos que justificarán, desde esta perspectiva, el concepto de la evaluación psicológica que sustenta esta obra. 3. BrEVE rESEñA hISTórICA rECIEnTE Cualquier texto de evaluación psicológica remontará sus orígenes a la antigua China (nada menos que 2.200 años antes de Cristo), o incluso pruebas de sus antecedentes parecen encontrarse en la Biblia y, desde luego, a todo lo largo del pensamiento humano (tanto filosófico como médico) desde Hipócrates hasta Platón o desde San Agustín hasta los empiristas británicos como © Ediciones Pirámide Conceptos y modelos básicos Hume o Locke. Incluso, entre nosotros, Juan Huarte de San Juan (considerado dentro de un grupo de médicos-filósofos y hoy en día patrón de los estudios universitarios de psicología) en pleno Renacimiento escribe su Examen de los Ingenios para las Ciencias (1575), que es reconocido como un primer tratado de cómo evaluar aptitudes que hacen idóneas a ciertas personas para unos determinados estudios. Sin embargo, no vamos a tratar aquí de los antecedentes de nuestra disciplina; el lector interesado deberá consultar textos especializados, como los de Carpintero (1989, 2003), Cohen et al. (1996), Dubois (1970), McReynolds, (1975), Fernández-Ballesteros (1980, 1983). La visión histórica que a continuación vamos a presentar se refiere a la evaluación psicológica como subdisciplina de la psicología que, por supuesto, transcurre históricamente en paralelo a ella y que se inicia a finales del siglo XIX. Por tanto, aunque resulta difícil entresacar sus hitos históricos específicos, vamos a abordar aquellos más relevantes relativos a su constitución y algunos otros desarrollos recientes. 3.1. Constitución 3.1.1. Los «padres» de la evaluación psicológica Tres son los autores que comparten la paternidad de la constitución de la evaluación psicológica: Francis Galton, McKeen Cattell y Alfred Binet. Veamos sus principales aportaciones en lo tocante a nuestra disciplina. Francis Galton (1822-1911) Padre de la psicología diferencial, se centra en el establecimiento de las diferencias individuales tratando de llegar a la descripción y medición de las características humanas. Ya en 1869, con su publicación Classification of Men According to Their Natural Gifts, inicia el estudio psicológico de esas diferencias individuales. Pero fue en 1883 cuando publica su obra más importante, Inquiries © Ediciones Pirámide / 31 into Human Faculty and its Development, punto de partida de lo que más tarde serían los tests mentales. Galton elabora una primera rudimentaria evaluación psicológica: en 1884 crea un «Laboratorio Antropométrico» en el South Kensington Museum de Londres, donde llega a evaluar a unas 9.000 personas en 17 variables medidas mediante distintos tipos de medidas y aparatos entre las que figuraban la estatura, el peso, la capacidad respiratoria, la fuerza muscular, la rapidez de golpeteo, la capacidad auditiva, la agudeza visual, la capacidad sensorial discriminativa y otra serie de evaluaciones sensoriales, perceptivas y motoras (véase Dubois, 1970). Incluso en la International Health Exhibition, celebrada en Londres en 1984, realiza una exhibición de sus tests de laboratorio procedentes del Laboratorio Antropométrico. Con todo ello, no cabe duda de la importancia de Galton para la evaluación psicológica, ya que sintetiza con su obra objetivos evaluativos —científicos y aplicados— y llevando a la vida cotidiana la tecnología psicológica que había permanecido durante años en los laboratorios. Alfred Binet (1857-1911) Una primera aportación de Binet es la ampliación del interés por el estudio de las funciones sensoriales, perceptivas y motoras —objetivos planteados por Galton— a otros ámbitos del funcionamiento psicológico. Así, dice: «no son las sensaciones, son las facultades psíquicas superiores lo que hace falta estudiar, son ellas las que juegan el puesto más importante y la psicología individual deberá prestar mucha más atención a ellas» (Binet y Henri, 1905, p. 416). En la consecución de tales objetivos propone el método de lo que serán los tests mentales; con tales pruebas se pretenderá integrar el estudio de la memoria, las imágenes mentales, la imaginación, la atención, la comprensión, la sugestibilidad, los sentimientos estéticos y morales y hasta la fuerza de voluntad. Una segunda e importante aportación de Binet es la de establecer tres tipos de requisitos que las pruebas de medida de esas facultades psíquicas 32 / Evaluación psicológica. Conceptos, métodos y estudio de casos superiores deberán reunir: que estén formadas por tareas sencillas, que en su aplicación se invierta poco tiempo, que sean independientes del examinador, y que los resultados obtenidos puedan ser contrastados por otros observadores. Es, también, el primer autor que emite un concepto claro de «diagnóstico psicológico». Así, compara tres tipos de métodos complementarios en el estudio diferencial del niño normal y retrasado: el examen médico, basado en exploraciones físicas y fisiológicas, que es realizado por el médico; el examen escolar, que incluye el análisis de los aprendizajes que se desarrollan en la escuela y que ha de realizar el maestro, y el diagnóstico psicológico que requiere medidas para la evaluación de la inteligencia y que él mismo establece con el primer test de medida de la inteligencia (Binet y Simon, 1905). Sus trabajos sobre la medida de la inteligencia fueron llevados a cabo por Binet entre 1903 y 1909 con la colaboración de Simon y fueron inmediatamente recogidos por otros investigadores europeos y americanos como Decroly, Stern, Terman, Goddard y otros muchos, hasta tal punto que en 1914 existían ya 254 estudios publicados referidos a los tests de Binet. El interés por la evaluación de las funciones superiores, la consideración del examen psicológico como independiente y complementaria de la exploración médica y de la evaluación pedagógica y la constitución del primer test de medida de la inteligencia parecen suficientes méritos como para considerar a Binet uno de los padres de la evaluación psicológica. McKeen Cattell (1860-1944) Los objetivos científicos de James McKeen Cattell fueron, también, fundamentalmente diferencialistas. Por eso va a realizar su tesis doctoral sobre el estudio diferencial de los tiempos de reacción, y ello bajo la dirección de Wundt. A él se deben una serie de pruebas psicológicas para la medida de la presión dinamométrica, la velocidad de rotación del brazo, la habilidad para percibir estimulación en la palma de la mano, la memoria para las letras, y otras muchas. En 1890 acuña el término «test mental»; el objetivo de tales pruebas lo estableció en la determinación del rango, exactitud y naturaleza de las facultades psicológicas, así como en la posibilidad de reunir suficiente material como para hallar los factores que regulan el desenvolvimiento de esas facultades, sus conexiones, así como sus perturbaciones. Es también el primer autor que plantea baterías de pruebas para la evaluación psicológica, proponiendo en 1896 dos baterías diferentes, cada una conformada por una serie de tests. Rechaza abiertamente la introspección como método científico y mantiene como objetivo prioritario la utilización de procedimientos de medición objetivos a través del estudio de las ejecuciones de los sujetos en diversas tareas. La propuesta de los tests mentales como instrumentos de medida de determinadas características psicológicas, las técnicas de evaluación de funciones sensoriales, perceptivas y motoras y el énfasis en la utilización de medidas objetivas son las principales aportaciones de McKeen Cattell a la constitución de la evaluación psicológica. 3.1.2. Otros autores relevantes Galton, Binet y McKeen Cattell comparten el mérito en la constitución de nuestra disciplina con otros autores que se presentan sinópticamente a continuación: — Ebbinghaus (1850-1909): estudioso de la memoria y su medida, pionero en evaluación en el laboratorio con pruebas objetivas con la presentación de estímulos mediante aparatos. — Kraepelin (1856-1926): proponente de un sistema comprensivo para clasificar entidades psicopatológicas que serán la base del modelo médico en evaluación. — Pearson (1857-1936) y Spearman (18831945) desarrollan métodos correlacionales que van a permitir la construcción de instrumentos de evaluación y son los pioneros indiscutibles del modelo psicométrico o del rasgo, como luego veremos. © Ediciones Pirámide Conceptos y modelos básicos — Freud y Jung (1875-1947), que publican la Interpretación de los sueños, en 1900, y El método asociativo (1904), respectivamente, en los que hacen un análisis del inconsciente mediante la asociación, inaugurando así el modelo psicoanálitico y/o dinámico de la evaluación. — Thorndike (1874-1949): pionero en estudios sobre aprendizaje y aptitudes y en evaluación educativa. En resumen, la constitución de la evaluación psicológica como una derivación de la psicología científica se produce durante el último cuarto del siglo XIX y la primera década del siglo XX. Durante este período se perfila el concepto de la evaluación psicológica como aquella disciplina dedicada al análisis de la individualidad a través de la evaluación de características sensoriales, perceptivas y motoras, así como de funciones psíquicas superiores, todo ello a través de una serie de técnicas que adoptan el nombre de «tests mentales». 3.2. Diez hitos históricos: desde 1910 hasta 1970 En función del objetivo de concisión que nos hemos propuesto, vamos a presentar los diez desarrollos más importantes de la evaluación psicológica acontecidos desde 1910 hasta 1970 en forma de listado cronológico. Los criterios que nos han guiado en la elección de los hitos históricos reseñados son dos: conceptuales y tecnológicos. Es decir, vamos a referirnos a aquellas fechas, autores y obras que produjeron bien un desarrollo conceptual (en el sentido de introducir nuevas vías de análisis de las cuestiones evaluativas), bien nuevos desarrollos tecnológicos (en el sentido de innovadores procedimientos de evaluación y medida). Por otra parte, interrumpimos nuestra breve historia en los años setenta con el fin de dejar un lapso, de al menos treinta años, hasta nuestro momento presente: — 1914: Woodworth (EE.UU.) construye el primer cuestionario colectivo de medida © Ediciones Pirámide — — — — — — — / 33 del ajuste personal o de la personalidad, el Personal Data Sheet, que se administrará a miles de soldados en la Primera Guerra Mundial. Supone un antecedente del modelo del rasgo. 1918: Los primeros tests colectivos de inteligencia Army Alpha y Army Beta se administran a miles de soldados durante la Primera Gran Guerra. 1921: Herman Rorschach (suizo alemán) publica su Psychodiagnostic, una técnica de medida de la personalidad (normal y patológica) a partir de la interpretación de manchas de tinta, y su examen psicodinámico le hace ser un pionero del modelo dinámico. 1935: Vygotsky (URSS) formula el concepto de zona de desarrollo próximo, antecedente de la evaluación dinámica cognitiva. 1939: David Wechsler (EE.UU.) publica la primera edición de su Escala de Medida de la Inteligencia del Adulto (Wechsler-Bellevue Intelligence Scale), que se convierte en uno de los tests más utilizados. 1947: Halstead (EE.UU.), con su obra Brain and Intelligence, y Luria (URSS), con su Restauración de la función tras una lesión cerebral, sientan las bases de la evaluación neuropsicológica. 1948: La Oficina de Servicios Estratégicos (OSS) de Estados Unidos publica Assessment of men, donde se presenta una primera definición de evaluación como «el arte científico de llegar a conclusiones suficientes con insuficientes datos». Supone un antecedente indiscutible de la evaluación conductual y de los Assessment centers. 1950: Monty B. Shapiro presenta a la reunión anual de la Sociedad Británica de Psicología el trabajo An experimental approach to diagnostic testing, en el que plantea la integración de datos procedentes de tests a través de un proceso experimental inductivo-deductivo que marcará el antecedente del proceso de evaluación. 34 / Evaluación psicológica. Conceptos, métodos y estudio de casos — 1955: Georg A. Kelly (EE.UU.), en su obra The psychology of personal constructs, presenta el REP y sienta las bases de un modelo constructivista de la evaluación. — 1963: Arthur W. Staats (EE.UU.) publica Complex Human Behavior, donde se sientan las bases para una evaluación conductual integradora en la que se fusionan un modelo conductual y uno psicométrico o tradicional de la evaluación psicológica. Hasta aquí los hechos históricos más relevantes en la consolidación de la evaluación psicológica entre 1910 a 1974. Nuestro interés, con esta sucinta enumeración, es el de justificar el propio concepto de la disciplina que determinará el contenido de esta obra. El lector que desee profundizar en estos aspectos históricos deberá consultar las obras especializadas en Carpintero (1989, 2003), Cohen et al. (1996), Dubois (1970), McReynolds (1975), Ollendick et al. (2004) y FernándezBallesteros (1980, 1992). Si hemos hecho una enumeración mínimamente sustantiva, el análisis de todos esos eventos históricos nos permite establecer una serie de conclusiones: — En primer lugar, que gran parte de los sucesos relatados son relevantes no sólo para la evaluación, sino para otras áreas o especialidades de la psicología básica y la psicología diferencial y de la personalidad que han ejercido un papel importante por cuanto van a significar nuestro sustrato metodológico y teórico. — Que los avances de otras disciplinas como la psicopatología o la neuropsicología, así como la aplicación de los principios de la estadística, han supuesto hechos históricos determinantes en la construcción de esta disciplina. — Por último, que las exigencias sociales en el ámbito clínico, escolar y de las organizaciones y el trabajo han promovido la elaboración de técnicas evaluativas que han desembocado en la tecnología de la evaluación psicológica. En segundo lugar, de lo enumerado se deriva que la mayor parte de las realizaciones producidas en el ámbito de la evaluación hasta, por lo menos, los años cincuenta se ha centrado en el desarrollo de una tecnología evaluativa dirigida al análisis y constatación de atributos psicológicos, entidades nosológicas y constructos dinámicos. Esto puede verificarse si se examinan detenidamente las recopilaciones hechas por Buros (1938, 1941, 1949, 1953, 1959, 1965, 1972, 1978, 1987) y Murphy (1992) las series Advances in Psychological Assessment editadas por McReynolds (1969, 1971, 1975a, 1978, 1981 y 1987, 1990, 1992), la Encyclopedia of Psychological Assessment (FernándezBallesteros, 2003) o el Comprehensive Handbook of Psychological Assessment de Hersen (2004). Por otro lado, el análisis de los datos históricos que hemos aportado nos lleva a perfilar distintas aproximaciones teóricas: 1. En primer lugar, la mayor parte de las elaboraciones se han producido en el ámbito de la psicología diferencial como una derivación del objetivo fundamental de este enfoque de la psicología, a saber, el hallazgo de atributos o características psicológicas y psiquiátricas básicas en las que los seres humanos difieren. Desde esta perspectiva, se ha formulado el denominado modelo del atributo o del rasgo, según el cual la evaluación tendría por objeto el hallazgo de las puntuaciones diferenciales que un sujeto obtiene en una serie de características, es decir —su posición relativa con respecto a la que obtienen otros sujetos—, en un determinado rasgo, con el objetivo de describir su conducta o predecirla en diversas situaciones clínicas, laborales o escolares. 2. Pero en nuestro listado histórico también figuran hechos que ligan la evaluación con el psicoanálisis. Son precisamente el psicoanálisis y la psicología dinámica los que desarrollan las técnicas proyectivas que en una época fueron las más importantes técnicas evaluativas. Se crearon (y se siguen desarrollando) con el objetivo básico de © Ediciones Pirámide Conceptos y modelos básicos analizar el mundo inconsciente de los sujetos e, incluso, como técnicas de verificación de los principios psicodinámicos. Todo esto ha dado lugar a un modelo dinámico a través del cual se pretende el análisis de la vida mental inconsciente del sujeto en exploración en base a lo cual se efectuará la explicación de su comportamiento. 3. Los antecedentes de la evaluación que emergen de la medicina han repercutido en la evaluación psicológica. Así, desde la psiquiatría (desde Kraepelin) se han elaborado una serie de sistemas de clasificación del comportamiento anormal en paralelo, o con inspiración, del sistema clasificatorio médico. Tales sistemas han inspirado un modelo médico de importantes repercusiones en el ámbito de la clínica e incluso se han derivado importantes instrumentos para la evaluación de entidades nosológicas. También, como integración de la neurología y la psicología, la evaluación neuropsicológica ha emergido, desde el modelo médico, con perfecta propiedad, puesto que el sustrato biológico de los procesos cognitivos y psicofisiológicos está en las estructuras de los sistemas biológicos (sistema nervioso central y sistema nervioso autónomo) y, en definitiva, distintas patologías comportamentales (como, por ejemplo, la demencia) son enfermedades del sistema nervioso central. 4. También el paradigma conductista y sus derivaciones más recientes han dado lugar al llamado modelo conductual, desde el cual se busca el análisis de las relaciones funcionales existentes entre las respuestas (motoras y/o cognitivas y psicofisiológicas) objeto de estudio y aquellas variables que las mantienen o controlan, incorporando, en sus versiones actuales, no sólo condiciones ambientales, sino también los repertorios básicos de conducta personales, así como las condiciones biológicas del organismo. 5. Los avances de la llamada psicología cognitiva, tanto por la cognitivización del mo© Ediciones Pirámide / 35 delo conductual como por la formación de un claro enfoque cognitivo de la evaluación, establecen la relevancia del estudio de las estructuras, procesos y estrategias cognitivas como por la importancia de los factores cognitivos como determinantes del comportamiento anormal. 6. Finalmente, a lo largo de la historia de la evaluación psicológica, el afán de medir de los evaludores ha chocado con el enfoque fenomenológico y cualitativista de la psicología, contrarios a la consideración nomotética y cuantitativista de la psicología científica. Sin embargo, algunos autores como Georg Kelly han propugnado un tipo de evaluación idiográfica con repercusiones tecnológicas y cuantitativas que en los últimos años ha cobrado cuerpo apareciendo bajo la rúbrica de un modelo constructivista a la evaluación psicológica. Pero antes de pasar a describir estos seis modelos de la evaluación psicológica, deberemos reflexionar sobre cuáles son las características en las que convergen o divergen la evaluación y la psicología. 3.3. Evaluación psicológica y psicología El recorrido histórico efectuado es totalmente coincidente y paralelo al de la psicología y, además, hemos dicho repetidamente que la evaluación psicológica es una subdisciplina de la psicología científica. Eso implica que existen una serie de elementos coincidentes y otros diferenciales entre la psicología y la evaluación; veámos cuáles son esos aspectos: 1. Sabemos que, básicamente, la psicología tiene por objeto el comportamiento humano, en los niveles de complejidad necesarios, lo cual implica el estudio de estructuras o condiciones complejas, como la conciencia o la mente, y como objetivo esencial el hallazgo de los principios que 36 / Evaluación psicológica. Conceptos, métodos y estudio de casos rigen en ese objeto de conocimiento. Por tanto, necesariamente, la evaluación ha de nutrirse de los hallazgos que proceden de las distintas áreas de la psicología, especialmente de la psicología de las diferencias individuales, de la personalidad, cognitiva, del aprendizaje, de la psicofisiología y psiconeurología y de la psicopatología. Así, también, la evaluación psicológica se ha visto influida por algunos desarrollos de la psicología aplicada y sus técnicas, que han sido posibles gracias a los avances metodológicos de la estadística y de psicología experimental y matemática. En resumen, habremos de tener en cuenta que todos esos conocimientos psicológicos son necesarios a la hora de emprender una evaluación psicológica. 2. La diferencia, en lo fundamental, entre psicología y evaluación psicológica estriba en que mientras que la psicología tiene por objeto el estudio de la conducta humana con el fin de llegar a establecer los principios generales que en ella rigen, la evaluación se dirige al estudio científico de un sujeto, y cuando decimos «un sujeto» nos referimos a un sujeto individual, prioritariamente una persona pero, por extensión, también un específico grupo de personas. Evidentemente, la evaluación no tiene como fin el hallazgo de principios generales, puesto que su objeto entraña las actividades o atributos de un sujeto individual, y ya se sabe que no puede hacerse ciencia de lo que es individual. El objetivo de la evaluación es, precisamente, verificar si los principios generales establecidos por la psicología en sus distintas especialidades se dan en ese sujeto individual. Ello implica que la evaluación psicológica se realiza con objetivos aplicados a demanda del sujeto/cliente de descripción, diagnóstico, orientación y/o tratamiento (o cambio de conducta). Estos objetivos aplicados que proceden de la demanda del cliente guían, necesariamente, la evaluación. 3. Además la evaluación psicológica requiere de una tecnología con la que dar cuenta fiable y válida de las unidades de análisis comportamentales. Es por esto por lo que el evaluador está también interesado en la construcción de esa tecnología. A su vez, las técnicas de evaluación suponen una particular área de nuestra disciplina que, además, sirve a la ciencia psicológica básica. En definitiva, la evaluación psicológica también está interesada en la construcción de instrumentos de evaluación. 4. Finalmente, al igual que sucede con la ciencia psicológica, en la evaluación psicológica existen distintos acercamientos, enfoques o modelos que han servido de base a la evaluación y que difieren en una serie de aspectos. Ellos darán lugar a distintas alternativas conceptuales y metodológicas que van a ser estudiadas en los siguientes apartados. En resumen, la evaluación psicológica es una subdisciplina aplicada y tecnológica de la psicología que comparte algunos de sus principales modelos teóricos. 4. mODELOS En EVALUACIón PSICOLógICA Derivados de los desarrollos históricos, seis han sido los principales modelos que han servido de base a la evaluación: atributo, dinámico, médico, conductual, cognitivo y constructivista. Aunque los modelos de la evaluación no son todos los que pueden leerse en la psicología como sistemas psicológicos, sí que están presentes en ellos las características o rasgos distintivos de los principales paradigmas de la psicología tomando como base los estudios de Coan (1968): su formulación teórica, el tipo de variable objeto de estudio, los métodos básicos, las concretas técnicas de evaluación, los niveles de inferencia de las variables que maneja, los objetivos que se persiguen y los ámbitos aplicados. En el cuadro 1.1 se puede observar sintéticamente esos seis modelos. © Ediciones Pirámide © Ediciones Pirámide CUADRO 1.1 Modelos en evaluación psicológica Modelo Formulación Tipo de variable Atributo (1)C = f P (2)Cy = f Cx Rasgos Factores Dimensiones Características Estrategias correlacionales Dinámico C = fP Construcciones intrapsíquicas inconscientes Estructuras Mecanismos Médico (1)C = f P (2)C = f O Conductual C = fA × P C A P Técnicas metódicas Técnicas Inferencia Objetivos Contexto Tests psicométricos: cuestionarios, test de ejecución Nivel I Nivel II Nivel III (2) Descripción Predicción Pseudoexplicación Investigación Educación Organizaciones Clínico y salud Observación clínica Estrategias correlacionales Técnicas proyectivas Nivel II Nivel III Nivel IV Descripción Clasificación Predicción Explicación Clínico y salud Entidades nosológicas Trastornos neurobiológicos Observación Estrategias correlacionales y experimentales Exámenes Test de ejecución Escalas de observación Aparatos Nivel I Nivel II Nivel III (2) Nivel IV (2) Descripción Clasificación Predicción Pronóstico Explicación (2) Rehabilitación (2) Clínico y salud Ambiente Conductas (motoras, fisiológicas y cognitivas) Persona (repertorios básicos de conducta) Observación Estrategias experimentales y correlacionales Técnicas de observación Autoinformes Registros fisiológicos Nivel I Nivel II Nivel III Nivel IV Descripción Predicción Explicación funcional Control Clínico y salud Educación Organizaciones Laboratorio C = fP Representaciones Esquemas Fases del procesamiento Estrategias y procesos cognitivos Estrategias experimentales y correlacionales Ejecuciones (tiempos de reacción, aciertos/errores, RR fisiológicos) ante tareas cognitivas Pensamientos en voz alta Nivel III Nivel IV Descripción Predicción Explicación Control Laboratorio Educación Clínico y salud Constructivista C = fP Conocimiento construido Constructos personales Planes Significados Estrategias observacionales Hermenéutica Narrativa Autobiografía Técnicas subjetivas Documentos personales Nivel I Nivel II Nivel III Nivel IV Descripción (Predicción) (Explicación) (Control) Clínico y salud Conceptos y modelos básicos Cognitivo / 37 38 / Evaluación psicológica. Conceptos, métodos y estudio de casos 4.1. Formulación teórica No cabe duda de que detrás de cada evaluador existe una teoría psicológica. Esto le llevará a discriminar la información que recibe sobre el caso, a formular determinadas hipótesis, a elegir determinadas técnicas de recogida de información y análisis de datos, con todo lo cual obtendrá unos determinados resultados. Es decir, el marco referencial teórico del psicólogo evaluador le guiará hacia una determinada evaluación. Un aspecto esencial de cualquier modelo teórico de la psicología está en los supuestos sobre los determinantes de la conducta. Con ello se está haciendo referencia al factor bipolar hallado por Coan (1968) «endógeno-exógeno». Siguiendo esta polarización, por un lado, la «conducta» (C) o la «respuesta» (R) —es decir, nuestro objeto de estudio— puede considerarse en función de lo endógeno, lo interno, también denominado por los diferentes modelos de la personalidad, inapropiadamente indistinto: «organismo» (O) o «persona» (P). Se entiende por ello bien las condiciones biológicas del individuo, bien las características personales o intrapsíquicas de éste. Por otro lado, se propugna también que la conducta humana puede estar en función de variables exógenas o externas, haciendo con ello referencia al «ambiente» (A) o mundo físico y social. Ello es formulado como: la «situación» (S) y/o el «estímulo» (E). Conviene resaltar que los distintos autores han venido empleando diferentes simbolizaciones para iguales o semejantes conceptos. Así, las abreviaturas P (persona) y O (organismo) han sido ambas utilizadas para hacer referencia a variables psicológicas explicativas internas, mientras que E (estímulo), S (situación) o A (ambiente) lo han sido para hacer referencia a las variables explicativas externas, del mismo modo que se ha empleado C o R indistintamente para denominar la conducta o la respuesta que es explicada. Nosotros, en esta obra, vamos a optar por referirnos a la conducta o la respuesta como «C», vamos a denominar a los determinantes psicológicos internos o variables de la persona como «P» y vamos a dejar la abreviatura «O» tan sólo para hacer referencia a las variables organísmicas biológicas. Por último, vamos a simbolizar con «A» a los determinantes externos o ambientales del comportamiento. CUADRO 1.2 Elementos de la formulación teórica Comportamiento, conducta, respuesta Variables psicológicas del individuo, personales Variables del organismo, biológicas Variables del ambiente, situación, estímulo C P O A Los seis modelos que proponemos en evaluación psicológica se sitúan en uno u otro polo del factor interno-externo. Así, el modelo del atributo supone que la conducta está en función de variables personales u organísmicas, también llamadas intrapsíquicas o genotípicas (C = fP). Tales variables personales no pueden ser evaluadas directamente, sino que es menester tener indicación de ellas por medio de las manifestaciones externas de los sujetos o variables fenotípicas. Por ejemplo, el comportamiento de timidez de un niño (C) puede ser explicado porque el sujeto es introvertido (P). Las conductas de introversión son la manifestación fenotípica de un constructo genotípico que está dentro del individuo. Las relaciones entre unas y otras se establecen por medio de técnicas correlacionales. Como podemos observar, explicar un comportamiento por un constructo personal no es ni más ni menos que una tautología, puesto que el comportamiento que pretende explicarse puede formar parte del conjunto de comportamientos que expresan el constructo. Ahora bien, algunos autores, dentro de este enfoque, pretenden objetivos más modestos, es decir, los de predecir, desde una serie de comportamientos, otros, por lo cual una segunda formulación desde este mismo modelo es la de Cy = fCx, es decir, la conducta que se pretende predecir es una función de otra conducta criterio. Vemos que en lugar de atribuir una relación causal entre el comportamiento y un constructo o variable endógena o personal, lo que se pretende es simplemente predecir un comportamiento desde otro. Por © Ediciones Pirámide Conceptos y modelos básicos ejemplo, si pretendemos predecir el rendimiento académico de un niño (Cy) podemos hacerlo en función de una serie de comportamientos actuales presentes en un test de inteligencia (Cx). Por su parte, desde el modelo dinámico se preconiza que el comportamiento puede ser explicado en función de una serie de construcciones teóricas internas que conforman la estructura de la personalidad y que, junto a una serie de dinamismos internos inconscientes, determinan la conducta, por lo que cualquier manifestación conductual será entendida como una expresión de una condición interna de la persona (C = fP). Desde el modelo médico se trata de conocer la etiqueta o entidad nosológica aplicable a un determinado sujeto que presenta un trastorno conductual con el supuesto de que éste está condicionado por la etiología de la determinada desviación conductual que se explora, lo que, por ende, va a desembocar en el tipo de tratamiento a emplear. En efecto, algunas de las posibles disfunciones conductuales tienen una base biológica o neurológica (como sucede, por ejemplo, en el caso de algunos síndromes que producen deficiencia mental o en la demencia, entre otros) y, por tanto, el modelo médico es perfectamente aceptable. No obstante, generalizar esto a toda la psicopatología es, como se sabe, un enorme error conceptual, dado que los sistemas de clasificación psiquiátricos no tienen una base etiológica o causal. En todo caso, el modelo médico explica la conducta anormal partiendo de factores endógenos o internos, bien biológicos, bien intrapsíquicos. Es decir, la conducta es una función de condiciones biológicas (C = fO) o personales (C = fP). El modelo conductual ha sufrido cambios importantes a lo largo de su historia; comenzó por ser un modelo radicalmente «externalista» (la conducta es una función del estímulo), pero ha ido tornándose en un modelo interactivo en el que la conducta y las variables de la persona y del ambiente interaccionan recíprocamente (Haynes y Heiby, 2003). Así, su formulación actual postula que el comportamiento se explica por transacciones entre la propia conducta y variables de la persona y el ambiente; es decir, de C = f P × A. Por © Ediciones Pirámide / 39 ejemplo, el rendimiento escolar es el producto de factores personales del niño (por ejemplo, que no haya desarrollado hábitos de estudio) en interacción con variables del ambiente (por ejemplo, tener una maestra que no refuerza sus conductas de estudio). Desde el enfoque cognitivo a la evaluación psicológica, podemos hablar, hoy en día, de un modelo en el cual la conducta es explicada a través de una serie de procesos y estructuras mentales internas, por lo que, muy sucintamente, podríamos decir que la conducta es una función del mundo cognitivo de la persona, de su forma de percibir el mundo, de su mente y, por tanto, podríamos formularlo así: C = f P. Por ejemplo, el comportamiento depresivo de un sujeto puede ser explicado por percepciones distorsionadas. Finalmente, el modelo construccionista presenta una visión hermenéutica y fenomenológica de la psicología en la que la construcción de la realidad, el conocimiento narrativo y las teorías de la acción intencional han soportado una forma de hacer evaluación, orientación y terapia. La base de este enfoque es un postulado ontológico de que no podemos tener acceso a la realidad y, en segundo lugar, que el individuo crea y construye activamente su propia realidad. Por tanto, lo importante es evaluar las construcciones que utiliza para describir el mundo, cuál es el significado que el sujeto asigna a sí mismo, a las otras personas y objetos de su realidad, etc., y, por tanto, supone una versión internalista en la que, finalmente, la C = fP. Conviene resaltar que en todos los modelos comentados el énfasis en lo endógeno-exógeno se refiere, fundamentalmente, al peso de uno u otro en la explicación de la conducta actual. Es decir, a la hora del análisis de la conducta actual del sujeto se echa mano bien de condiciones internas inferidas, bien de condiciones externas observadas; los autores hacen escaso énfasis en la génesis histórica de las variables objeto de estudio. En mayor o menor medida, los modelos que hemos situado en el polo endógeno aceptan que las variables intrapsíquicas explicativas de la conducta han sido gestadas en la interacción del organismo 40 / Evaluación psicológica. Conceptos, métodos y estudio de casos biológico y el ambiente. En definitiva, nuestros modelos endógenos están planteando la evaluación como el estudio de determinadas variables intrapsíquicas personales o biológicas sin negar —desde luego— que éstas, en el momento de ser evaluadas, sean —en mayor o menor medida— producto histórico tanto del organismo en un sentido biológico como del ambiente y su interacción. 4.2. Clases de variables Como ya hemos dicho en el apartado anterior, una derivación fundamental de la formulación teórica estriba en la clase de variable objeto de análisis en cada uno de los modelos. En realidad, cada uno de los modelos propone un conjunto de variables relevantes. Así, desde el modelo del atributo se analizan variables intrapsíquicas obtenidas mediante procedimientos empíricos, factoriales o racionales, las cuales se supone están presentes en todos los sujetos (extraversión, dependencia, inteligencia, etc.). Mediante el análisis de estos rasgos, dimensiones o factores se pretende explicar o predecir el comportamiento del sujeto. Por otra parte, desde el enfoque dinámico se emprende el estudio de la estructura de la personalidad desde una perspectiva molar en función de los distintos conceptos psicodinámicos, tales como la estructura del yo, los mecanismos de defensa, entre otros, que forman parte de la teoría psicoanalítica o de los dinamismos propuestos en el que los procesos inconscientes son relevantes. Por su parte, el modelo médico implica el estudio en cada sujeto a partir de sus manifestaciones psicopatológicas y cómo puede ser clasificado según el cumplimiento de una serie de criterios que lo sitúan en una entidad nosológica considerada como «enfermedad mental» (esquizofrenia, trastorno narcisista de la personalidad, demencia, etc.) y/o en qué medida presenta alteraciones biológicas que subyacen a dichos trastornos (la enfermedad de Alzheimer, el síndrome de Down, etc.). Desde el modelo conductual se emprende el estudio científico del sujeto teniendo en cuenta sus comportamientos motores, cognitivos y psicofisiológicos, variables ambientales en interacción con repertorios básicos de conducta que, se postula, han sido instaurados a través de la historia de aprendizaje del individuo. El modelo cognitivo enfatiza en la explicación del comportamiento el estudio de una serie de estructuras internas, mentales (como la representación, los almacenes de memoria, las distintas fases en el procesamiento de la información, etc.), con especial hincapié en los procesos o estrategias cognitivas que median entre los estímulos y las respuestas o ejecuciones del sujeto. Finalmente, desde el modelo constructivista se postulan un conjunto de variables internas, como el significado que el sujeto asigna a la realidad, su forma de construir el mundo, sus planes futuros, etc. Vemos que cada modelo está asociado con tres tipos de factores de los hallados por Coan: el factor molar-molecular, el mentalista-objetivo y la dimensión más relevante para nuestra disciplina que ha derivado en una importante polémica: el idiográfico-nomotético. A este último punto volveremos más tarde. 4.3. métodos básicos y técnicas De entrada, conviene realizar una serie de precisiones conceptuales. Como señalan los autores, una variable nos dice poco si no se precisa de qué manera se da cuenta de ella. Así, el método de evaluación empleado es la forma de operacionalización de las variables objeto de estudio y, por tanto, es de enorme importancia a la hora de enjuiciar un determinado modelo. Además, debemos precisar qué diferencias existen entre «método» y «técnicas». Se entiende por método aquella vía o conjunto de procedimientos para llegar a la «verdad» epistémica. No es el momento ahora de pararnos a especificar los distintos acercamientos metodológicos en las ciencias naturales y sociales, que, por otra parte, el lector debe conocer por otras disciplinas de la psicología. Lo más importante es señalar que el método hipotético-deductivo es considerado como el método científico de © Ediciones Pirámide Conceptos y modelos básicos la psicología. Como señalan Marx y Hillix (1967), supone «el proceso por el cual toda ciencia avanza» (p. 19). Ya que consideramos la evaluación como una subdisciplina de la psicología científica, esto va a determinar, como veremos más adelante, la exclusión de alguno de los modelos reseñados. Si bien es cierto que existen modelos en los que la investigación básica ha sido, inicialmente, inductivista (así, tanto el modelo del atributo como el modelo conductista), a la hora de la aplicación de todo este conocimiento el psicólogo está manejando una determinada teoría y, por tanto, está utilizando —implícita o explícitamente— el método hipotético-deductivo. Aclarado todo esto, conviene ahora diferenciar entre «método» y «técnicas metódicas». Mientras que el método en la ciencia es prioritariamente uno, las técnicas metódicas son varias y suponen aquellas estrategias a través de las cuales se viabiliza el método, o, mejor dicho, una de sus fases, concretamente la de verificación de las hipótesis formuladas. Dos son las técnicas metódicas o métodos (en plural) más utilizados en psicología y, por ende, en evaluación: el método observacional y correlacional y el experimental. Mientras que los métodos correlacionales tratan de detectar asociaciones entre variables que se encuentran en la situación natural, los métodos experimentales pretenden descubrir los efectos de una variable (llamada independiente) sobre otra (llamada dependiente) en la bien controlada situación del laboratorio. Hay que resaltar que tan científico es uno como otro método; lo importante es tener en cuenta que cualquier estrategia de investigación puede ser integrada en uno de ambos. Ya que todo esto es desarrollado en otras disciplinas metodológicas básicas, no vamos a abundar más en ello. Por último, quisiéramos recordar que las técnicas, como luego ampliaremos, son aquellos procedimientos que permiten la obtención concreta de información y datos. Ahora bien, una errónea consideración ha llevado a suponer que todas las técnicas utilizadas en evaluación son tests psicológicos. Ésta es la razón por la que conviene efectuar una última distinción, esta vez entre técnicas y tests. Cuando hablamos de técnicas nos referi© Ediciones Pirámide / 41 mos, en palabras de Pelechano (1976), a «aquellas pruebas o procedimientos utilizados tanto en el laboratorio como en el mundo social para la realización de un diagnóstico psicológico [mientras que test implica] un instrumento sistemático y tipificado que compara la conducta de dos o más personas» (p. 52). En definitiva, los tests son técnicas o instrumentos de evaluación tipificados y estadrizados (véase capítulo 4). Partiendo de estos conceptos diferenciales, analicemos los modelos propuestos. En primer lugar, hay que señalar que tanto el modelo del atributo como el médico, el conductual o el cognitivo utilizan explícita o implícitamente el método hipotético-deductivo. La diferencia, en lo fundamental, reside en que mientras que los dos primeros lo hacen en su vertiente correlacional, el modelo médico conductual y el cognitivo utilizan también la experimentación como método de indagación básico. Por otro lado, el modelo del atributo emplea fundamentalmente tests y técnicas en la recogida de información para la contrastación de las hipótesis de partida. Es decir, emplea procedimientos tipificados construidos mediante criterios racionales, empíricos o factoriales en la medición de rasgos, factores o dimensiones. A través de la mayoría de tales pruebas se pretende conocer la posición relativa que el sujeto tiene, en el atributo a examen, con referencia a un grupo normativo. Con respecto al modelo dinámico, como se sabe, ha basado sus supuestos teóricos en el método clínico a partir de observaciones cualitativas. Sin embargo, más recientemente, han sido elaboradas técnicas de evaluación con el fin de obtener procedimientos independientes en la verificación de las hipótesis psicodinámicas. Así que el modelo dinámico y/o psicoanalítico ha dado lugar a las muy conocidas técnicas proyectivas. Por lo que se refiere al modelo médico, éste se basa en la clasificación de un sujeto en una categoría diagnóstica procedente de un sistema clasificatorio. Tales sistemas son categoriales (no dimensionales) en el sentido de que cuando una persona cumple una serie de criterios del sistema clasificatorio de referencia, entonces es incluido 42 / Evaluación psicológica. Conceptos, métodos y estudio de casos en esa determinada categoría. Sin embargo, el modelo médico también cuenta con técnicas de evaluación (generalmente escalas de apreciación), técnicas que pueden haber sido estandarizadas y, por tanto, dar lugar a puntuaciones diferenciales y dimensionales. Por ejemplo, el diagnóstico de «depresión mayor» es asignado a un sujeto si cumple una serie de características. También, el diagnóstico puede completarse evaluando al sujeto con escalas de evaluación de la depresión que nos permiten comparar a un sujeto en la dimensión de depresión con otros sujetos. Por su parte, desde el modelo conductual se trata de realizar un análisis funcional entre variables ambientales y la conducta por la que se consulta mediante técnicas de observación, de autoinforme o instrumentos psicofisiológicos, así como también la relación entre esa conducta y otras variables que desde la persona pueden estar explicando esa conducta objeto de estudio. La verificación de tal análisis se obtiene mediante la comprobación de los cambios producidos en la/s conducta/s objeto de estudio después de aplicar un determinado tratamiento a través del cual se pretende manipular las variables relevantes funcionalmente relacionadas con esas conductas, bien ambientales bien personales. La aproximación cognitiva utiliza muy diversas técnicas de indagación, como los autoinformes que el sujeto emite cuando está realizando tareas cognitivas (por ejemplo, pensamientos en voz alta), que, a su vez, dan pie a un registro de los aciertos, errores, tiempos de latencia o, incluso, las respuestas fisiológicas que se producen en el desempeño de dichas tareas. Finalmente, el modelo construccionista, en un principio, rechazó la utilización del método científico (propio del positivismo lógico) y se propuso una aproximación comprehensivista y fenomenológica en la indagación del concepto de sí mismo y otros conceptos idiográficos de un alto nivel de inferencia. Sin embargo, también en este caso en los últimos años han sido elaborados métodos cualitativos (con una relativa tipificación) que como la autobiografía, los tests de evaluación de constructos personales, la utilización de docu- mentos personales (por ejemplo, diarios) en la indagación del significado o de planes del futuro u otros métodos subjetivos han dado lugar a una importante tecnología evaluativa (Freixas, 2003). Vemos pues que de entre distintas estrategias y técnicas utilizadas por nuestros modelos se plantea una importante alternativa, ya hallada empíricamente por Coan, entre lo cuantitativo y lo cualitativo. A ello nos referimos en el siguiente apartado. 4.4. niveles de inferencia El modelo teórico del que se parta no sólo va a influir en las técnicas a utilizar en la recogida de información sobre el sujeto, sino también en el nivel de inferencia que se efectúe sobre las conductas registradas, y esto sea cual fuere el instrumento elegido. A partir de los trabajos de Sundberg, Tyler y Taplin (1973) pueden establecerse cuatro niveles de inferencia en la consideración de las respuestas que un sujeto emite ante cualquier dispositivo de evaluación: 1. Desde un primer nivel de inferencia (nivel l), la conducta del sujeto es entendida como muestra del comportamiento que se pretende evaluar. Si adoptamos este nivel, los tests servirían para recoger una muestra del funcionamiento conductual habitual del sujeto. Se entiende que lo que nos debe preocupar es que sea una muestra representativa de lo que ocurre en la vida cotidiana (en las áreas evaluadas). Como vemos, esta consideración implica un mínimo nivel de inferencia. Así, por ejemplo, si a lo largo de 15 días se registra que un niño moja la cama todas las noches, concluiremos que ésa es la ocurrencia habitual de esa conducta y estaremos utilizando un nivel de inferencia I. 2. Un segundo nivel de inferencia (nivel II) es aquel que se apoya en un supuesto de relación o correlato por el cual lo evaluado pu© Ediciones Pirámide Conceptos y modelos básicos diera asociarse con otras conductas. Así, si un cliente, con retardo psicomotor, informa estar triste, comer escasamente, sentirse triste, tener dificultades para la atención y concentración, pensar que la vida no merece la pena, el psicólogo probablemente inferirá que está deprimido; el término «depresión» es usado para denominar un conjunto de conductas que se ven asociadas y que suponen, todas ellas, un correlato de las conductas problema. 3. Pero en función de ese mismo supuesto de relación, un paso más y, por tanto, un mayor nivel de inferencia (nivel III) lo obtendremos si ese conjunto de conductas que covarían y a las que llamamos depresión se convierten en una entidad explicativa; es decir, la persona tiene retardo psicomotor porque está deprimida. En otras palabras, el retardo psicomotor se convierte en un signo de la existencia de un constructo hipotético o estado interno que implica una etiología o condición causal de la respuesta evaluada, con base intrapsíquica. Esta consideración implica un tercer nivel de inferencia, ya que se interpreta que las conductas del sujeto son la expresión de la existencia de un atributo subyacente en él. 4. Por último, aún puede darse un cuarto nivel de inferencia (nivel IV), que difiere del nivel III en la integración del concepto inferido en una completa teoría. Así, como señalan Bernstein y Nietzel (1980), cuando un sujeto comete un intento de suicidio y de ello se infiere que «los impulsos tanáticos los ha dirigido contra sí mismo y que con ello refleja una serie de conflictos intrapsíquicos», etc., estamos realizando una explicación especulativa sobre la conducta del sujeto a partir de una teoría concreta del psiquismo que aplicamos al sujeto y sus conductas. Analizando el nivel de inferencia de nuestros seis modelos, podemos comenzar diciendo que todos los modelos utilizan, en un primer momen© Ediciones Pirámide / 43 to, un nivel tipo I. Es decir, si tras observar sistemáticamente los comportamientos de un sujeto describimos que éste saca malas notas, se siente triste, desobedece en clase, estamos utilizando un nivel de inferencia tipo I. Así, también, en todos los modelos existen inferencias tipo II en el momento en el que agrupamos comportamientos en clases de comportamientos. Sin embargo, tanto el modelo del atributo como el médico, dinámico y cognitivo utilizarán niveles de inferencia III cuando traten de explicar el comportamiento del sujeto a través de un constructo; por ejemplo, decimos que se siente triste porque padece una depresión mayor, o que es tímido porque es introvertido, o que su comportamiento paranoide se debe a que utiliza mecanismos de defensa proyectivos. Desde el modelo conductual, las inferencias que el evaluador realiza a partir de las respuestas de los sujetos pueden ser también de nivel III cuando se hipotetiza que un comportamiento problemático se debe a una variable personal; por ejemplo que la depresión mayor que presenta una persona se debe a que ésta tiene un déficit en habilidades sociales; la cuestión más importante es que desde el modelo conductual se mantendrá ese supuesto de relación funcional hasta que se contraste mediante métodos experimentales. En otras palabras, hasta que se hayan manipulado las habilidades sociales y se haya verificado que tal manipulación ha repercutido disminuyendo o eliminando la conducta depresiva del sujeto. Desde el modelo dinámico se suelen utilizar muy altos niveles de inferencia dado que la elaboración teórica de psicoanálisis es muy elevada y no sólo se suele considerar la conducta como signo de la existencia de variables subyacentes (nivel III), sino que se enmarca ésta dentro de una teoría abarcativa psicoanalítica (nivel IV). Finalmente, ya hemos dicho que el modelo constructivista considera de forma descriptiva el comportamiento del sujeto, y, en ese caso, los niveles de inferencia son bajos. Sin embargo, el constructivismo, al enfatizar la importancia de los constructos idiográficos, suele mantener altos niveles de molaridad e inferencia que utilizan los propios sujetos (Neimeyer y Vevitt, 2003; Neimeyer, 1993). 44 / Evaluación psicológica. Conceptos, métodos y estudio de casos En resumen, los niveles de inferencia del comportamiento evaluado tienen que ver con las distintas teorías pero, sobre todo, con la propia consideración del psicólogo evaluador y en cómo interprete éste el comportamiento del sujeto evaluado. Así, también, cuando los objetivos de una evaluación son de cambio, son necesarias hipótesis explicativas (modelos teóricos) que van a dar lugar a un tipo de tratamiento concreto (véase capítulo 3). Las hipótesis que subyacen en los procesos de cambio necesariamente se basan en teorías, y, por tanto, en esos momentos experimentales del proceso de evaluación los niveles de inferencia suelen ser altos. Eso ocurre, por ejemplo, cuando se pretende manipular las habilidades sociales como variable funcionalmente relacionada con la conducta problema depresiva. Sin embargo, la cuestión esencial estriba en que las relaciones explicativas entre la conducta problema y las variables explicativas van a ser contrastadas mediante métodos tanto correlacionales como experimentales. 4.5. Objetivos Las operaciones básicas que cualquier científico puede realizar son las de describir los fenómenos objeto de estudio, clasificarlos, realizar predicciones sobre ellos, explicarlos y controlarlos. Pero la evaluación psicológica —como disciplina aplicada— se lleva a cabo por unas demandas concretas formuladas bien por el sujeto, bien por el cliente que lo envía con algún propósito (los padres de un niño, los responsables del colegio, el empresario que desea hacer la selección, el juez que desea tener un peritaje). Estas demandas, en términos generales, pueden ser las de diagnóstico, orientación, selección y modificación o cambio. Está claro que operaciones básicas y demandas aplicadas se interconectan de tal forma que el diagnóstico exige operaciones de descripción y clasificación, la orientación y selección, de operaciones de predicción, y las de modificación y cambio se basan en el control y/o explicación de la conducta. Los objetivos de la evaluación —siempre dependiendo de las demandas y las operaciones exigidas— guiarán la evaluación psicológica a través del proceso, como más tarde veremos. Los distintos modelos enunciados ¿qué objetivos persiguen prioritariamente? El modelo del atributo, menos ambicioso, pretende, mediante las respuestas ante una serie de tests (de los cuales se deriva una puntuación relativa en un determinado atributo), predecir la conducta futura del sujeto en ámbitos distintos de los testados. Así, unas determinadas puntuaciones en unos tests motivacionales, de personalidad y aptitudinales permitirán seleccionar u orientar a un sujeto para un puesto de trabajo o hacia una determinada profesión. Éste es el caso de los psicólogos encuadrados dentro de este modelo que utilizan la formulación Cy = fCx, a la que nos referíamos antes. Por otra parte, también desde esta misma perspectiva existen psicólogos que confieren a los rasgos un rol explicativo con la suposición de que éstos implican tendencias intrapsíquicas de acción (para los cuales C = fP). Así, podría decirse que una persona presenta una determinada conducta perturbada porque es un neurótico, realizando así una pseudoexplicación del comportamiento. Por su parte, desde el modelo dinámico se pretenden todos los objetivos descritos con base —ya lo hemos visto más arriba— en la vida mental inconsciente. Así, según las respuestas (generalmente verbales; véase capítulo 9) a las técnicas proyectivas puede llegarse a la descripción, clasificación y predicción del comportamiento del sujeto, además de conseguir la explicación del comportamiento a través de atribuciones sobre la vida mental inconsciente y una serie de construcciones intrapsíquicas. El control se ejercería mediante las técnicas psicoanalíticas y dinámicas de tratamiento elaboradas desde este enfoque. En el caso del modelo médico, la explicación de la conducta anormal, al menos teóricamente, daría lugar a un diagnóstico en el sentido de que éste ha de estar basado en una etiología específica, ayudando éste al pronóstico (o predicción) y a su control. Ahora bien, dado que los sistemas de clasificación no tienen una base etiológica, el objetivo más plausible sería el de la clasificación del sujeto en estudio. Sin embargo, la severidad de © Ediciones Pirámide Conceptos y modelos básicos una determinada patología sí podría llevar implícitos la predicción y pronóstico del caso. En ningún caso el modelo médico (psiquiátrico) podría llegar a la explicación y el control de la conducta a menos que las entidades nosológicas adquirieran una base explicativa, lo cual no parece probable por el momento. Es tan sólo desde un modelo médico neuropsicológico cuando la evaluación del comportamiento anormal puede ser tomada como la expresión de una lesión o disfunción del SNC, y, con ello, puede llevar implícitas su explicación y rehabilitación. Desde el enfoque conductual de la evaluación se pretenden todos los objetivos enunciados referidos a la descripción, predicción, explicación y control del comportamiento del sujeto en examen. Ello es factible dado que los principios del aprendizaje basan la determinación ambiental del comportamiento tanto en la génesis de los trastornos comportamentales como en la generación de hábitos, repertorios básicos de conducta y otras condiciones que pueden mantener y controlar la conducta, así como en su interacción. Desde este mismo ámbito, el enfoque conductal es capaz de establecer cuáles son las mejores técnicas de manipulación para el control del comportamiento. Desde el modelo cognitivo se trata de describir el comportamiento, predecir qué puede ocurrir en el futuro y explicarlo en función de los ya mencionados constructos cognitivos. Además, en contextos clínicos se trata de manipular aquellas variables cognitivas que se supone son responsables del comportamiento por el que se consulta, y, en los últimos años, se han elaborado técnicas de manipulación para proceder a su control. Finalmente, desde el modelo constructivista se rompen las operaciones de la psicología científica e incluso de la consideración del concepto de verdad o el de realidad puesto que se niega la posibilidad de acceder al mundo objetivo. El modelo constructivista, ya se ha dicho, pretende exclusivamente el establecimiento de los constructos del propio sujeto, del significado que el sí mismo, los otros o el atribuido mundo real tienen para el sujeto. Sin embargo, aunque el modelo constructivista se mueva a nieveles descriptivos, ello no im© Ediciones Pirámide / 45 plica que, desde la óptica científica, no se pretenda desde este modelo predecir o clasificar el comportamiento, dado que existe una ayuda terapéutica (y, por tanto, control) de los comportamientos alterados y también existe consejo psicológico, por lo que necesariamente existe predicción. 4.6. Ámbitos de aplicación Nuestros modelos difieren, por último, en el ámbito de la psicología aplicada en donde se sitúan. La evaluación psicológica, ya se ha dicho, está fuertemente asociada a las distintas aplicaciones de la psicología: clínica, educativa, organizacional y del trabajo como las más importantes. No tiene nada de particular que algunos modelos hayan surgido, fundamentalmente, con el propósito de ser aplicados en una área concreta y que en esa área concreta hayan sido elaborados a la hora de responder a preguntas concretas. Lógicamente, esto está a su vez relacionado con la utilización del modelo en cuanto a sus posibilidades de descripción, clasificación, predicción y/o explicación y control. El modelo del atributo se ha desarrollado desde la psicología diferencial y de la personalidad y, en evaluación, fundamentalmente, es relevante ante demandas de orientación y de selección en el ámbito de las organizaciones, aunque también cuando se trata de realizar una predicción clínica. Por el contrario, el modelo médico —que, en parte, es una derivación clínica y de la salud del modelo del atributo— se ha dedicado casi totalmente a este ámbito. Asimismo, el modelo dinámico, por basarse en el estudio de la conducta anormal, actúa, fundamentalmente, en situaciones clínicas y de la salud. El modelo conductual ha sido aplicado en todo tipo de ámbitos, a saber, el escolar, de la organización, el clínico y el laboratorio, aunque sus más importantes hallazgos se sitúan en el contexto clínico y de la salud. La aproximación cognitiva se ha desarrollado, fundamentalmente, en situaciones de laboratorio y, de entre las aplicadas, en ámbitos clínicos y educativos e instruccionales en los que, no cabe 46 / Evaluación psicológica. Conceptos, métodos y estudio de casos duda, el estudio de los sucesos mentales puede tener gran interés con vistas a la orientación y al cambio (véase la parte segunda). Finalmente, el modelo constructivista emerge de situaciones eminentemente clínicas en que la orientación y la terapia tienen importancia prioritaria. Por último, cabe señalar que, a pesar de que hemos intentado realizar caracterizaciones de los distintos modelos, no existen diferenciaciones tajantes: cada uno de estos ámbitos de aplicación ha conllevado prioritariamente un acercamiento aplicado que, como decíamos antes, se relaciona con los objetivos científicos ya mencionados. Así, el ámbito escolar requiere esencialmente de orientación; el ámbito del trabajo o de las organizaciones, de selección, y la situación clínica exige, prioritariamente, el tratamiento. No obstante, en un determinado contexto aplicado se utilizan, de hecho, distintos modelos de evaluación y, desde luego, en todos ellos se aplican diferentes técnicas procedentes de todos ellos (veáse Hersen, 2003). 5. ALTErnATIVAS POLémICAS Tres son las alternativas polémicas más importantes que se han desarrollado en nuestra disciplina derivadas de las peculiaridades que, como hemos comentado, han surgido de los distintos modelos de la evaluación psicológica: lo idiográfico versus lo nomotético, lo cualitativo versus lo cuantitativo y la evaluación tradicional versus la conductual. Vamos ahora a plantear una breve síntesis de cada una de estas polarizaciones. 5.1. Lo idiográfico versus lo nomotético Según el filósofo Windelband, las ciencias pueden ser divididas en dos grandes grupos: las nomotéticas y las idiográficas. Mientras que las segundas se dedican al estudio de los fenómenos individuales, las primeras tienen como objetivo el hallazgo de los principios generales aplicables a los fenómenos objeto de estudio. Tal división, así como el encuadre indebido de la psicología entre las ciencias idiográficas, provocó múltiples discusiones. Sin embargo, la psicología científica es, inequívocamente, una disciplina cuyo objetivo es la búsqueda de los principios generales aplicables a la conducta humana relativos a la percepción, el aprendizaje o la memoria, y, por tanto, es una ciencia claramente nomotética. Ya que la evaluación psicológica ha sido definida como una subdisciplina de la psicología, por fuerza ha de basarse en los principios de la ciencia de la que surge y a la que sirve. Es más, su objetivo consiste, precisamente, en el análisis de cómo se cumplen y se organizan los principios y procesos psicológicos básicos en un sujeto específico. Ahora bien, esto quiere decir que su objeto fundamental reside en el caso concreto o, en otros términos, en un ente individual. Si tomáramos el término idiográfico, en su sentido etimológico, como aquello referido a lo individual o particular, y no en su concepción filosófica, la evaluación psicológica podría ser calificada de disciplina idiográfica. Por eso, resulta perfectamente compatible una evaluación idiográfica —en la que se analiza, en cada sujeto, los aspectos específicos relevantes— con una ciencia nomotética de la psicología. En otras palabras, los principios generales de la psicología son los que nos permiten formular hipótesis en relación con nuestro caso particular, pero nuestro objetivo práctico está en la evaluación de ese sujeto concreto. En la figura 1.1 podemos observar sintéticamente las distintas fuentes de variación en esta polémica. En primer lugar, nuestro objeto de conocimiento es un sujeto individual o un específico grupo de sujetos y, por tanto, es idiográfico. En segundo lugar, nuestra base de conocimiento es nomotética, como así lo es la ciencia psicológica. Por lo que se refiere a las variables y constructos que utilizamos, éstos serán seleccionados desde un banco de constructos psicológicos del que se escogerán aquellos que son más relevantes para el caso individual; por tanto, son elegidos idiográficamente. Pero también podrán seleccionarse en un concreto caso constructos que sean relevantes sólo para ese caso. Finalmente, por lo que se re© Ediciones Pirámide Conceptos y modelos básicos Objeto de conocimiento Base de conocimiento científico Constructos específicos Técnicas y tests Sujeto o grupo de sujetos Ciencia psicológica Según caso y la teoría Normativos y específicos Idiográfico Nomotética Nomotéticos elegidos idiográficamente o idiográficos Nomotéticos e idiográficos / 47 Figura 1.1.—Fuentes de variación en la polémica idiográfico versus nomotética. fiere a las técnicas, tests o instrumentos utilizados, éstos serán normativos (como, por ejemplo, las escalas de Wechsler para la medida de la inteligencia) o bien específicos (como, por ejemplo, un autorregisto o una entrevista). En resumen, con el fin de realizar una síntesis de esta polémica, reproducimos lo dicho en otro lugar al concluir lo siguiente (véase FernándezBallesteros, 1980): 1. Los objetivos de la evaluación son, fundamentalmente, idiográficos, en el sentido de que éstos se centran en el estudio científico del comportamiento de un sujeto. 2. Nuestra disciplina se basa en los hallazgos de una disciplina nomotética y, por tanto, en los resultados establecidos en diseños de grupo para los distintos hechos psicológicos. 3. Las variables son seleccionadas en cada caso en función de los objetivos y de la demanda, por lo que existe una selección idiográfica de entre un conjunto de conceptos o, incluso, pueden ser totalmente idiográficos. 4. Los métodos utilizados en evaluación son tanto nomotéticos como idiográficos y se ajustan a cada una de las variables que han de ser estudiadas. No obstante, esos métodos han de presentar unas determinadas cualidades que proceden de la metodología psicológica nomotética. © Ediciones Pirámide 5.2. Lo cualitativo versus lo cuantitativo Tanto el análisis de los métodos básicos como el de las técnicas utilizadas en los modelos estudiados conducen a una dicotomía —hallada también por Coan (1967) en el análisis de la teoría psicológica— entre lo que podríamos llamar cualitativo frente a lo cuantitativo. Con respecto a la evaluación desde el enfoque cualitativo (representado esencialmente por los modelos dinámico y constructivista), se trata de realizar un análisis global y comprehensivo del sujeto en examen, mientras que desde la aproximación cuantitativa —representado esencialmente por el modelo del rasgo— se exige la medición de las respuestas del sujeto ante situaciones estandarizadas, así como que su elaboración sea mecánica. Las características del enfoque cualitativo están fundamentalmente en relación con el énfasis en la libertad del juicio profesional y en las combinaciones o elaboraciones que éste utiliza. Así, se propugna libertad en la elección de las situaciones de examen, en la forma de recopilar los datos, en el procesamiento de éstos, en la asignación de pesos a los distintos indicadores y en la comunicación de resultados. Por el contrario, en el enfoque cuantitativo se plantea una serie de normas, a saber: utilización de muestras de conducta semejantes para todos los sujetos, uso de tests estandarizados e instrumentos tipificados, recogida de información igual para todos los sujetos, ponderación y elaboración mecánica de datos y proce- 48 / Evaluación psicológica. Conceptos, métodos y estudio de casos dimientos uniformes de comunicación de resultados. Sin embargo, estos elementos esenciales en la polémica cualitativo-cuantitativo no agotan la realidad. En la figura 1.2 presentamos las distintas fuentes de variación de esta polémica: tipo de evento que se evalúe, tipo de técnica o instrumento con el que se observe, tipo de manipulación que se realice con el dato obtenido y tipo de interpretación que de él se realice. Existen cuatro argumentos fundamentales para que abandonemos la polémica en cuestión: 1. Lo artificial de la misma, por cuanto la mayor parte de los psicólogos que realizan una evaluación utilizan datos cualitativos y cuantitativos. Así, como hemos dicho, el tipo de evento a examen puede ser máximamente cualitativo, subjetivo o interno (como, por ejemplo, una atribución, un sentimiento o una imagen) u objetivo o externo (por ejemplo, un evento manifiesto de cualquier tipo). Así, también el procedimiento de recogida de información puede ser altamente cualitativo (como, por ejemplo, un diario u otro documento personal) o cuantitativo (como, por ejemplo, una puntuación numérica procedente de un registro mecánico). Por otra parte, el tipo de manipulación al que el evaluador somete los datos recogidos puede ser, fundamentalmente, cualitativo (como ocurre en un Tipo de evento análisis de contenido) o cuantitativo (cuando se procesen estadísticamente los datos). Finalmente, de los resultados obtenidos el evaluador puede realizar combinaciones cualitativas de un alto nivel de abstracción o bien limitarse estrictamente a los datos cuantitativos. Las combinaciones de estas cuatro fuentes de variación, con sus distintos grados, pueden producir innumerables alternativas, lo cual diluye la propia polaridad de la doble alternativa. 2. El subjetivismo a todo lo largo de la exploración (tope máximo del polo cualitativo) tan sólo lo podemos encontrar en el enfoque constructivista y, como señala Neimeyer (1993) los instrumentos elaborados desde este enfoque pueden verse completados con los del enfoque «objetivo». 3. Las dificultades que entraña la utilización de tablas actuariales hacen que los niveles de exigencia de las predicciones estadísticas sean prácticamente inalcanzables. Sería exigible que estas tablas presentasen conductas claramente descritas procedentes de los mismos instrumentos, establecidas mediante estudios de validación cruzada y en poblaciones correspondientes al caso que nos ocupe. Desde luego, como señala Silva (1982), todas estas garantías no se encuentran presentes en las tablas estadísticas al uso. Tipo de procedimiento Tipo de manipulación Tipo de interpretación Subjetivo/interno Ejemplo: un sentimento Cualitativo Ejemplo: un diario Subjetiva Ejemplo: análisis contenido Alto nivel inferencia Objetivo/externo Ejemplo: fumar Cuantitativo Ejemplo: registro mecánico Mecánica Ejemplo: tablas actuariales Bajo nivel inferencia Subjetivo Cualitativo Subjetiva Alto Altamente cualitativo Objetivo Cuantitativo Mecánica Bajo Altamente cuantitativo Figura 1.2.—Fuentes de variación en la polémica cualitativo versus cuantitativo. © Ediciones Pirámide Conceptos y modelos básicos 4. Los avances metodológicos realizados en torno al estudio del caso único permiten el mayor rigor y control experimental junto con la utilización de datos cualitativos, del mismo modo que los diversos sistemas expertos desarrollados para el diagnóstico psicológico demuestran la posibilidad de introducir datos cualitativos en heurísticos computacionales (véase, por ejemplo, Arnau, 1994). En todo caso, las combinaciones posibles entre lo cualitativo y lo cuantitativo no deben hacer pensar que estamos aceptando una versión subjetivista de la evaluación, en el sentido de admitir la utilización de la intuición, transferencia u otros fenómenos procedentes de la subjetividad del psicólogo evaluador, como cauce o prueba del análisis efectuado. Como ya señalamos, el condicionante que ha de tener la evaluación psicológica es el de permitir la posibilidad de que otros evaluadores repliquen lo realizado. A esta garantía ha de atenerse cualquier trabajo científico y, desde luego, la evaluación psicológica. 5.3. La evaluación tradicional versus la evaluación conductual Durante los últimos cuarenta años se ha producido una polémica entre los propios modelos teóricos que ha venido enfrentando al enfoque teórico conductual con todos los restantes (esen- / 49 cialmente con los del rasgo, dinámico y médico). Parte de esa polémica puede extraerse de nuestra discusión entre los distintos modelos. Los aspectos enfrentados en esta polémica aparecen en el cuadro 1.3. Así, como ya se ha dicho, el enfoque conductual a la evaluación emerge en los años sesenta con la tercera generación de conductistas (entre otros Staats, Bandura o Kanfer), que proponen la incorporación de variables personales y cognitivas en la tradicional fórmula conductista E-R. Sin embargo, en este primer momento se mantiene un modelo radical E-R con la incorporación mecanicista de las condiciones del organismo (en tanto que sujeto biológico y psicológico) y de las respuestas cognitivas y fisiológicas en la conocida fórmula E-O-R-C (Estímulo, Organismo, Respuesta y Consecuencias) (para una ampliación de esta polémica, véase Fernández-Ballesteros, 1994c). Por supuesto, este modelo se enfrenta con los entonces modelos predominantes del rasgo, dinámico y médico cuyas formulaciones nos llevan a modelos endogenistas en los que el C = f P (la conducta es una función de variables intrapsíquicas: factores, dimensiones, construcciones dinámicas o constructos psicopatológicos). Como derivados de la formulación teórica y con base en los postulados «endógeno o exógeno», cada uno de los modelos analizados lleva implícita una alternativa polémica también: si el comportamiento es estable a través del tiempo y de las situaciones o si es específico de la situación en la que la conducta se emite. Así, desde los mo- CUADRO 1.3 Fuentes de variación en la polémica tradicional versus conductual C = fP, C = fC Constructos (rasgos, factores, dimensiones) Consistencia de la conducta Altos niveles de inferencia Preferentemente cuestionarios Utiliza tests referidos a normas (comparticiones interindividuales) Diagnóstico © Ediciones Pirámide C = fA, C = fA × P Estímulos y respuestas (motoras, fisiológicas y cognitivas) Especificidad de la conducta Bajos niveles de inferencia Preferentemente observación Utiliza tests referidos a criterios (comparaciones intraindividuales) Cambio, control y valoración 50 / Evaluación psicológica. Conceptos, métodos y estudio de casos delos del atributo, médico y dinámico se pretende predecir o/y pseudoexplicar la conducta en base a disposiciones, necesidades, rasgos, factores, entidades nosológicas. Se supone que estas estructuras internas se han ido constituyendo a lo largo de la vida del sujeto (en las primeras edades), permaneciendo ancladas en él y dando lugar a la personalidad. La supuesta base de tales atributos depende de los distintos autores: para algunos (Eysenck, Claridge, Janet), se han desarrollado a partir de variables genéticas, constitucionales o fisiológicas; según otros, se deben a la interacción del organismo y el medio (Allport, Cattell). Lo más importante es que tales estructuras dan estabilidad al comportamiento, tanto a través del tiempo como a través de situaciones. En el polo opuesto, los psicólogos partidarios del modelo conductual radical, al explicar la conducta en función exclusivamente de los estímulos externos, sostienen que el comportamiento es específico y depende de la situación en la que se halle el sujeto. Esta polémica va desapareciendo poco a poco entre otras cosas porque la evaluación conductal va, también poco a poco, aceptando la importancia de las variables de la persona considerándolas como repertorios básicos de conducta con poder causal y con posibilidad de ser manipulados mediante técnicas de tratamiento. Así, a finales del siglo XX se acepta que: 1) La conducta de un sujeto en un momento dado está en función de las interacciones recíprocas entre las variables situacionales, personales (y organísmicas) y la propia conducta (véanse Bandura, 1977, 1999; Staats, 1963, 1975). 2) Las variables personales y organísmicas (entre las que incluimos el modo en el cual el sujeto percibe la situación ante la que se halla) son a su vez dependientes de las interacciones y/o del proceso dialéctico habido entre el organismo y el medio ambiente durante la vida del sujeto y, por tanto, dependen de su historia del aprendizaje (véase Staats, 1997). 3) La mayor especificidad o generalidad de la conducta de un determinado sujeto estará en función del balance entre los procesos de generalización y discriminación habidos durante su historia de aprendizaje. Esto implica que algunos repertorios de conducta son más es- tables que otros en ciertas ocasiones y para algunos sujetos (véanse, por ejemplo, Magnusson, 1990; Mischel, 1990). La conclusión más evidente está en la línea de preconizar un sujeto activo y actuante en un ambiente activo (Mischel, 1977; Bandura, 1977, 1999). Todo ello implica que habremos de evaluar variables ambientales, personales, además de la propia conducta objeto de estudio, así como sus relaciones mutuas. También como una derivación del submodelo conductual radical, se ha polemizado largamente sobre si la conducta observada es considerada como muestra de la misma conducta en la situación natural o es más bien signo de la existencia de un atributo intrapsíquico o endógeno. Mucho ha ido modificándose esta polarización; en primer lugar porque los autores han presentado matizaciones por lo que se refiere a la conceptualización de lo que «muestra/signo» implican y, en parte también, porque el modelo conductual ha aceptado que cuando se analiza un caso para proceder a un cambio de conducta se postulan hipótesis causales (por ejemplo, véanse Eifert y Feldner, 2003; Fernández-Ballesteros, 1994e; Haynes y O’Brien, 2000). De ahí que, necesariamente, la evaluación conductual tenga en cuenta la conducta desde el nivel de muestra y correlato (cuando está observando y describiendo la conducta objeto de estudio) al comportamiento como signo y como teoría (cuando está tomando el comportamiento como un repertorio básico de conducta y considera que está funcionalmente relacionado con la conducta problema estableciendo las técnicas de tratamiento pertinentes). Lo más importante es señalar que, en cualquier caso, la evaluación conductual establece hipótesis causales que contrasta y valora mediante técnicas experimentales. Pero la polémica sostenida entre la evaluación conductual y la llamada «tradicional» ha abarcado también las técnicas de evaluación. El modelo conductal amerge con una dura crítica a la utilización de la introspección propia de los autoinformes típica de los cuestionarios con los que se evalúan las variables personales. A este método se opuso la observación sistemática de la conducta manifiesta como método propio (y prioritario) de © Ediciones Pirámide Conceptos y modelos básicos la evaluación conductual. Es fácilmente comprensible que una vez que se acepta el comportamiento cognitivo y psicofisiológico como unidades de análisis (y no se reduce al estudio de la conducta motora), los autoinformes (así como los registros psicofisiológicos) han de ser introducidos también en el modelo conductual. Los tests estandarizados, referidos a normas, fueron desde un principio fuertemente criticados por el modelo conductual por tres razones, dos de las cuales ya han sido comentadas: en primer lugar porque las respuestas ante tales tests eran tomadas como signo de las variables objeto de examen; en segundo lugar porque gran parte de ellos utilizan la introspección necesaria a la hora de cumplimentar los autoinformes; pero, también, porque la evaluación conductual no requería de comparaciones interindividuales o normativas, sino tan sólo intraindividuales con el fin de ver los cambios conductuales tras un tratamiento. En otras palabras, lo que le importa a la evaluación conductual es hallar las conductas problemáticas del sujeto mediante inventarios de conducta y una vez seleccionadas proceder a su manipulación y, posteriormente, verificar si se han producido diferencias intrasujeto en el sentido esperado. Así pues, en un primer momento la evaluación conductual propone la utilización de tests basados en criterios y no en normas y, de hecho, la instrumentación conductual sigue teniendo algunas características propias que aparecen muy claramente cuando se examinan sus técnicas (Fernández-Ballesteros, 2003) o cuando se analizan los textos de evaluación psicológica en los que la evaluación conductual aparece como un capítulo en paralelo a la evaluación de la inteligencia o la personalidad (por ejemplo, véase Hersen, 2003). Finalmente, una última crítica de la evaluación conductual a los modelos «tradicionales» ha sido la utilización del diagnóstico sin base etiológica. Así, los evaluadores conductuales consideraban la clasificación como inservible e inútil cuando 2 El modelo dinámico tiene una importante vertiente terapéutica aunque la evaluación no mantiene una relación estrecha con la intervención antes y después del tratamiento. © Ediciones Pirámide / 51 sus objetivos son, esencialmente, los del cambio de conducta y con ello la valoración del tratamiento; en otras palabras, un diagnóstico no sirve para controlar la conducta. Esta distinción es matizada cuando se utiliza el diagnóstico con el objetivo de la comunicación interprofesional. Así, es comúnmente aceptado que la evaluación para el cambio es uno de los atributos que distinguen al modelo conductal frente al modelo del atributo y el médico2. En resumen, a lo largo de los últimos cuarenta años ha habido una fuerte polémica entre la evaluación conductual y los lamados modelos «tradicionales», polémica que se ha visto poco a poco reducida, si no eliminada, en la medida en que la evaluación conductual ha sido integrada en la evaluación psicológica, como así se ha puesto de relieve en los últimos textos tanto elaborados por psicólogos conductuales como «tradicionales» (véanse, por ejemplo, Hersen, 2003; Cohen et al., 1996). 6. SÍnTESIS COnCEPTUAL Hasta aquí los modelos, teorías o aproximaciones teóricas que sirven de base a la evaluación psicológica, así como las alternativas polémicas más importantes que se han suscitado. Hemos visto cómo estos marcos teóricos difieren entre sí en una serie de aspectos (formulación explicativa, variables o unidades de evaluación propuestas, métodos y técnicas, niveles de inferencia, objetivos y ámbitos de aplicación). Así también se han examinado tres de las más grandes polémicas discutidas en el entorno de la evaluación psicológica. Hemos visto que tales extremos polémicos están muy matizados y no aparecen en la actualidad con la virulencia de antaño. Por otra parte, también hemos visto que los distintos modelos son más o menos útiles según los objetivos de evaluación y el contexto de aplicación. 52 / Evaluación psicológica. Conceptos, métodos y estudio de casos Todo ello tiene su lógica, ya que el análisis racional de la mayor parte de los modelos presentados hace pensar que cada uno de ellos estaría más indicado para determinados objetivos aplicados y en unos específicos contextos. Así, por ejemplo, si pretendemos realizar una orientación o selección profesional, el modelo que va a ser más eficaz será el modelo del atributo. Así también, si pretendemos comunicarnos con otros profesionales en el ámbito de la clínica, vamos a tener que adoptar (aunque sea sólo para la clasificación y el diagnóstico) el modelo médico. Por otra parte, si nuestro objetivo es el cambio de conducta, el modelo más eficiente va a ser, con probabilidad, el modelo conductual, y si lo que nos interesa es indagar procesos de pensamiento o de aprendizaje, lo más idóneo sería trabajar desde un modelo cognitivo. Finalmente, algunos modelos han desarrollado una tecnología que, en tanto en cuanto haya probado su valor en la descripción del comportamiento, puede ser utilizada independientemente de las asunciones teóricas del modelo (por ejemplo, la tecnología constructivista subjetiva o la tecnología proyectiva). El relativismo que esta postura conlleva procede, no cabe duda, de un estado preparadigmático de la ciencia psicológica que no es bien recibido por los teóricos y epistemólogos de la psicología por la cantidad de riesgos que reporta, al no poder asumir unos requisitos comunes que den una cierta consistencia y rigor a las distintas conceptualizaciones utilizadas e incluso al potenciar una posición —a lo Feyerabend— en la que todo pudiera servir. Sin embargo, nuestra propuesta es que cualquier evaluación psicológica requiere un máximo rigor metodológico y congruencia y compatibilidad conceptual. ¿Cómo lograr esto? A lo largo de los años, hemos tratado de realizar una labor de integración y síntesis. Así, hemos tratado de sintetizar (Fernández-Ballesteros, 1980), a través de la teoría general de sistemas, los distintos niveles de complejidad que deben estar presentes en evaluación psicológica partiendo de la consideración de tres sistemas: el sistema biológico, el sistema conductual y personal y el sistema socioambiental. Así también, desde una perspecti- va metodológica, veremos en el capítulo siguiente la compatibilidad entre un análisis descriptivopredictivo y un análisis interventivo valorativo (en otro lugar llamados respectivamente «sistemático-molar» y «funcional-sincrónico»; véase Fernández-Ballesteros, 1983). Con base en todo lo dicho hasta aquí, a la hora de realizar una particular evaluación psicológica de un sujeto el evaluador tendrá que tener en cuenta los siguientes grupos de variables. 1. El/los comportamiento/s objeto de estudio La evaluación psicológica tiene por objeto el estudio del comportamiento del sujeto en evaluación. Este comportamiento ha de ser estudiado a los niveles de complejidad requeridos; así, partimos de que por conducta ha de entenderse tanto lo que hace un sujeto (sus ejecuciones) como lo que piensa, siente o experimenta. Es comúnmente admitido que la conducta presenta tres modalidades distintas, a saber: — Conducta motora: es toda aquella manifestación externa que implica actividades eferenciales externamente observables. Por ejemplo, caminar, mirar, saludar, llorar, etc. — Conducta cognitiva: supone todo aquello que piensa o experimenta un sujeto. Por ejemplo, si se siente triste o alegre, si piensa que le persiguen, qué automensajes emite al realizar una tarea, etc. — Conducta psicofisiológica: comprende las actividades del sistema nervioso. Por ejemplo, tasa cardíaca, presión arterial, actividad cortical, etc. En todo caso, lo importante a resaltar aquí es que el evaluador debe lograr la especificación del comportamiento objeto de estudio. A partir de estos tres componentes o modalidades del comportamiento, el psicólogo —partiendo de una determinada teoría— puede estar interesado en evaluar procesos o estructuras internas, las cuales, también, pueden ser nuestro obje© Ediciones Pirámide Conceptos y modelos básicos to de estudio pero que englobamos en un conjunto de unidades de evaluación o variables de mucha mayor complejidad que agrupamos como condiciones personales. 2. Condiciones personales La predicción y explicación del comportamiento mediante el análisis y especificación de una serie de variables de la persona o de la personalidad es una constante en la mayoría de los modelos presentados. Ello, como hemos visto, ha sido controvertido desde enfoques situacionistas o conductistas. Sin embargo, es de común acuerdo que los seres humanos cuentan con una serie de competencias, habilidades, destrezas o atributos psicológicos que son ciertamente estables y que pueden ser entendidos como disposiciones de respuesta o repertorios básicos de conducta. Así, por ejemplo, si una persona es más o menos «inteligente», tiene un mayor o menor autocontrol o un mayor o menor nivel de ansiedad, serán condiciones personales que habrá que indagar si procede según el caso. Tales repertorios han sido construidos a lo largo de la vida y tendrán carácter explicativo en dependencia tanto de la edad del sujeto como de la propia naturaleza del constructo de que se trate, así como de su apoyatura empírica. En todo caso, el evaluador debe cuestionarse tales construcciones teniendo en cuenta las prescripciones a las que nos referíamos más arriba, las cuales pasan, necesariamente, por el soporte empírico brindado desde la teoría general de referencia y el particular caso en exploración. También aquí tendremos que enfatizar que a la hora de evaluar tales atributos el psicólogo operativizará éstos según conductas actuales que son observadas mediante los tests u otras técnicas de evaluación. Así, la distinción entre la conducta objeto del estudio y un supuesto repertorio o atributo de la persona del que la conducta es función supone una distinción conceptual entre lo que se explica (el explanandum, la conducta) y lo que explica (el explanans, la construcción teórica). Pruebas empíricas realizadas a todo lo largo de la evaluación deberán desentrañar la distinción entre ambos grupos de variables. © Ediciones Pirámide 3. / 53 Condiciones ambientales pasadas A pesar de que en la gran mayoría de los modelos comentados no aparecían, explícitamente, las condiciones ambientales pasadas en la formulación de la conducta, sabemos que una importante porción de la varianza, tanto del comportamiento como de las variables de personalidad, es explicada mediante las condiciones ambientales históricas del sujeto, es decir, su historia de aprendizaje. Así, en los casos en los que sea preciso, el evaluador deberá recabar información mediante entrevistas realizadas al sujeto y sus allegados, así como a través de informes técnicos, registros u otros dispositivos de medida no reactivos de todas aquellas condiciones ambientales consideradas relevantes relativas a la crianza, educación y desarrollo producidos en los distintos contextos (familiar, escolar, social, laboral, físico, etc.) del sujeto. 4. Condiciones ambientales actuales En una gran parte de nuestros modelos, el ambiente actual es considerado la fuente explicativa en el estudio del comportamiento. Así pues, son de inexcusable examen aquellas condiciones ambientales que pudieran provocar, mantener y controlar el comportamiento objeto de estudio. Un listado esquemático de tales condiciones es el siguiente: 1) Estímulos físicos y sociales relevantes con propiedades elicitadoras, discriminativas o reforzantes. 2) Situaciones facilitadoras o inhibidoras del comportamiento adaptativo. 3) Situaciones problemáticas físicas y sociales relacionadas con el comportamiento objeto de estudio. 4) Contextos actuales relevantes (familiar, escolar, laboral, interpersonal, etc.). 5. Condiciones biológicas Finalmente, aunque el objeto de la psicología es el comportamiento (y no lo biológico), en algunos de los modelos reseñados a ciertas condiciones biológicas les es concedido el poder causal de la conducta. Por ese motivo, el psicólogo debe es- 54 / Evaluación psicológica. Conceptos, métodos y estudio de casos tar preparado para identificar en qué casos se requerirá la intervención de otro especialista a la hora de complementar con evaluaciones biológicas. Desde luego, conviene enfatizar que no siempre se requiere la consideración de estos factores y que, por tanto, la evaluación de las condiciones biológicas puede ser tan sólo necesaria en el contexto de aplicación clínico o psicopatológico. En resumen, cuando trabajamos con sujetos intactos (sanos) no se requerirán tales indagaciones. Existe sobrada evidencia de que las condiciones biológicas del organismo han podido causar o coadyuvar con el desarrollo de la personalidad (de sus repertorios básicos de conducta) y/o, actualmente, pueden estar influyendo o explicando el comportamiento patológico objeto de estudio. Estas condiciones, si proceden del pasado, han de ser indagadas mediante registros, informes técnicos o informaciones del sujeto o allegados, mientras que si se trata de condiciones biológicas actuales, deberán serlo mediante los exámenes realizados por especialistas. Así, por ejemplo, si se trata de conocer el nivel de audición de un sujeto, nada mejor que un examen de audiometría para su análisis. Sin embargo, el psicólogo también pude estar preparado para realizar exámenes de algunos de los sistemas biológicos. Así, el evaluador puede realizar exploraciones neuropsicológicas y psicofisiológicas a través de las cuales se da cuenta del estado del sistema nervioso central y autónomo. En este caso, hay que dejar constancia de que estos exámenes psicobiológicos son realizados por medio de las manifestaciones externas de tales sistemas. Esto implica que de ciertas respuestas del organismo se infiere el estado del sistema biológico implicado. Sea cual fuere la vía de indagación de las condiciones biológicas, deben recabarse datos tanto sobre las condiciones que en el pasado han podido influir o determinar la evolución y desarrollo del sujeto como sobre aquellas que en la actualidad pueden estar involucradas en la explicación del comportamiento objeto de estudio. Hasta aquí los elementos pertinentes a toda evaluación psicológica. Cabe preguntarse si tales elementos están presentes o pudieran ser ajustados a una teoría general del comportamiento. La teoría que parece ajustarse mejor a estos planteamientos es la formulada por Staats, denominada del conductismo social o conductismo psicológico (también llamada del conductismo paradigmático). Staats (1963, 1975, 1997; véanse también Fernández- Ballesteros, 1990, 1994b; FernándezBallesteros y Staats, 1992), en los últimos treinta años, ha venido elaborando una aproximación teórica que pretende superar las rupturas existentes entre los distintos paradigmas psicológicos y, más específicamente, conductuales a través del conductismo psicológico. En breve, en la figura 1.3 podemos observar la relación entre los distintos elementos de la fórmula, que pueden ser definidos de la siguiente manera: — E1: Condiciones ambientales históricas, responsables del aprendizaje y constitución de la personalidad (por ejemplo, un ambiente poco estimulante puede enlentecer los procesos de aprendizaje de la lectura y escritura). — 01: Condiciones biológicas históricas, potencialmente responsables en los repertorios básicos de conducta (por ejemplo, la trisomía cromosomática propia del síndrome de Down afecta al aprendizaje de múltiples comportamientos complejos). — RBC: Repertorios básicos de conducta (o variables estables de la persona), entendidos como complejas constelaciones de conducta (cognitivo-lingüísticos, emocionalesmotivacionales, sensomotores) instauradas a través del aprendizaje acumulativo-jerárquico y que se formulan como vía para definir operativamente la personalidad o cualquier otra variable estable. Los RBC son producto de la interacción entre condiciones ambientales históricas (E1) y variables biológicas del organismo (01) a lo largo de la historia del sujeto, pero en el momento de la evaluación pueden explicar el comportamiento objeto de estudio. — 02: Condiciones biológicas actuales, que pudieran afectar, en el presente, a los ya aprendidos repertorios básicos de conducta (por ejemplo, un traumatismo craneal © Ediciones Pirámide Conceptos y modelos básicos Tiempo E1 (O1) RBC Presente (O2) C (O3) E2 / 55 E1: Condiciones ambientales históricas. RBC: Repertorios básicos de conducta aprendidos por la interacción de variables biológicas y ambientales. E2: Condiciones ambientales actuales que mantienen o controlan la conducta problema. O (O1, O2, O3): Variables biológicas que actúan en distintos momentos de la historia del individuo. C: Conducta/s objeto de estudio. FUENTE: Fernández-Ballesteros y Staats, 1992; Staats, 1978. Figura 1.3.—Síntesis conceptual: conductas objeto de estudio y variables potencialmente relevantes y su relación. puede ser una condición biológica que perturbe repertorios cognitivo-lingüísticos ya aprendidos). — E2: Condiciones ambientales actuales, que pueden estar provocando, controlando o manteniendo las conductas objeto de estudio (por ejemplo, la atención de la maestra puede estar manteniendo el comportamiento hiperactivo de un niño). — 03: Condiciones biológicas actuales, que puedan interferir en la recepción de las condiciones ambientales actuales (por ejemplo, un déficit auditivo podría estar impidiendo al sujeto la recepción de la estimulación reforzante). — C: Variables conductuales objeto de estudio. Para la comprensión de este modelo conviene aclarar lo siguiente (véanse Staats, 1975, 1997; Fernández-Ballesteros y Staats, 1992; FernándezBallesteros, 1990 y 1994): 1. El modelo, que procede de la ciencia básica, se sustenta en la existencia de principios básicos de aprendizaje complementados por un principio acumulativo-jerárquico que establece los fundamentos de aprendizajes complejos que ocurren históricamente. Y, por último, la teoría ARD, a través de la cual se establecen las propiedades estimulares (elicitantes, discriminativos, refor- © Ediciones Pirámide zantes) y desde la que se analizan unifactorialmente los principios de aprendizaje. 2. El modelo mantiene —en su eje horizontal: longitudinal e histórico— la prescripción de un análisis molar-diacrónico en el que se tienen en cuenta condiciones históricas, tanto ambientales como biológicas, así como las variables personales del sujeto que son entendidas como repertorios básicos de conducta. 3. El modelo contempla también un eje transversal que prescribe un análisis funcional o sincrónico en el que se contemplan las relaciones funcionales entre las condiciones ambientales actuales y la conducta objeto de estudio, así como las condiciones biológicas que pudieran afectar bien a la recepción de tales estímulos, bien a los repertorios básicos de conducta. Pero decíamos que el modelo teórico elegido debería requerir, también, aquellas especificaciones metodológicas que sirvieran de guía a la hora de seleccionar las distintas variables relevantes. Así, el conductismo psicológico (véase Staats, 1963, 1975), a la hora de considerar variables de la persona o repertorios básicos de conducta, exige que éstas presenten los siguientes requisitos: a) Que estén adecuadamente operacionalizadas. 56 / Evaluación psicológica. Conceptos, métodos y estudio de casos b) Que reúnan pruebas —procedentes de la psicología básica— de cómo han sido conformadas. c) Desde un objetivo modificador o de cambio, que existan adecuadas técnicas de manipulación y control de tales conceptos. d) Por último, que también tengamos pruebas de su relación estable con la conducta objeto de estudio. Estos cuatro tipos de criterios han de servirnos como guía a la hora de seleccionar las potenciales variables responsables de la/s conducta/s objeto de estudio. Las aportaciones de este modelo en su aplicación a la evaluación psicológica son las siguientes: 1) Da cuenta cabal del comportamiento objeto de estudio en los niveles de complejidad necesarios, así como de las variables relevantes (personales, ambientales y biológicas) que lo explican, controlan o mantienen. 2) Supera los planteamientos teóricos que han sido competitivos en el tiempo (modelos tradicionales —del rasgo o médico— frente a los conductuales) o que rigen en los eventos cognitivos o internos. 3) Permite una conceptualización en la que se da cabida a los distintos objetivos de la evaluación psicológica, es decir, la descripción, clasificación, predicción, explicación y/o control. 4) Supera algunos de los extremos polémicos comentados en el apartado anterior. Puesto que se trata de una mera introducción de este modelo de síntesis o integración, no es el momento de profundizar en las particularidades de cada uno de los elementos o grupo de variables relevantes del modelo; el lector interesado deberá consultar los distintos trabajos que lo desarrollan en Staats (1963, 1975, 1997), Fernández-Ballesteros y Staats (1992) y Fernández-Ballesteros (1990, 1994). Desde luego, no se trata de afirmar que proponemos un modelo que resuelve todos los problemas de la evaluación psicológica, ni mucho menos los de la psicología. El modelo presentado pretende servir de marco teórico que, con valor heurístico, permite, eso sí, contemplar todas las variables relevantes del comportamiento objeto de estudio. En definitiva, cualquier evaluación psicológica en la que se efectúe un estudio diacrónico (histórico o molar) de las condiciones ambientales, biológicas y personales y que realice, también, un análisis transversal sincrónico de las potenciales variables ambientales o personales funcionalmente relacionadas con las conductas objeto de estudio; todo ello, guiado por el aval empírico procedente de la ciencia básica (o de las distintas teorías sobre el caso) y llevado a cabo con rigor, será —no cabe duda— una adecuada evaluación psicológica. En función de todo lo dicho hasta aquí, la evaluación psicológica queda definida como aquella disciplina de la psicología que se ocupa del estudio científico del comportamiento humano (en los niveles de complejidad necesarios) de un sujeto (o un grupo especificado de sujetos) con el fin de describir, clasificar, predecir y, en su caso, explicar y controlar tal conducta. Hasta aquí, el modelo que ha de dirigir la evaluación psicológica de un sujeto, ya que éste es el objeto prioritario de nuestra disciplina. Ahora bien, conviene recordar que la evaluación puede dirigirse también a concretos grupos humanos, contextos o programas o intervenciones. Estos nuevos campos de aplicación de la evaluación psicológica presentan características específicas, como es lógico, y a ellos no es aplicable el modelo al que nos hemos venido refiriendo en este apartado. COnCLUSIOnES A lo largo de este capítulo se han revisado los más importantes conceptos relativos a la evaluación psicológica tratando de establecer las diferencias y semejanzas entre ellos. También se han establecido y descrito los hitos históricos más importantes que han permitido perfilar los distintos modelos, métodos y técnicas de la evaluación. Se han examinado los seis modelos © Ediciones Pirámide Conceptos y modelos básicos evaluativos más importantes en función de sus planteamientos teóricos, metodológicos y aplicados tratando de establecer sus semejanzas y diferencias en función de los objetivos de evaluación. Tras examinar las grandes polémicas surgidas a través de la historia de la evaluación, se ha tratado de llegar a una síntesis de estas polémicas conjugando lo idiográfico y lo nomotético, lo / 57 cualitativo y lo cuantitativo y la evaluación «tradicional» con la conductual. Finalmente, se ha presentado un modelo que permita guiar la evaluación, a modo de heurístico, en el que aparecen variables ambientales (pasadas y presentes), biológicas, personales (o de la personalidad) y, por supuesto, la/s conducta/s objeto de estudio. BIBLIOgrAFÍA BÁSICA Fernández-Ballesteros, R. (1992). Introducción a la evaluación psicológica, 2 vols., Madrid: Pirámide. Fernández-Ballesteros, R. (dir.) (1994). Evaluación conductual hoy. Un enfoque para el cambio en psicología clínica y de la salud, Madrid: Pirámide. Fernández-Ballesteros, R. (ed.) (2003). Encyclopedia of Psychological Assessment, 2 vols., Londres: Sage Pub. Hersen, M. (2004). Comprehensive Handbook of Psychological Assessment, Nueva York: Wiley. Staats, A. W. (1997). Conducta y personalidad. Conductismo psicológico, Bilbao: Desclée de Brouwer. rEFErEnCIAS BIBLIOgrÁFICAS Anastasi, A. (1988). Psychological Assessment (6.a ed.), Nueva York: Prentice-Hall. Arnau, J. (1990). Metodología Experimental. En J. Arnau, M. T. Anguera y J. Gómez (dirs.). Metodología de la investigación en Ciencias del Comportamiento, Barcelona: PPT. Arnau, J. (1994). Diseños experimentales de caso único. En R. Fernández-Ballesteros (dir.). Evaluación conductual hoy. Un enfoque para el cambio en psicología clínica y de la salud, Madrid: Pirámide. Bandura, A. (1977). Social learning theory, Englewood Cliffs, NJ: Prentice-Hall. Bandura, A. (1999). A social cognitive theory of personality. En O. J. Pervin (ed.). In Handbook of Personality (2.a ed.), Nueva York: Guilford. Berstein, D. A. y Nietzel, M. T. (1980). Introduction to clinical psychology, Nueva York: McGraw-Hill. Berstein, D. A. y Nietzel, M. T. (1982). Introducción a la psicología clínica, México: McGraw-Hill. Binet, A. y Simon, T. (1905). Méthodes nouvelles pour le diagnostique du niveau intellectuel des anormeaux. L’Année Psychologique, 2, 411-465. Binet, A. y Henri, D. (1905). Psychologie individuelle. L’Anneé Psichologique, 2, 411-465. Buros, O. K. (1938). The mental measurement Year© Ediciones Pirámide Book, Highland Park, New Jersey: The Gryphon Press. Buros, O. K. (1941). The Nineteen Forty Mental Measurement Year-Book, Highland Park, New Jersey: The Gryphon Press. Buros, O. K. (1949). The Third Mental Measurement Year-Book, Highland Park, New Jersey: The Gryphon Press. Buros, O. K. (1953). The Fourth Mental Measurement Year-Book, Highland Park, New Jersey: The Gryphon Press. Buros, O. K. (1959). The Fifth Mental Measurement Year-Book, Highland Park, New Jersey: The Gryphon Press. Buros, O. K. (1965). The Sixth Mental Measurement Year-Book, Highland Park, New Jersey: The Gryphon Press. Buros, O. K. (1972). The Seventh Mental Measurement Year-Book, Highland Park, New Jersey: The Gryphon Press. Buros, O. K. (1978). The Eight Mental Measurement Year-Book, Highland Park, New Jersey: The Gryphon Press. Carpintero, H. (1989). La evolución del psicodiagnóstico en España. Evaluación Psicológica/Psychological Assessment, 5, 3-23. 58 / Evaluación psicológica. Conceptos, métodos y estudio de casos Carpintero, H. (2003). History. En R. Fernández-Ballesteros (ed.). Encyclopedia of Psychological Assessment, vol. 1, Londres: Sage Pub. Coan, R. W. (1968). Dimensions of psychologycal theory. American Psychologist, 23, 715-722. Cohen, R. J., Sewerdlik, M. E. y Phillips, S. M. (1996). Psychological Testing and Assessment, Mountain View, CA: Mayfield Pub. Co. Cronbach, L. G. (1990). Essentials of psychological testing, Nueva York: Harper & Row. Dubois, P. H. (1970). A History of Psychological Testing, Boston: Allyn and Bacon. Eifert, G. H. y Feldner, M. T. (2003). Conceptual foundations of behavioral assessment strategies: from theory to assessment. En N. S. Haynes y E. Heiby (eds.). Behavioral Assessment, Nueva York: Pergamon. Fernández-Ballesteros, R. (1980). Psicodiagnóstico. Concepto y metodología, Madrid: Cincel-Kapelusz Ed. (6.a ed., 1992). Fernández-Ballesteros, R. (dir.) (1983). Psicodiagnóstico. Unidades didácticas, Madrid: UNED. Fernández-Ballesteros, R. (1985). Evaluación psicológica y evaluación valorativa. Evaluación Psicológica, 1, 2-15. Fernández-Ballesteros, R. (1992). Introducción a la evaluación psicológica, 2 vols., Madrid: Pirámide. Fernández-Ballesteros, R. (dir.) (1994). Evaluación conductual hoy. Un enfoque para el cambio en psicología clínica y de la salud, Madrid: Pirámide. Fernández-Ballesteros, R. (ed.) (2003). Encyclopedia of Psychological Assessment, 2 vols., Londres: Sage Pub. Fernández-Ballesteros, R. y Staats, A. (1992). Paradigmatic Behavioral Assessment, Treatment and Evaluation: Answering the Crisis. En Behavioral Assessment. Advances in Behaviour Research and Therapy, 14, 1-28. Forns, M., Kitchner, T. y Torres, M. (1991). Principales modelos en Evaluación Psicológica, Barcelona: L’Estudi d’en llop. Freixas, J. (2003). Subjective techniques. En R. Fernández-Ballesteros (ed.). Encyclopeida of Psychological Assessment, Londres: Sage. Haynes, S. N. y O’Brian, W. H. (2000). Principles and practices of behavioral assessment, Nueva York: Kluwer/Plenum. Huarte de San Juan, J. (1585). Examen de los ingenios para las ciencias, Marchena: Montoya. Hersen (ed.) (2004). Comprehensive Handbook of Psychological Assessment, 4 vols., Nueva York: Wiley. Haynes, S. N. y Heiby, E. (eds.) (2004). Behavioral Assessment. En M. Hersen (ed.). A Comprehensive Handbook of Psychological Assessment, Nueva York: John Wiley & Son. Magnusson (1990). Personality disorders from an international perspective. En L. A. Previn (ed.). Handbook of Personality Theory and Research, Londres: Guilford Press. Marx, M. H. y Hilix, W. A. (1967). Sistemas y teorías psicológicas contemporáneas, Buenos Aires: Paidós. McReynolds, P. (ed.) (1968). Advances in Psychological Assessment, vol. 1., Palo Alto, CA: Science and Behavior Books. McReynolds, P. (ed.) (1971). Advances in Psychological Assessment, vol. 2, Palo Alto, CA: Science and Behavior Books. McReynolds, P. (ed.) (1975). Advances in Psychological Assessment, vol. 3, San Francisco: Jossey Bass. McReynolds, P. (ed.) (1978). Advances in Psychological Assessment, vol. 4, San Francisco: Jossey Bass. McReynolds, P. (ed.) (1981). Advances in Psychological Assessment, vol. 5, San Francisco: Jossey Bass. McReynolds, P. (ed.) (1987). Advances in Psychological Assessment, vol. 6, San Francisco: Jossey Bass. McReynolds, P., Rosen, J. C. y Chelune, G. J. (1990). Advances in Psychological Assessment, vol. 7, Nueva York: Plenum Press. Mischel, W. (1990). Personality dispositions revisited and revised. En L. A. Pervin (ed.). Handbook of Personality, Londres: Guilford. Mischel, W. (1977). On the future of personality assessment. American Psychologist, 32, 246-254. Murphy, L. L. (1992). The Elenventh Mental Measurement Yearbook, Lincoln: Buros Institute of Mental Measurement Yearbook. Neimeyer, G. J. (ed.) (1993). Constructivist assessment, Newbury Park: Sage. Neimeyer, R. A. y Vevitt, H. (2003). Theoretical perspective: Constructivism. En R. Fernández-Ballesteros (ed.). Encyclopedia of Psychological Assessment, vol. 2, Londres: Sage Pub. Ollendick, T. H., Álvarez, H. K. y Greene, R. W. (2004). Behavioral assessment. History and underlying concepts and methods. En M. Hersen (ed.). © Ediciones Pirámide Conceptos y modelos básicos Comprehensive Handbook of Psychological Assessment, New Jersey: Wiley. Pelechano, V. (1976). Psicodiagnóstico, Madrid: UNED. Pelechano, V. (1988). Del psicodiagnóstico clásico al análisis ecopsicológico, vols. I y II, Valencia: Alfaplus. Silva, F. (1982). Introducción al psicodiagnóstico, Valencia: Promolibro. Staats, A. W. (1963). Complex Human Behavior, Nueva York: Wiley. © Ediciones Pirámide / 59 Staats, A. W. (1975). Social Behaviorism, Homewood, III: Dorsey Press (traducción castellana: Conductismo Social, México: Manual moderno, 1979). Staats, A. W. (1997). Conducta y personalidad. Conductismo psicológico, Bilbao: Desclée de Brouwer. Sundberg, N. D., Tyler, L. y Taplin, J. R. (1973). Clinical psychology: expanding horizons, Nueva York: Prentice-Hall. Sundberg, N. D. (1977). Assessment of persons, Nueva York: Prentice-Hall. El proceso como procedimiento científico y sus variantes ROCÍO FERNÁNDEZ-BALLESTEROS 2 OBJETIVOS DEL CAPÍTULO • Aprender a diferenciar las distintas decisiones y tareas que integran el proceso de evaluación psicológica y a identificar sus variantes en función de los objetivos del caso. • Saber plantear los condicionantes (modelos teóricos, habilidades, etc.) que afectan a cada una de las fases y decisiones que configuran los procesos de evaluación. • Saber cómo especificar la demanda y los objetivos del caso y, en función de ello, recoger una primera información. • Conocer las garantías de tipo metodológico y los criterios éticos que permiten optimizar la calidad de las decisiones durante el proceso de evaluación. • Diferenciar entre el proceso descriptivo-predictivo y el interventivo-valorativo y conocer las distintas fases de ambos considerando que el primero forma parte del segundo. • Conocer las bases del establecimiento de hipótesis (en sus diferentes formas) y cómo, desde ellas, se deducen enunciados verificables en los que las variables implicadas se operacionalizan mediante técnicas de evaluación. • Saber cómo programar una sesión de evaluación. • Situar el proceso interventivo-valorativo en el contexto de cambio. • Reafirmar los conocimientos de las primeras fases de la preevaluación (coincidentes con el proceso descriptivo-predictivo). • Conocer cómo, a partir de las predicciones realizadas sobre el caso y los conocimientos psicológicos pertinentes, se establece un plan de tratamiento. • Saber cómo se establece un diseño de valoración en función del programa elegido y de la preevaluación (descriptiva-valorativa) efectuada. • Conocer cómo realizar su seguimiento. • Saber cuáles son las bases para la selección de las técnicas durante el proceso de evaluación. • Ser capaz de seleccionar, en función del momento del proceso, los tests y las técnicas de evaluación más apropiados. © Ediciones Pirámide 1. InTrODUCCIón Hemos dejado establecido en el capítulo anterior que el objeto de la evaluación psicológica es el estudio científico del comportamiento de un sujeto o grupo especificado de sujetos. Tal estudio debe llevarse a cabo mediante un procedimiento reglado, con unas fases establecidas propias del método científico-positivo, de tal forma que pueda ser replicado, como ocurre en toda investigación científica. Por ello, ese procedimiento o proceso evaluador cobra un interés prioritario. El proceso en evaluación es parangonable al del «estudio de casos» tan utilizado en la ciencia natural, que permite la descripción, clasificación y, a veces, predicción de ese caso específico y que, recientemente, aparece bajo la rúbrica de «formulación del caso» (case formulation) como una primera etapa necesaria en el proceso de evaluación y tratamiento (Nezu y Nezu, 2004). Pero eso no es todo: los avances de los diseños de caso único han puesto de manifiesto que en el trabajo con un solo sujeto pueden mantenerse las garantías de rigor experimental, permitiéndose incluso la explicación de las actividades objeto de estudio y su control. Durante gran parte de la historia de nuestra disciplina, el procedimiento al que nos referimos se reducía a la pura acción de aplicar tests. Esta evaluación testológica tenía su base en el hecho de que los más importantes solicitantes de la evaluación, los psiquiatras, los educadores o los empresarios, estaban interesados (y aún algunos lo siguen estando) en la información procedente de unos determinados tests que les permitían la contrastación de los diagnósticos, pronósticos o predicciones desde ellos establecidos. Ya se ha dicho que Shapiro (1951) fue el primer autor que comienza a plantear una evaluación basada en un planteamiento experimental en el que las técnicas de evaluación son utilizadas e, incluso, manipuladas al servicio de las hipótesis sugeridas y los objetivos de evaluación. Así, se va sustituyendo una evaluación basada en los tests por una basada en las metas y objetivos del caso. Ahora bien, dejando justificado que la evaluación psicológica debe utilizar un procedimiento científico sujeto a reglas, centrado en el caso y no reducible al puro hecho de aplicar tests, queda por plantear si este proceso debe presentar variantes en función de las metas establecidas previamente a la evaluación. En el apartado siguiente veremos esta cuestión. 2. EL PrOCESO DE EVALUACIón: gEnErALIDADES La evaluación psicológica implica un proceso, es decir, conlleva una serie de pasos que han de producirse en un cierto orden. El proceso de evaluación ha sido estudiado a través de múltiples investigaciones y desde múltiples modelos teóricos (para una revisión, véanse Fernández-Ballesteros, De Bruyn, Godoy, Hornke, Ter Laak, Vizcarro, Westhoff, Westmeyer y Zaccagnini, 2001, y la página: www.hhpub.com/journals/ejpa). Tal © Ediciones Pirámide El proceso como procedimiento científico y sus variantes vez lo más importante sea señalar que las dos principales características del proceso de evaluación son: 1. Que implica un proceso de toma de decisiones para llegar a la solución de un problema evaluativo. 2. Que requiere la formulación y contrastación de hipótesis. El proceso de evaluación comienza cuando un cliente realiza una demanda a un profesional de la psicología referida a un sujeto concreto o grupo de sujetos (teniendo en cuenta que el cliente puede ser el propio sujeto de evaluación). A partir de ese momento se inicia un proceso para resolver la cuestión planteada que lleva consigo, necesariamente, tomar decisiones a través de una serie de fases o momentos que, en términos generales, son los mismos que los utilizados en la investigación de cualquier parcela del conocimiento científico y, por tanto, se pueden considerar un proceso de formular y contrastar hipótesis. Cualquier secuencia de eventos puede ser parcelada en un número finito de etapas o momentos; ésta es la razón por la que distintos autores proponen diferentes fases del proceso evaluativo (para una revisión, véanse Adarraga y Zacagnnini, 1992; Fernández-Ballesteros, 1980, 1992, 1994, 2004) que van desde tres fases (el problema, la recogida de datos y la solución del problema) propuestas por Maloney Ward (1976) o las tres etapas (formulación del caso, diseño del tratamiento y valoración de resultados) planteadas por Nezu y Nezu (2004) hasta las once fases establecidas por Westmeyer y Hageboeck (1992). Sin embargo, antes de establecer las distintas etapas o fases del proceso que vamos a defender en esta obra, conviene proceder a examinarlo a la luz de los objetivos de evaluación. Partimos de la existencia de distintos objetivos científicos de toda evaluación, a saber: descripción, clasificación, predicción, explicación y control de la conducta del sujeto. Pero estos objetivos son requeridos por una demanda concreta, es decir, responden a preguntas significativas © Ediciones Pirámide / 63 sobre el sujeto tales como: ¿hasta qué punto fracasa en la escuela?, ¿fue responsable de un acto criminal?, ¿es un psicótico o un neurótico?, ¿podrá ser ingeniero?, ¿rendirá como jefe de ventas?, ¿cómo vamos a resolver su miedo a montar en avión?, etc. Si agrupamos todas estas preguntas y otras muchas más del mismo estilo, podremos constatar que la evaluación se realiza en función de cuatro agrupaciones o categorías de cuestiones, a saber: diagnóstico, orientación, selección y tratamiento o cambio. En definitiva, el problema que ha de resolverse a través del proceso evaluativo tiene distintos objetivos tanto básicos como aplicados. Comentamos en el capítulo anterior cómo, ligada al ámbito de aplicación clínica, la evaluación psicológica presentaba, en un primer momento, una exclusiva meta, la del diagnóstico. La asignación de un sujeto a una categoría del sistema de clasificación psiquiátrico («depresión mayor», «fobia simple», «demencia», etc.) ha sido —y aún para algunos sigue siéndolo— una única meta a alcanzar por el psicodiagnóstico. Como es lógico, cuando un médico, un psiquiatra o una solicitud de un juez demandan la valoración del psicólogo sobre si el sujeto es clasificable en una u otra entidad nosológica —y con las objeciones que pusimos en el capítulo anterior—, habremos de proceder a establecer un diagnóstico. Por supuesto, el psicólogo puede realizar esta tarea en tanto en cuanto haya recibido el entrenamiento pertinente tanto en el sistema de clasificación que vaya a ser usado como en la base de conocimiento psicopatológico que permite diferenciar distintas entidades nosológicas. Como se dijo en el tema anterior, del diagnóstico no se deriva, en la mayor parte de los casos, un tratamiento, pero, con frecuencia, el diagnóstico conlleva un pronóstico, es decir, una predicción sobre el curso probable del caso, y, además, el diagnóstico tiene la indudable utilidad de facilitar la comunicación entre especialistas (Nelson, 1988; Heiby y Haynes, 2004) (véanse capítulos 10, 11 y 12). Por otra parte, la orientación o el consejo psicológico es aquella meta de la evaluación por la cual el estudio psicológico de un sujeto (un indi- 64 / Evaluación psicológica. Conceptos, métodos y estudio de casos viduo, una pareja, un grupo) se realiza con el fin de dispensar ayuda en orden a tomar decisiones o a establecer planes de acción referidos a un futuro. La base de conocimiento estriba en las covariaciones existentes entre determinadas características psicológicas y determinados estudios o carreras. Por ejemplo, un adolescente consulta sobre qué estudios emprender al terminar el bachillerato; el psicólogo deberá tener en cuenta sus aptitudes, actitudes, preferencias vocacionales y características de personalidad y también conocer cuáles son los perfiles más idóneos en cuanto a las aptitudes, actitudes, preferencias y tipos de personalidad que se requieren para cursar un conjunto de estudios que son potencialmente elegibles por el sujeto. En otras palabras, se trata de ensamblar las características del individuo con las características de óptimo rendimiento en unos determinados estudios (véase capítulo 13). La evaluación puede tener por objetivo la selección cuando los informes recogidos sobre el sujeto o grupo de sujetos están dirigidos a escoger a la/s persona/s más apta/s en el desempeño de una determinada actividad previamente especificada. Así, por ejemplo, cuando se trata de seleccionar conductores de vehículos pesados o maestros de taller. Así también cuando, en el laboratorio, se pretende seleccionar muestras de sujetos contrastadas según una determinada característica a partir de una población con el propósito de proceder a una investigación experimental. Conviene dejar sentado desde ahora que la evaluación cuyo objetivo es la selección para puestos de trabajo mantiene peculiaridades que la distinguen de las restantes formas de evaluación y se basa en principios de covariación entre variables. En otras palabras, cuando se trata de seleccionar a un sujeto para un determinado tipo de trabajo, la empresa que pide la selección describe cuáles son las características del trabajo y cuáles serían las correspondientes habilidades, actitudes y características que habría de tener el mejor candidato. Ambos tipos de condiciones (las del puesto y las del aspirante) habrán de ajustarse, por lo que los candidatos tendrán que ser evaluados según las condiciones requeridas e, incluso, poner a prueba sus habilidades en situaciones propias de la tarea a desempeñar. Por ejemplo, se trata de averiguar qué persona/s —de entre un conjunto de aspirantes— va/n a ser el/los mejor/es jefe/s de ventas en función de su rendimiento en una serie de tests o pruebas situacionales (o assessment center) (véase capítulo 14). Por último, la evaluación puede realizarse con vistas al tratamiento y cambio del comportamiento objeto de estudio. En otras palabras, se requiere la evaluación de un sujeto (individuo, pareja, grupo, organización) porque se desea intervenir para producir cambios positivos en su conducta. La diferencia entre las metas de orientación y las de tratamiento es, en muchos casos, difícil de establecer, ya que, en ocasiones, la orientación finaliza, precisamente, con la aplicación de un determinado tratamiento o intervención psicológica. La base de conocimiento en el tratamiento conlleva tanto los principios que rigen en el comportamiento normal y anormal como cuáles son las técnicas psicoterapéuticas que pueden ponerse a disposición para lograr un cambio de conducta y valorar sus resultados. Ejemplos de este tipo de meta son los siguientes: un escolar es evaluado con el fin de conocer qué tipo de intervención debe hacerse para incrementar su rendimiento escolar. Una pareja consulta con el fin de mejorar sus relaciones sexuales. En el laboratorio se pretende conocer cuál de dos tratamientos hace disminuir mejor la conducta evitativa a viajar en avión (véase capítulo 15). Aunque la evaluación en todos los casos se lleve a cabo a partir de un modelo teórico (el formulado en el capítulo anterior) y una base de conocimiento específica (la del problema que se presenta), no cabe duda de que existirán matices diferenciales según se trate de diagnosticar, orientar, seleccionar o tratar para producir un cambio. En efecto, mientras que los objetivos científicos de esas tres primeras metas podrían reducirse a unas operaciones básicas como son las de clasificar, describir y predecir la conducta, el tratamiento y cambio requieren una explicación del comportamiento objeto de estudio. De ello se deduce que objetivos de evaluación diferentes requieran © Ediciones Pirámide El proceso como procedimiento científico y sus variantes procedimientos de actuación diferentes. Así, mientras que el diagnóstico, la orientación y la selección exigen la predicción del comportamiento y se pueden realizar mediante planteamientos metodológicos observacionales y correlacionales, no sucede así a la hora de proceder al cambio de conducta, que, a su vez, requiere la planificación, administración y valoración de intervenciones; en este caso se exigen métodos experimentales o cuasiexperimentales. Volviendo al número de etapas propuestas por los autores a la hora de plantear el proceso de evaluación, ello dependerá de si los objetivos son de diagnóstico, orientación o predicción o si se requiere una intervención para llegar al deseado cambio comportamental y su valoración. Para dar respuesta a esta pluralidad de objetivos, desde hace más de treinta años (Fernández-Ballesteros, 1980, 1983, 1992, 2004) se han venido proponiendo dos procesos secuenciados: uno de ellos, cuyas operaciones básicas son las de descripción y predicción y que denominamos «descriptivo-predictivo» (y que en ediciones anteriores denominamos «correlacional» debido a su base metódica esencial), y aquel que exige de la intervención y su valoración, que hemos denominado «interventivo-valorativo» (y que en otras ediciones hemos denominado «experimental» también atendiendo al método básico). En todo caso, aunque los objetivos medien en la utilización de un determinado tipo de proceso, descriptivo-predictivo o interventivo-valorativo, los pasos del método científico se aplican en uno u otro caso dado que el proceso interventivo-valorativo comprende el descriptivopredictivo. En resumen, en el amplio proceso de evaluación se siguen cuatro fases en el proceso descriptivo-predictivo a las que se incorporan tres fases más cuando se trata de intervenir. En resumidas cuentas, las fases del proceso varían de cuatro a siete según los objetivos de evaluación y la demanda. 1 Estos instrumentos, desde luego, incluyen aquellos tests que puedan requerir la manipulación de variables, como ocurre en los tests de potencial de aprendizaje (véase Apéndice [CD]: «EPA: Evaluación del potencial de aprendizaje»). © Ediciones Pirámide / 65 En conclusión, en esta obra el proceso de evaluación es contemplado como una tarea de toma de decisiones para resolver un determinado problema o demanda. Cuando el objetivo es de diagnóstico, orientación o selección, la contrastación de hipótesis se realiza mediante la administración de técnicas u otros instrumentos de evaluación1 a través de cuatro etapas esenciales; es a este proceso al que hemos llamado descriptivo-predictivo. Por otra parte, cuando los objetivos son de intervención y cambio, se requerirá un más largo proceso al que, tras un primer momento de análisis del caso (proceso descriptivo-predictivo, también llamado en literatura interventiva «preevaluación» o «formulación del caso»), seguirá una nueva formulación de hipótesis que será contrastada experimentalmente mediante la aplicación, valoración y seguimiento de un determinado tratamiento y, por tanto, se añadirán tres fases más; por consiguiente, en este caso, el proceso predictivo se integra y precede al interventivo, y éste comprende el predictivo. A continuación vamos a presentar ambas variantes del proceso de evaluación: el descriptivopredictivo y el interventivo-valorativo. Las fases de ambos procesos son esencialmente las mismas que las propuestas por Fernández-Ballesteros, De Bruyn, Godoy, Hornke, Vizcarro, Westmeyer, Westhoff y Zacagninni (2001, 2003); FernándezBallesteros, Márquez, Vizcarro y Zamarrón (2011). 3. EL PrOCESO: SU EnfOqUE DESCrIPTIVO-PrEDICTIVO2 La mayor parte de los autores establecen que las etapas básicas del proceso de evaluación son cuatro: 1) primera recogida de información, 2) formulación de hipótesis y deducción de enuncia2 Anteriormente llamado —atendiendo a la clásica polémica metodológica entre el método experimental y correlacional— «correlacional». 66 / Evaluación psicológica. Conceptos, métodos y estudio de casos SUJETO Y/O CLIENTE Demanda PSICÓLOGO/A Marcos teóricos Conocimiento práctico sobre el caso 1. Primera recogida de información Experiencia práctica Contexto Situación Cuantificación 2. Formulación de hipótesis y deducción de enunciados verificables Semejanza Asociación predictiva Asociación funcional (?) Operaciones aplicadas 3. Contrastación: administración de tests y otras técnicas de evaluación Descripción Diagnóstico Orientación Operaciones básicas 4. Comunicación de resultados: informe Clasificación Predicción Selección Figura 2.1a.—Fases del proceso descriptivo-predictivo. dos contrastables, 3) contrastación y 4) comunicación de resultados: el informe (oral y/o escrito). Estos cuatro pasos engloban todas las tareas que el evaluador realiza cuando la demanda es de diagnóstico, orientación o selección, que habrán de ser extendidas a tres fases más en la segunda variante interventiva-valorativa. En la figura 2.1a. podemos ver un diagrama del enfoque descriptivo-predictivo. Veamos con cierto detenimiento las cuatro fases de las que se compone este proceso en evaluación psicológica, que ejemplificaremos fase a fase mediante un caso. 3.1. fase 1. Primera recogida de información En principio, cuando se plantea una evaluación psicológica, el evaluador se sitúa como un observador participante y un «recolector» de información sobre el caso. Durante esta fase resulta necesario recabar datos suficientes sobre los siguientes aspectos: 1) especificar la demanda y fijar objetivos sobre el caso y 2) establecer las condiciones históricas y actuales pertinentes al caso (biológicas, sociales y ambientales). Veamos ambas tareas. © Ediciones Pirámide El proceso como procedimiento científico y sus variantes 3.1.1. Especificar la demanda y fijar objetivos sobre el caso El primer objetivo que persigue un psicólogo al iniciar una evaluación psicológica es el de la clarificación de la demanda. La demanda puede ser planteada bien por el propio sujeto, bien por una tercera persona que se convierte en el cliente de la evaluación (un juez, un médico, unos padres). En ambos casos, existe una petición más o menos precisa del sujeto/cliente que el evaluador debe clarificar formulando —con ayuda del sujeto/cliente— unos objetivos concretos. Esto resulta, a veces, difícil, ya que es frecuente que el sujeto no tenga muy clara su demanda, y el psicólogo deberá ayudar en la transformación de planteamientos vagos en términos concretos. Una breve guía de esta indagación deberá contener las siguientes preguntas: — — — — Motivo de la consulta. Por qué se solicita la evaluación. Qué se desea conseguir de ella. Cuál es la demanda concreta en términos de diagnóstico, orientación, selección o tratamiento y cambio. — Y, en su caso, cuáles son los comportamientos que, inicialmente, van a constituir el objeto de análisis en ese caso concreto. Esta primera aproximación al análisis de la demanda ha de realizarse, como veremos, mediante técnicas de amplio espectro, como es la entrevista al cliente y/o sujeto y sus allegados, o a través de otros procedimientos generales de evaluación. Dos cuestiones éticas han de ser contempladas tras la especificación de la demanda: — Si se trata de una demanda lícita. — Si el psicólogo está capacitado para abordar la demanda y cumplir los objetivos. Una vez que el evaluador ha decidido que va a proceder a la evaluación porque la demanda es adecuada y está capacitado para responder a ella, el sujeto ha de ser informado por el evaluador de los siguientes extremos: © Ediciones Pirámide / 67 — Que va a ser administrada una serie de técnicas, tests y otros instrumentos psicológicos, para lo cual solicita su conformidad. — Que todos ellos requerirán de su colaboración. — Que toda la información que se obtenga se mantendrá en la misma estricta confidencialidad. Si todo ello es aceptado por el cliente y/o sujeto (en caso negativo, el evaluador deberá renunciar o replantear la evaluación), el evaluador deberá establecer un acuerdo formal con el cliente/ sujeto en el que especificará las mutuas obligaciones (confidencialidad, colaboración mutua, conformidad por parte del sujeto) y describirá al cliente/sujeto en qué va a consistir su trabajo evaluativo y, en su caso, interventivo (diagnóstico, orientación, selección y tratamiento). 3.1.2. Especificar las condiciones históricas y actuales potencialmente relevantes al caso En segundo lugar, puede resultar necesario indagar en aquellos aspectos ambientales y personales que forman parte de la historia del sujeto, cuyo interés va a depender tanto de la demanda como de su edad y otras condiciones del caso. Por supuesto, esta segunda fase está guiada nuevamente por la demanda formulada, la base de conocimiento que exige la demanda, las habilidades evaluativas del psicólogo y, desde luego, por su marco teórico (véase capítulo 1; véase Apéndice [CD]: «Formatos de entrevista», capítulo 5). Todas estas cuestiones históricas pueden ser importantes a la hora de formular hipótesis sobre el caso. Es bien cierto que la información será suministrada mediante entrevista y que, por tanto, puede estar sesgada, ya que consistirá en una reconstrucción de lo ocurrido. Por ello, el evaluador tratará de auxiliarse de datos de archivo (calificaciones escolares, exámenes médicos, etc.; véase capítulo 6) e informes de otros para constatar 68 / Evaluación psicológica. Conceptos, métodos y estudio de casos cualquier evento relevante referido a la historia del sujeto. Por otra parte, será necesario indagar también en las condiciones actuales del sujeto tanto comportamentales como socioambientales y, en su caso, biológicas. Una pesquisa inicial podrá mantener la siguiente guía (véase capítulo 5 y Apéndice [CD]: «Formatos de entrevista»): — Hábitat (dónde vive, circunstancias personales). — Condiciones familiares, sociales y económicas. — Eventos vitales actuales. — Ocupación. — Ocio y tiempo libre. — Estilos de vida. — Estado físico y de salud. — Valores. — Otras condiciones potencialmente relevantes al caso. Nuevamente, hay que señalar que todos estos aspectos son, generalmente, indagados mediante entrevista. El evaluador deberá recabar cuantas aclaraciones considere pertinentes en orden a una estimación, lo más precisa posible, de todas estas condiciones, ya que todo ello va a permitirle establecer supuestos sobre el caso. El siguiente ejemplo ilustrará lo hasta aquí dicho: Se trata de un varón de siete años y un mes al que llamaremos JM. Los padres de JM acuden al gabinete de un psicólogo en demanda de orientación y —en su caso— tratamiento de su hijo. Se efectúa una primera entrevista con ellos, a través de la cual se recogen las siguientes informaciones. Llevan nueve años casados y dicen mantener excelentes relaciones de pareja. Proceden ambos de familias acomodadas: el padre es abogado y tiene un bufete propio; la madre, licenciada universitaria, compatibiliza sus labores en el hogar con el trabajo, a tiempo parcial, en una editorial. Viven en una zona residencial de una gran ciudad. Tienen dos hijos, una niña de dos años y un varón de siete años y un mes. La niña no presenta ningún tipo de problema; no así el niño, JM, motivo de la consulta. Ambos están muy preocupados por la falta de rendimiento escolar de su hijo. JM asiste a un centro escolar, privado, situado en la misma zona del domicilio, donde acude desde los cuatro años de edad. JM cursa 2.o de Primaria y desde el año anterior obtiene calificaciones insuficientes. En el primer curso fue suspendido en junio en cuatro materias, que tuvo que recuperar en septiembre, lo cual consiguió después de que un profesor particular le ayudase en el trabajo durante los meses de julio y agosto. Los informes durante el presente curso del colegio son insatisfactorios y califican a JM de «infantil y poco maduro para su edad». En casa, JM presenta un comportamiento que sus padres consideran normal, y en el mismo sentido informa el profesor particular que el niño tuvo durante el verano. Los padres están desconcertados y acuden al psicólogo para que éste les aconseje sobre cómo tratar al niño y, después de proceder a un estudio detallado de él, decida si requiere algún tratamiento especial. Para ambos es importante que su hijo realice los estudios con buenos resultados. Un primer sondeo biográfico permite establecer que JM nació después de un año de matrimonio. El embarazo fue ampliamente aceptado por ambos y no presentó problemas dignos de mención. El parto a término fue distócico, con fórceps; el niño presentó algunas dificultades respiratorias, por lo que tuvo que permanecer 24 horas en una incubadora. Posteriormente, el pediatra les tranquilizó respecto a que tal episodio no revestía importancia alguna. Pesó en el paritorio 3,800 kg, siendo alimentado con lactancia natural durante el primer mes de vida, pasando después, paulatinamente, a lactancia artificial. Durante el primer año no sufrió ningún trastorno físico digno de mención. Las pautas de desarrollo motor aparecieron normalmente: se sentó a los ocho meses y anduvo a los 14, nunca gateó. Montó en triciclo a los 18 meses y en la actualidad lo hace en bicicleta. El desarrollo del lenguaje fue normal, y asimismo el aprendizaje del control esfinteriano (establecido entre los 18 meses y los tres años). Acudió al jardín de infancia a los tres años y su adaptación a él fue excelente. Los padres describen a JM durante la primera infancia como «un niño inquieto, alegre y sociable». El aprendizaje de los conceptos espaciales parece haber sido normal. Tuvo dificultades, no especificadas, en el aprendi© Ediciones Pirámide El proceso como procedimiento científico y sus variantes zaje de la lectura y la escritura durante el curso de preescolar y la madre tuvo que ayudarle durante los períodos extraescolares con el fin de que llegase con un nivel suficiente de habilidades lectoescritoras en 1.o de Primaria. Las calificaciones escolares son insuficientes desde el curso pasado y los responsables del colegio les han aconsejado que el niño sea explorado por un psicólogo. La maestra, que se ocupa de 2.o de Primaria y, por tanto, del niño el presente curso, es la misma que el año anterior. La conducta del niño en casa es descrita como normal. Los exámenes médicos a los que ha sido sometido no arrojan ningún déficit físico ni sensorial. Sin embargo, los padres temen que la causa de su escaso rendimiento sea «algo cerebral». La historia familiar de JM no presenta datos dignos de mención. Se cita a los padres y al niño para una segunda entrevista y se les pide aporten a ella: un informe del colegio sobre el rendimiento escolar y el comportamiento del niño, en parte basado en un listado que se facilita a los padres (véase tabla 5.3, «Inventario Eyberg de conducta en niños para padres», de Eyberg, 1978), en parte en los cuadernos y trabajos escolares de años anteriores y los del actual curso. Mientras tanto, el evaluador, en su primera entrevista con JM, advierte que es un niño bien desarrollado físicamente, comunicativo, con un lenguaje aparentemente normal que presenta una escritura sin errores de omisión o trasposición pero con un trazado vacilante, con irregularidades de dirección, dimensión y entre líneas, con errores ortográficos; sin embargo, todo ello en los límites aceptables para su edad. Lee lentamente, pero sin cometer errores groseros, y el nivel de comprensión lectora es adecuado. El niño informa de que el «cole» no le gusta nada porque «la profesora le hace estar quieto mucho tiempo y le regaña por todo»; prefiere mil veces los deportes que practica después del colegio y los fines de semana. De los listados de conducta cumplimentados por los padres, puede deducirse que JM destaca fundamentalmente en el deporte y que los padres dan una gran importancia a esto. La práctica de los deportes no parece estar asociada al cumplimiento de las tareas escolares, pues dedica gran parte de la jornada extraescolar a ello. El niño no ocupa ningún tiempo en realizar trabajos escolares ni paraescolares en casa. © Ediciones Pirámide / 69 De los listados de conducta cumplimentados por la maestra se obtiene la siguiente información: el niño se distrae con facilidad, tiene dificultades de concentración, presta poca atención y es hiperactivo, a lo que la maestra parece responder prestándole atención. Por los trazos o productos de conducta escolar (cuadernos, trabajos manuales), parece comprobarse que, en efecto, el niño presenta unos niveles de habilidades escolares deficientes. El problema que presenta JM se sitúa en el contexto escolar y, concretamente, en «su clase», teniendo en cuenta que el niño tiene una sola profesora para todas las materias escolares. El problema parece localizarse en el rendimiento escolar, ya que no parece presentar otros trastornos en sus relaciones interpersonales, ni con sus iguales, ni con los adultos. La maestra informa de que, al margen de las tareas escolares, JM mantiene un comportamiento adecuado, pero que en clase el niño supone un problema que ella no sabe resolver y que ha agotado sus recursos. Los informes y observaciones tomados del individuo, de la propia situación de evaluación y de los contextos relevantes al caso van a permitir pasar a la segunda fase de la evaluación. 3.2. fase 2. formulación de hipótesis y deducción de enunciados verificables Esta fase —coincidente con la actividad de plantear supuestos verificables sobre el caso— se realiza en función de las observaciones e informaciones recibidas. Estos planteamientos están proximos a lo que se ha llamado «formulación de casos», que en los últimos años ha recibido gran atención (véase Haynes y O’Brien, 2000, número especial del European Journal of Psychological Assessment, 3, 2011, 2003). Supone dos momentos básicos: 1) formulación de hipótesis: con base en las observaciones realizadas y su ajuste a los conocimientos generales y específicos, consiste en establecer hipótesis, formulando lo que podríamos llamar una «teoría sobre el caso», y 2) deducción de enunciados verificables: se refiere a decidir con qué instrumentos va a operacionalizarse cada una de las variables presentes en cada una de las hipótesis formuladas. 70 / Evaluación psicológica. Conceptos, métodos y estudio de casos 3.2.1. Formulación de hipótesis En esta primera subfase se realiza el análisis de la información obtenida a la luz de los conocimientos generales y específicos de la psicología. En este momento del proceso serán esenciales dos aspectos: 1) la fiabilidad y validez de los datos recogidos sobre el sujeto y sus circunstancias y 2) la amplitud de los conocimientos que el evaluador tenga sobre las funciones psicológicas, las covariaciones bien establecidas entre clases de respuesta, los fundamentos fisiológicos y neurológicos de la conducta, las variables ambientales que mantienen o controlan la conducta anormal y un largo etcétera. Con ambos tipos de conocimientos (los que proceden del sujeto y su contexto y los procedentes de la psicología), el evaluador está preparado para establecer una serie de supuestos que, posteriormente, habrá de contrastar. Cuatro son los tipos de supuestos que pueden ser formulados: 1. Supuestos de cuantificación. Mediante este tipo de supuestos se trata de comprobar que un determinado fenómeno objeto de estudio se da y en qué medida aparece según unos ciertos parámetros. Por ejemplo, las quejas del sujeto sobre que llora, tiene pensamientos de suicidio, presenta taquicardia, etc., ¿se dan en realidad? y ¿en qué extensión o cantidad concreta lo hacen según una serie de parámetros (frecuencia, duración, etc.)? 2. Supuestos de semejanza. Este tipo de supuestos se refieren a la suposición de que el sujeto presenta los criterios establecidos para situarlo en una categoría (o entidad nosológica) dentro de un determinado sistema de clasificación. Denominamos a estos supuestos de «semejanza», porque pretendemos averiguar si el sujeto presenta una serie de conductas semejantes a las de otros, previamente clasificados. Así, por ejemplo, este sujeto cumple los criterios de la «depresión mayor», lo cual implica que se observa en él una serie de conductas o, en otros términos, que actúa de forma semejante a los sujetos que han sido diagnosticados con esa etiqueta. 3. Supuestos de asociación predictiva. La psicología se ha dedicado al estudio de las relaciones entre variables psicológicas y entre éstas y otros eventos externos (por ejemplo, entre rendimiento académico e inteligencia, entre éxito en los estudios y preferencias vocacionales o entre hacinamiento y conducta desviada). Así, a partir de consolidadas relaciones se puede hipotetizar la medida en la cual, en nuestro caso, las conductas objeto de estudio se dan asociadas a otras, lo que nos permite establecer predicciones apoyadas en asociaciones contrastadas empíricamente. Por ejemplo, que la falta de rendimiento escolar de un niño está asociada a comportamientos hiperactivos o que el sujeto presenta una serie de aptitudes que le capacitan para estudiar ingeniería. 4. Supuestos de asociación funcional. La psicología (en sus distintas subdisciplinas) también postula relaciones explicativas entre variables basadas en contrastaciones experimentales. Así, sabemos por los principios de condicionamiento instrumental que el refuerzo incrementa la conducta antecedente o que existen disfunciones cerebrales que son la causa del déficit del funcionamiento inteligente. Así, por ejemplo, podemos hipotetizar que la falta de rendimiento escolar se debe a que el sujeto tiene una lesión cerebral o bien que no rinde en la escuela porque su maestra refuerza sistemática y positivamente aquellas conductas perturbadoras de rendimiento. En definitiva, la relación entre el tipo de supuestos y los objetivos de evaluación es la siguiente: — Cuando se pretenda realizar un diagnóstico, tan sólo será necesario establecer supuestos de cuantificación y semejanza. © Ediciones Pirámide El proceso como procedimiento científico y sus variantes — Cuando los objetivos sean de orientación o selección, tendrán que ser formulados supuestos de cuantificación y asociación predictiva. — Cuando el objetivo sea el de cambio comportamental, tendremos que formular hipótesis de relación funcional o causal que verificaremos mediante pruebas observacionales o correlacionales en esta fase del proceso y que, en una segunda fase, si ello es requerido, podrán serlo experimentalmente. 3.2.2. Deducción de enunciados verificables Las hipótesis son de tipo general, por ello, difícilmente verificables si no estan especificadas mediante medidas. En otras palabras, se requiere especificar las variables involucradas mediante los instrumentos con los que van a ser estudiadas o medidas. Por tanto, la deducción de enunciados verificables permitirá establecer conclusiones contrastables, lo cual conlleva que las hipótesis (y las variables que contienen) estén debidamente operacionalizadas según los instrumentos de evaluación a aplicar. Ello conlleva dos pasos: — Realizar el listado de las variables implicadas. — Seleccionar los tests y técnicas concretas (utilizando los criterios psicométricos pertinentes para su selección; véase capítulo 4) con los que se van a evaluar, así como el procedimiento a seguir en la evaluación. Así, por ejemplo, si en un caso de orientación pretendemos examinar las preferencias vocacionales del sujeto, deberemos tomar decisiones sobre qué instrumentos evalúan mejor esas preferencias. O si lo que deseamos es seleccionar al mejor candidato para un puesto de trabajo y por el análisis de ese puesto sabemos que se requieren en él habilidades de persuasión, tendríamos que © Ediciones Pirámide / 71 decidir qué instrumento sería el más idóneo para evaluar esa habilidad concreta. En definitiva, las respuestas tentativas a los cuestionamientos sobre el caso serán adoptadas en forma de supuestos —de cuantificación, de clasificación, de asociación predictiva y de asociación funcional— que habrán de ser verificados durante el proceso descriptivo-predictivo. En definitiva, la lógica del método científico nos lleva a realizar una afirmación: Si la hipótesis es verdadera, entonces [...] el sujeto obtendrá una determinada puntuación en la variable X medida por el instrumento Y mediante el procedimiento Z. Una última condición muy deseable que debe cumplir la operacionalización de las variables y, por tanto, la deducción de enunciados verificables es que cada una de las variables esté operacionalizada con más de un instrumento con el fin de conseguir la debida triangulación de cada una de ellas (Cook, 1985). Ello es importante porque en psicología es poco frecuente encontrar una medida verdadera (sin error; véase capítulo 4) de una variable, y, por tanto, nos debemos aproximar a cada variable en examen mediante distintos instrumentos que, a su vez, tengan diferentes errores de medida para, así, lograr una mejor medición de la variable (o constructo) que queremos medir. Como es lógico, en todo este proceso de formulación de hipótesis y deducción de enunciados verificables van a influir los conocimientos teóricos y técnicos del evaluador, ya que seleccionará las variables implicadas en los supuestos que ha establecido, así como la mejor forma de proceder a su análisis. Así también, sus conocimientos de la metodología en evaluación le van a facilitar el establecimiento del procedimiento a seguir durante la verificación que le permita conocer la bondad de los datos que va a obtener, así como controlar cualquier variable que pueda amenazar la bondad de los resultados futuros y, por tanto, la bondad en la contrastación de las hipótesis. Vamos a seguir ejemplificando esta fase del proceso a través del caso de JM; en él fueron formuladas las siguientes hipótesis: 72 / Evaluación psicológica. Conceptos, métodos y estudio de casos — JM rinde escasamente en la escuela. — Su falta de rendimiento no está asociada a una baja inteligencia o a un tipo de personalidad perturbada (para su edad). — JM no presenta indicadores conductuales de disfunción cerebral. — Existe una asociación entre la falta de rendimiento y conductas escolares perturbadoras de éste, como la desatención y otras conductas inhibidoras de ejecución. — Las conductas perturbadoras asociadas a la falta de rendimiento escolar están asociadas también a la atención que la maestra dispensa a JM cuando las ejecuta. — JM no recibe ningún refuerzo cuando sus comportamientos son facilitadores de rendimiento en clase. Así, las variables supuestamente implicadas en el caso de JM (siguiendo la nomenclatura de nuestra síntesis conceptual presentada en el capítulo 1) son: 1. Referidas a la conducta problema: especificación cuantitativa del rendimiento escolar y conductas facilitadoras o inhibidoras del rendimiento. 2. Referidas a las variables personales, potencialmente relevantes: inteligencia, condiciones de personalidad. 3. Referidas al ambiente y su relación funcional con el rendimiento escolar: contingencias ambientales dispensadas por la maestra de las conductas facilitadoras y perturbadoras del rendimiento. 4. Referidas al organismo: posible disfunción cerebral. En este caso, se consideró necesario efectuar un análisis de las variables implicadas y de sus relaciones, así como un análisis funcional entre las variables ambientales (condiciones E1 y E2) y las conductuales (conductas problema y repertorios básicos de conducta) y, potencialmente, las variables biológicas que pudieran estar asociadas con las conductas problema. Las técnicas elegidas con el fin de permitir verificar los enunciados deducidos fueron las siguientes: — Calificaciones escolares como medida del rendimiento. — Código de observación de conductas perturbadoras en clase de O’Leary et al. (1971), con el fin de comprobar la frecuencia de este tipo de conductas en el niño. — Escala de Medida de la Inteligencia para Niños de Wechsler, 1971 (ediciones TEA). — Test de Medida de la Inteligencia Terman Merrill (edición Germain y Rodrigo, 1959). — Test de Discriminación Neurológica (QNST) (Mutti, Sterling y Spalding, 1978). — Test de Retención Visual (TRVB) de Benton (1989) (administración A, forma C). — Batería de Socialización (BAS-1) de Silva y Martorell (1983,1987) — Matriz de Interacciones maestra-niño en la que figuran como antecedentes las conductas facilitadoras (obediencia, tarea sostenida, etc.) e inhibidoras (desatención, etc.) del rendimiento y como consecuencia la atención o desatención del niño ante la maestra (atención positiva o negativa) o la no atención de la maestra. Los enunciados deducidos fueron los siguientes: — Las calificaciones de JM serán bajas. — La observación sistemática en el aula permitirá establecer la aparición significativa de las siguientes categorías conductuales: «levantarse de la silla», «juego con ruido», «no atender a la tarea», «respuestas de orientación». — JM obtendrá un CI superior a 100 tanto en el Test de Medida de la Inteligencia Terman Merrill como en la Escala de Medida de la Inteligencia WISC. — Obtendrá una puntuación inferior a 25 en el QNST. — En el Test de Retención Visual de Benton alcanzará más de 4 puntos y cometerá menos de 11 errores. — En el BAS-1 no obtendrá puntuaciones que permitan suponer una personalidad perturbada. — La observación mediante la matriz de interacciones dará como resultado que la maestra presta atención a las conductas perturbadoras del rendimiento, mientras que las © Ediciones Pirámide © Ediciones Pirámide CUADRO 2.1 Plan de Análisis Conductual (PAC) Variables potencialmente relevantes Conductas problema (C) Ambientales Históricas (E1) Descripción Técnicas Rendimien- Califito escolar caciones escolares Conductas Código de perturbaobservación doras de rendimien- de O’Leary to en clase Biológicas Personales (RBC) Descripción Técnicas Inteligencia Terman Merrill WISC Condiciones personalidad BAS-1 Descripción Manejo anoxia durante el parto Técnicas Entrevista Actuales (E2) Descripción Atención maestra a conductas perturbadoras Descripción Técnicas Actuales (02-03) Descripción Técnicas Matriz inte- Disfunción QNST racciones cerebral TRVB El proceso como procedimiento científico y sus variantes No atención maestra a conductas facilitadoras Técnicas Históricas (01) / 73 74 / Evaluación psicológica. Conceptos, métodos y estudio de casos conductas facilitadoras del rendimiento son seguidas de no atención. — Una síntesis de las hipótesis, variables e instrumentos implicados en el caso de JM se presenta en el cuadro 2.1. En él podemos observar cómo cada una de las variables (con excepción hecha del rendimiento académico) es evaluada por más de un instrumento de medida. Esta sucesión de pasos queda reflejada en el PAC (Plan de Análisis Conductual; FernándezBallesteros, 1994; véase apéndice en CD) como recurso didáctico a la hora de planificar la evaluación, y aparece en el cuadro 2.1. El PAC es un procedimiento didáctico que ayuda a organizar y presentar ordenadamente las variables de cada una de las hipótesis formuladas y la deducción de enunciados verificables mediante la elección de las técnicas e instrumentos con los que puede ser evaluada cada una de esas variables. En resumen, en el PAC figuran todas las potenciales agrupaciones de variables que puedan estar presentes en las hipótesis permitiendo la introducción de los instrumentos que van a administrarse para evaluar dichas variables, y todo ello a partir del heurístico presentado en el capítulo 1, basado en la teoría de Staats, en el que se organizan las potenciales variables relevantes en la evaluación de una conducta problemática (figura 1.3; Fernández-Ballesteros y Staats, 1992; Staats, 1997): a) Selección de las variables consideradas conducta/s problema y de los instrumentos o técnicas de evaluación con las que puedan ser evaluadas (C). b) Selección de las variables personales (repertorios básicos de conducta o RBC) que podrían estar funcionalmente relacionadas con el problema, así como de los correspondientes instrumentos de evaluación. c) Selección de las potenciales variables ambientales —y de las técnicas de evaluación para su operacionalización— que, en el pasado (E1), podrían haber determinado (o influido en) el problema y que, en la ac- tualidad (E2), podrían estar controlándolo y/o manteniéndolo. d) Selección (en su caso) de las variables biológicas del organismo —y de los exámenes biológicos pertinentes para su medida realizados por los especialistas correspondientes— que en el pasado (O1) o en el presente (O2 y O3) puedan estar funcionalmente asociadas a las conductas problema. Como se ha dicho anteriormente, la cumplimentación del PAC estará, por supuesto, mediatizada por los conocimientos tecnológicos, habilidades y experiencia del evaluador. El PAC da cuenta del plan para la fase 2 del proceso y permite proceder a la fase 3 de contrastación. Hasta aquí una descripción pormenorizada de la fase 2 de formulación de hipótesis y deducción de enunciados verificables. Pasaremos a continuación a describir el proceso de contrastación de las hipótesis. 3.3. fase 3. Contrastación: administración de tests y otras técnicas de evaluación Tres son las subfases que se integran en la fase de contrastación del proceso descriptivo-predictivo de evaluación: 1) preparación y planificación de los instrumentos a utilizar; 2) administración de los tests y técnicas seleccionados a través de los procedimientos establecidos, y 3) el análisis de los resultados en orden a la comprobación de las hipótesis. 1. Preparación y planificación A la hora de verificar las hipótesis, el procedimiento a seguir será el siguiente: — Aplicación del WISC, el Terman Merrill, el QNST de Mutti, Sterling y Spalding y Test de Retención Visual de Benton en tres sesiones separadas entre sí. El BAS-1 será cumplimentado por la maestra tras expli© Ediciones Pirámide El proceso como procedimiento científico y sus variantes carle el instrumento antes de proceder a las sesiones de observación. — La observación del niño y/o la maestra se realizará durante dos semanas en la escuela con un período previo de habituación. Se observarán, durante dos períodos de 20 minutos cada uno, cada día, las conductas perturbadoras del niño y las interacciones maestra-niño. Se contrabalanceará el orden. Durante un primer período, se observará mediante el Código de conductas perturbadoras en clase con intervalos de 20 segundos de observación y 10 de registro durante los 20 minutos previstos cada día. En el segundo período se observará, mediante el Código de interacciones, con la misma secuencia pero sin utilizar períodos de observación y registro, sino períodos completos de observación de 20 minutos. Se muestrearán los intervalos totales de 40 minutos de forma que cada día de la semana se observe un período de tiempo distinto. Se utilizarán dos observadores entrenados. 2. Administración Las técnicas escogidas habrán de ser aplicadas a través de la metodología prevista, específica al caso, pero para algunos de los tests habrán de cumplirse rigurosamente las condiciones estándar que aparecen en los manuales correspondientes. En todo ello influirán decisivamente los conocimientos, habilidades y experiencia del evaluador respecto a esos instrumentos. Posteriormente, una vez realizada la aplicación y comprobada la calidad de los datos obtenidos, éstos habrán de ser debidamente ponderados y, en algunos casos, convertidos en puntuaciones normalizadas. 3. Análisis de resultados El análisis del conjunto de los datos procedentes de los distintos instrumentos aplicados, tanto a niveles cualitativos como cuantitativos, permitirá comprobar si los supuestos han sido contrastados o no. Conviene resaltar que en este análisis se © Ediciones Pirámide / 75 realizará un examen pormenorizado de las relaciones entre los distintos métodos y fuentes de información de cada una de las variables examinadas. Como en todo proceso científico, en el caso de no contrastación habrá de volverse a la fase 2 y reformular las hipótesis en virtud de los nuevos conocimientos sobre el caso. Cuando las hipótesis han sido contrastadas, los resultados habrán de ser examinados en sus repercusiones sobre los objetivos, tanto científicos como aplicados, del caso que nos ocupa. Siguiendo con nuestro ejemplo, mediante la aplicación de técnicas de recogida de información se obtuvieron los siguientes datos: El niño presentó cuatro calificaciones insuficientes (y, asimismo, la nota global) en 1.o de Primaria (matemáticas, lengua, naturaleza y ciencias sociales) en las evaluaciones finales del mes de junio, pero obtuvo la calificación de apto en todas ellas en la convocatoria de septiembre. En la 1.a y 2.a evaluaciones del 2.o curso de Primaria el niño presentó la calificación de insuficiente en estas cuatro materias. En el WISC obtiene un CI total de 111, con un CI verbal de 110 y un CI manipulativo de 107. Las puntuaciones típicas obtenidas en los diferentes subtests son las siguientes. Escala verbal: información, 12; comprensión, 13; semejanzas, 14; dígitos, 9; vocabulario, 13; escala manipulativa: figuras incompletas, 10; historietas, 13; cubos, 13; rompecabezas, 12; claves, 12, y laberintos, 10. La comparación intersujetos sitúa a JM por encima de la desviación típica de los sujetos de su edad. Podemos decir que obtiene un rendimiento intelectual «normal alto». La comparación intersubtests permite inferir que el sujeto obtiene puntuaciones significativamente inferiores en aquellos subtests que requieren atención y concentración (dígitos y figuras incompletas). En el Terman Merrill el sujeto obtiene una edad mental de ocho años y seis meses, y un CI de 120. El techo de la prueba corresponde a la edad de diez años, y la edad basal, a la de ocho años. Destaca en las pruebas que requieren comprensión, análisis y síntesis, así como en las que exigen retención visual. Obtiene el rendimiento más bajo en aquellas pruebas que evalúan concentración y memoria. 76 / Evaluación psicológica. Conceptos, métodos y estudio de casos En el Test de Retención Visual de Benton obtuvo un punto más de lo esperado dados su CI y su edad, y cometió dos errores menos de los exigibles según estas condiciones. La distribución de sus errores no aporta ningún dato digno de mención. No existe pues indicación de que se dé una perturbación de la memoria visual habitualmente asociada a disfunciones cerebrales. En el QNST obtuvo menos de 25 puntos (PD = 15, Per = 50), lo cual indica que el niño presenta las habilidades asociadas con las funciones neurológicas normales para su edad. Su rendimiento en esta prueba no está, pues, asociado a trastornos cerebrales. En el BAS-1 obtiene los siguientes centiles: liderazgo = 60, jovialidad = 50, sensibilidad social = 45, respeto-autocontrol = 45, apatía-retraimiento = 30, ansiedad-timidez = 30, agresividad-terquedad = 65. La observación sistemática a través del Código de conductas perturbadoras de clase de O’Leary presenta un 35 por 100 de «no atención a la tarea», un 37 por 100 de «respuestas de orientación» y un 12 por 100 de respuestas de «levantarse de la silla». La observación mediante la matriz de interacciones dio como resultado que el 80 por 100 de las conductas perturbadoras del niño iba seguido de atención (negativa) por parte de la maestra, y el 20 por 100 restante, de «no atención». Por otra parte, el 100 por 100 de las conductas facilitadoras de rendimiento fue seguido por la «no atención» de la maestra. Para ambos tipos de observación fue calculado el acuerdo entre los dos jueces, obteniéndose acuerdos para el Código de O’Leary de entre el 82 y el 90 por 100. Los acuerdos para la matriz de interacciones oscilaron entre el 80 y el 88 por 100. La concordancia entre las dos pruebas de medida de la inteligencia es notable, por lo que hemos de suponer que nuestros datos presentan una adecuada validez convergente. Lo mismo ocurre con las dos pruebas a través de las que se trata —grosso modo— de evaluar funciones psiconeurológicas. Esto se ve también contrastado indirectamente por el análisis intrasujeto efectuado en el WISC, en el que no aparece una distribución que haga sospechar la existencia de una disfunción cerebral. Las hipótesis formuladas sobre JM han sido contrastadas debidamente, por lo que pasamos a concluir que los déficit de rendimiento de JM no parecen estar asociados a un bajo rendimiento inte- lectual o provocados por una disfunción cerebral. Por otra parte, el escaso rendimiento escolar se contempla en relación con la desatención y otras conductas perturbadoras en la clase, y no parece que el niño obtenga refuerzos por conductas adecuadas y facilitadoras del rendimiento en clase. De estos resultados y, concretamente, del análisis funcional efectuado respecto a qué es lo que mantiene actualmente las conductas de desatención y otras conductas inhibidoras de rendimiento puede concluirse que son las consecuencias ambientales las que parecen mantenerlas. Estas conclusiones, que se han establecido a unos niveles de probabilidad aceptables, pueden ser comprobadas, a su vez, mediante procedimientos experimentales, pasando a conformar una nueva hipótesis que habrá de ser verificada experimentalmente mediante una intervención. Una vez analizados los resultados de los tests y técnicas administradas a la luz de la hipótesis (o ante la no contrastación de supuestos, planteando nuevas hipótesis), podemos pasar a la integración de todos los resultados y a comunicarlos al cliente/sujeto. 3.4. fase 4. Comunicación de resultados: el informe Todo proceso de evaluación concluye con la integración de los resultados obtenidos y su comunicación al cliente/sujeto. Ello es una condición científica, así como un requisito ético que el psicólogo debe cumplir. Esta fase tiene a su vez dos subfases: 1) integración de los resultados obtenidos y 2) comunicación al cliente/sujeto, que será oral y/o escrita. 3.4.1. Integración de resultados Existe una delimitación muy poco clara entre efectuar un análisis de los resultados a la luz de las hipótesis y su integración en una descripción global del sujeto. Evidentemente la contrastación hipótesis a hipótesis nos puede ofrecer disonancias e, incluso, incongruencias que habrán de © Ediciones Pirámide El proceso como procedimiento científico y sus variantes ser aclaradas. Como se pone de relieve en las guías para el proceso de evaluación (FernándezBallesteros, De Bruyn, Godoy, Hornke, Ter Laak, Vizcarro, Westhoff, Westmeyer y Zaccagnini, 2001; véase capítulo 4), en este punto el evaluador debe integrar los datos obtenidos de tal forma que: — El conjunto permita responder a la demanda y los objetivos de la evaluación. — Tendrá en cuenta cualquier potencial incongruencia de los resultados. — Formulará las recomendaciones pertinentes. Dependerá de cada caso particular (de la demanda y los objetivos planteados) el que, en función de los resultados obtenidos, lleguemos a una mera descripción o clasificación del sujeto y/o realicemos predicciones sobre la conducta a unos determinados niveles de probabilidad. Dependerá también de cada caso el que tengamos que orientar, seleccionar o proponer una determinada intervención en virtud de las hipótesis sobre los agentes supuestamente responsables de la conducta y del objetivo de modificarla. Finalmente, conviene señalar también que cuando durante la evaluación se detectan condiciones importantes (del sujeto, del contexto, biológicas, etc.) que trascienden la demanda e, incluso, los objetivos de la evaluación, éstas deben ser integradas también en los resultados y, en el caso de que se considere no pertinente su información escrita (al cliente), el sujeto, no obstante, debe ser informado sobre ellas. 3.4.2. Comunicación de resultados: el informe oral y/o escrito El proceso (en sus dos versiones descriptivapredictiva e interventiva-valorativa) en evaluación psicológica termina con la comunicación oral y/o escrita de sus resultados, en la que se dará, además, respuesta a la demanda del cliente/ sujeto y a los objetivos de la evaluación: diagnós© Ediciones Pirámide / 77 tico, descripción, orientación, selección o tratamiento (o recomendación de tratamientos) y, en el caso del proceso valorativo-interventivo, se expondrá también la valoración de los tratamientos aplicados. Existe diversidad de opiniones sobre si primero debe darse una información oral al sujeto y/o cliente y, posteriormente, plasmarla en un informe escrito o, por el contrario, si el informe escrito debe preceder al oral con el fin de que sea discutido con el sujeto y/o cliente. La opinión aquí mantenida es la de que el evaluador debe redactar un borrador de informe que comentará con el sujeto y/o cliente y, tras la sesión de comunicación oral (por algunos autores llamada «sesión de devolución»), redactará el informe definitivo. Estos aspectos serán tratados en el capítulo 3, que se dedicará enteramente al informe y donde se presentará tanto el informe escrito de JM (tanto en su vertiente descriptiva-predictiva como en la interventiva-valorativa) como la descripción de la «devolución» oral a sus padres del Informe correspondiente a la fase descriptivapredictiva. Finalmente, conviene señalar que para profundizar en todo ello el alumno tiene a su disposición el Sistema Interactivo Multimedia para el Aprendizaje del Proceso de Evaluación (SIMAPE), en el que la tecnología multimedia e interactiva permite ejercitarse en esta fase del proceso (Fernández-Ballesteros, Márquez, Vizcarro y Zamarrón, 2011). 4. EL PrOCESO: SU EnfOqUE InTErVEnTIVO-VALOrATIVO Ya se ha dicho que cuando la demanda (y/o los objetivos del cliente y/o sujeto en evaluación) es de cambio o modificación del comportamiento —lo cual requiere, explícita o implícitamente, una explicación de la conducta a cambiar o modificar—, el evaluador ha de adoptar una variante del proceso en la que, a la hora de comprobar esas hipótesis funcionales, se exige una intervención y su valoración. 78 / Evaluación psicológica. Conceptos, métodos y estudio de casos Teniendo en cuenta todo ello, el proceso interventivo-valorativo es, en su primera parte, idéntico al proceso que hemos visto en el capítulo anterior descriptivo-predictivo, ya que cualquier proceso interventivo requiere una previa formulación empírica del caso (también llamada «preevaluación o formulación del caso») realizada con métodos esencialmente observacionales y correlacionales. Es a partir de esos resultados cuando el evaluador se plantea hipótesis explicativas o funcionales que verificará, esta vez, a través de la manipulación experimental, mediante un determinado tratamiento, de una serie de variables hipotéticamente explicativas o funcionalmente asociadas al problema (o variables independientes) que se pretende modificar. Una vez administrado el tratamiento, habrán de comprobarse sus efectos sobre las conductas-problema (o variables dependientes). Así, en la figura 2.1b puede apreciarse cómo las cuatro primeras fases del proceso experimental son coincidentes con las del proceso descriptivo-predictivo. Es en la quinta fase cuando comienza —propiamente— el proceso interventivo-valorativo con el plan de tratamiento y su diseño y administración y, finalmente, su valoración, y todo ello a través de planteamientos metodológicos experimentales (o cuasiexperimentales). A continuación vamos a repasar las fases iniciales que hemos examinado pormenorizadamente en el capítulo anterior para después examinar con detalle las referidas al plan de intervención y a la valoración. Como podemos ver en la figura 2.1b, el proceso interventivo-valorativo integra y sigue al descriptivo-predictivo y, por tanto, conlleva sus cuatro etapas, a las que se añaden tres más, es decir, un total de siete etapas: 1) primera recogida de información con la especificación de la demanda y del problema; 2) primera formulación de hipótesis; 3) contrastación; 4) comunicación de resultados; 5) plan de tratamiento y de la valoración; 6) diseño y aplicación del tratamiento (momento no propiamente evaluativo) y, cuando procede, evaluación continua durante éste, y 7) valoración y seguimiento (su representación gráfica está plasmada en la figura 2.1b), y todo ello es coinci- dente en su mayor parte con lo establecido por Fernández-Ballesteros, De Bruyn, Godoy, Hornke, Vizcarro, Westmeyer, Westhoff y Zacagninni, 2001, 2003 (véanse, también, Fernández-Ballesteros y Carrobles, 1981; Fernández-Ballesteros, 1994; Westmeyer, 2001; Fernández-Ballesteros, Márquez, Vizcarro y Zamarrón, 2011). Dado que las cuatro primeras fases del proceso en su versión interventiva-valorativa ya han sido examinadas por corresponder al proceso descriptivo-predictivo, a continuación se presentarán las tres fases restantes. 4.1. fase 5. Plan de tratamiento y su valoración Una vez concluidas las cuatro fases del proceso descriptivo-predicitivo (también llamado en intervención psicológica preevaluación o formulación del caso), el/la psicólogo/a, conoce ya no sólo cuál es el problema sino cuáles son las condiciones que, hipotéticamente, lo causan o mantienen. Por tanto, una vez elaborados y analizados los resultados, habremos llegado a establecer un conjunto de hipótesis funcionales que constituyen la teoría sobre el caso. En otras palabras, qué constituye el problema, es decir, cuáles van a ser las variables dependientes que pretendemos modificar y cuáles son las variables causales y/o las que están asociadas funcionalmente al problema ya que se supone que lo mantienen y/o controlan. Todo ello ha debido ya ser comunicado al sujeto y/o cliente y con él/ellos se habrán tomado decisiones de cómo se va a proceder para producir el cambio demandado. Además, tanto el tratamiento como las hipótesis han de ser verificados experimentalmente, y, por tanto, se exige no sólo la planificación del tratamiento sino también cómo se va a proceder a su valoración. En resumen, antes de planificar el tratamiento debe postularse una teoría sobre el caso que conlleva una/s hipótesis funcional/es que ya ha/n debido ser operacionalizadas, especificadas y medidas, así como contrastada/s, a unos niveles de probabilidad determinados en la evaluación © Ediciones Pirámide El proceso como procedimiento científico y sus variantes / 79 Figura 2.1b.—Fases del proceso interventivo-valorativo. inicial (descriptiva-predictiva). Con todo ello, es posible pasar a diseñar el tratamiento que va a ser aplicado. Todo ello se ejecuta a través de tres tareas esenciales (véase figura 2.1b): 1. Teoría sobre el caso: selección de las variables dependientes e independientes y decisión sobre las medidas y criterios de cambio. © Ediciones Pirámide 2. Selección de las técnicas de intervención y de las variables potencialmente contaminadoras. 3. Selección del diseño de valoración. Veamos con cierto detenimiento estas tareas, que serán ilustradas con ejemplos prosiguiendo con el caso de JM. 80 / Evaluación psicológica. Conceptos, métodos y estudio de casos 4.1.1. Teoría sobre el caso 4.1.1.1. 4.1.1.2. Selección de las variables dependientes e independientes El establecimiento de una teoría sobre el caso está implícito en cualquier intervención, sea cual fuere el marco teórico de partida. Se aplica un tratamiento porque se supone que el problema objeto de estudio está «causado», controlado, mantenido o relacionado funcionalmente con una determinada variable relevante. Es esta variable (independiente) la que manipularemos con nuestro tratamiento. En los últimos años se han dedicado múltiples trabajos a esta importante herramienta conceptual (para una revisión, véanse EJPA, 2003, 2011; Haynes, 1992; Haynes y Heiby, 2003; Nezu y Nezu, 2004). Sin embargo, la teoría sobre el caso no es sino una forma de presentar nuestras hipótesis y, con ello, delimitar y nominar las variables dependientes e independientes que vamos a utilizar en nuestro diseño. El ejemplo que seguimos presentando es el de JM (figura 2.2), que más tarde se describirá pormenorizadamente. Condiciones ambientales históricas (E1) Repertorios básicos de conducta (RBC) Bajo rendimiento escolar Déficit de atención Exceso de actividad Refuerzos maestra Condiciones ambientales actuales (E2) Pero diseñar un modelo (seleccionar las variables dependientes e independientes del caso) no es suficiente; un segundo paso necesario es la selección de los instrumentos y las medidas que van a permitir operacionalizar las variables implícitas en la teoría sobre el caso o, lo que es lo mismo, cómo vamos a deducir los enunciados que deberemos verificar, a lo largo del proceso interventivovalorativo, mediante estrategias experimentales. Hay que dejar constancia de que, a pesar de que el proceso descriptivo-predictivo (o evaluación inicial) aporta un conjunto de medidas recogidas tanto de las variables dependientes como de las supuestamente independientes, es posible que algunas de ellas no nos sirvan (por sus características psicométricas o técnicas) y que sea necesario recoger nuevas mediciones a la hora de valorar el tratamiento. Por ello resulta necesario, como introducción a este apartado, discutir brevemente cuáles son los criterios de elección en virtud de los tipos de medida seleccionados y de las garantías más adecuadas de las medidas de cara a la valoración del tratamiento. a) Criterios de selección de las medidas durante la valoración del tratamiento A pesar de que todavía no se han tratado las garantías psicométricas de las medidas en evaluación, conviene que presentemos un apretado resumen de esas garantías aplicadas a la valoración. El lector deberá leer y releer el capítulo 4 a la hora de maximizar el aprendizaje de estos conocimientos. En este epígrafe tan sólo se van a resaltar las condiciones que deben tener las medidas que van a utilizarse como criterios de cambio. b) Figura 2.2.—Teoría (hipótesis funcionales) del caso de JM planteada tras la evaluación inicial o proceso descriptivopredictivo. Selección de medidas de las variables dependientes e independientes Tipos de medidas de cambio Antes de referirnos a esos criterios conviene resaltar que existen dos tipos esenciales de medidas de cambio: en agregado y moleculares. Vea© Ediciones Pirámide El proceso como procedimiento científico y sus variantes mos brevemente esta cuestión, que el lector deberá completar con la lectura del capítulo 4. Las medidas en agregado son aquellas que proceden de tests estándar que dan cuenta de constructos psicológicos cuyo/s resultado/s procede/n de un conjunto o subconjunto de los elementos de un determinado test (generalmente preguntas referidas a ámbitos muy diferentes del funcionamiento del individuo o tareas intelectuales), los cuales se agregan (y, a veces, se ponderan); por tanto, la puntuación directa final es la suma de un grupo concreto de los elementos del test y es, habitualmente, convertida en una puntuación estándar; por ejemplo, las escalas del MMPI, una puntuación directa o típica de cualquier test de inteligencia, uno o varios factores de un test de personalidad o de cualquier escala conductual que esté compuesta por un conjunto de elementos heterogéneos que se agrupan para ofrecer una puntuación directa o ponderada. En todos estos casos, la medida de cambio que proceda de agregados de conducta deberá reunir unas determinadas características psicométricas. Por otra parte, existen otras medidas moleculares que proceden de instrumentos específicos (no estándar; véase capítulo 4) de medida y, generalmente, son expresadas según parámetros de ocurrencia, frecuencia o duración que arrojan una puntuación total que es suma o promedio de esos comportamientos simples y homogéneos. Por ejemplo, frecuencia de cigarrillos fumados en una unidad de tiempo, promedio de tasa cardíaca o la duración de una idea obsesiva o de una rabieta. Lo que ahora estamos tratando de resaltar es que las medidas en agregado y las medidas moleculares habrán de presentar propiedades diferentes cuando vamos a utilizarlas a la hora de valorar una intervención (véase, también, Fernández-Ballesteros, 1992). c) Características de calidad de las medidas de cambio La mayor parte de los autores (véanse, para una revisión, Tran y Smith, 2004; Westmeyer, 2001) resaltan que son tres las características que © Ediciones Pirámide / 81 deben presentar las medidas que van a servir de base a la valoración de un tratamiento: fiabilidad, validez (o exactitud) y utilidad. Estas tres propiedades son relevantes en cualquier tipo de medida y serán tratadas en el capítulo 4. Lo que ahora se va a describir es una breve información de cómo estas características deben ser utilizadas para seleccionar las medidas de cambio en el proceso de evaluación interventivo-valorativo. Fiabilidad. La fiabilidad es una propiedad de la medida que hace referencia a su potencial error (o error de medida). A su vez, el error de medida puede proceder de distintas condiciones de la prueba: el tiempo en el que se aplica (o fiabilidad test-retest, estabilidad de la medida); la objetividad del registro u observación (o fiabilidad interjueces, entre observadores, entre entrevistadores); además, si contamos con una medida en agregado, la relación que existe entre los elementos que constituyen el test o el instrumento de medida (consistencia interna), y finalmente, si vamos a utilizarla para valorar un tratamiento, que sea sensible, es decir, que pueda verse afectada por éste. En el capítulo 4 se describirán estas características. Validez. En términos sencillos, un instrumento es válido si existe evidencia de que mide lo que pretende medir; en definitiva, si a la hora de operacionalizar las variables presentes en nuestra hipótesis hemos seleccionado instrumentos rigurosos, ello será una garantía en el momento de valorar el tratamiento con ellos. Hay que resaltar que el hecho de que nuestras variables hayan sido medidas con rigor no implicará que nuestras hipótesis lo sean, ya que el valor de éstas se comprobará experimentalmente tras el tratamiento. No cabe ninguna duda de que, a la hora de seleccionar los instrumentos que dan cuenta de los cambios tras el tratamiento, deberemos elegir aquellos que —en sus respectivos manuales— presentan adecuadas propiedades de medida. En otras palabras, si el objetivo es modificar las habilidades sociales de una persona, deberá utilizarse un instrumento que presente indicadores de validez de esa medida. En el capítulo 4 se presentan los tipos de validez más comunes en evaluación psicológica (contenido, criterio, constructo) 82 / Evaluación psicológica. Conceptos, métodos y estudio de casos y otros más innovadores (como la validez consecuencial o la validez social). El lector deberá consultar estos aspectos metodológicos para completar el resumen que aquí se presenta con la lectura del capítulo 4. Finalmente, una última garantía que han de tener las medidas seleccionadas es que posean utilidad clínica. El concepto de utilidad ha producido un largo debate en los últimos años; lo que aquí se presenta es una simplificación de la cuestión (véase, también, Silva, 1989). Utilidad. Tran y Smith (2004) señalan que la utilidad clínica de una medida depende tanto de su habilidad para detectar cambios debidos al tratamiento o sensibilidad como de su eficiencia, o bajo coste comparativo, en la administración. En definitiva, las medidas que utilicemos cuando estemos planificando el tratamiento y su valoración deben ser sensibles y eficientes. Sensibles en el sentido de que el tratamiento pueda actuar sobre ellas con facilidad, y eficientes en el sentido de su costo (en tiempo, en personal y en aparatos); por ejemplo, si en un tratamiento de una fobia simple en cuya preevaluación hemos apreciado una alta tasa cardíaca ante el estímulo temido el pulso evaluado por un nada costoso pulsómetro pudiera ser una medida sensible y eficiente para valorar un tratamiento de sensibilización sistemática. En el cuadro 2.2 se presentan las garantías más apropiadas que deben reunir las medidas en agre- gado y las medidas simples o moleculares a la hora de valorar una intervención. En definitiva, el evaluador deberá decidir: — Qué medidas procedentes de qué instrumentos deben ser seleccionadas de entre las que ya se tienen recogidas tanto de las variables dependientes como independientes. — Si en la preevaluación no se han recogido medidas apropiadas para la valoración, la tarea entonces será decidir qué nuevas medidas deben ser recogidas para poder valorar la intervención. En resumen, dado que los resultados de la evaluación inicial (o preevaluación) contrastan empíricamente una determinada teoría del caso, se trata entonces de seleccionar o/y proceder a registrar las mejores medidas —desde el punto de vista de la valoración del tratamiento— que especifican el problema que presenta el sujeto (lo cual constituye nuestra/s variable/s dependiente/s) y también las variables que lo están causando o están funcionalmente asociadas a él (que constituyen nuestra/s variable/s independiente/s). 4.1.1.3. Criterios u objetivos de cambio3 Una vez seleccionadas las medidas que nos van a servir para valorar el tratamiento y las hi- CUADRO 2.2 Criterios de calidad de las medidas para la valoración Medidas de agregado Medidas moleculares Fiabilidad Objetividad (acuerdo interjueces), fiabilidad test-retest, consistencia interna Objetividad (acuerdo interjueces, precisión), fiabilidad test-retest Validez Contenido, criterio, constructo Exactitud Utilidad Sensibilidad, eficiencia Sensibilidad, eficiencia 3 Dado el nivel de conocimientos que se pretende en esta obra, no vamos a tratar sobre temas complejos que requieren conocimientos avanzados tanto de evaluación como de intervención psicológica. © Ediciones Pirámide El proceso como procedimiento científico y sus variantes pótesis que en él subyacen, deberemos proceder a establecer en qué medida las puntuaciones obtenidas por el sujeto antes del tratamiento han de cambiar una vez administrado éste. Tres características generales deben reunir los criterios de cambio formulados (Fernández-Ballesteros, 1994e): 1. Que estén en consonancia con las necesidades y demanda del cliente/sujeto y hayan sido discutidos con él. 2. Que sean realistas (nunca irreales o difícilmente alcanzables). 3. Que estén debidamente temporalizados (en el sentido de cuándo pueden ser alcanzados y en qué orden). Siguiendo con el ejemplo de JM y trazando un recorrido de lo más general a lo más específico del caso, vamos a describir esta primera fase del plan del tratamiento y de la valoración. La hipótesis funcional es la siguiente: El deficitario rendimiento académico de JM (conducta problema) está causado o, en este caso, asociado funcionalmente a condiciones personales, como la falta de atención que presenta en clase, que, a su vez, están siendo mantenidas por la atención que les presta la maestra. Esta hipótesis funcional nos lleva a la siguiente teoría sobre el caso de JM: De ese modelo de comportamiento habremos de proceder a la selección de variables dependientes e independientes y las técnicas y/o medidas de esas variables y los criterios de cambio. En el caso que nos ocupa son las siguientes: El deficitario rendimiento académico de JM será operativizado mediante sus calificaciones escolares; en su medida se toman las del presente curso. Se pretende que, tras el tratamiento, JM obtenga en todas las materias la calificación de «suficiente» o más alta. Dado que se supone que el rendimiento académico de JM está asociado funcionalmente a dos condiciones personales: un déficit atencional y un exceso de actividad, se seleccionan como medidas de estas variables las puntuaciones obtenidas en el Código de conductas disruptivas de O’Leary et al. (1971) (véase capítulo 2). Ambos tipos de comportamien© Ediciones Pirámide / 83 tos en clase se supone que están siendo reforzados por la maestra según se ha medido por el Código de interacciones. Se supone que las conductas inhibidoras de rendimiento disminuirán significativamente en cuanto la maestra deje de prestarles atención. Además, las conductas facilitadoras de rendimiento no están asociadas a contingencias positivas ni en clase ni en su casa medidas por el Código de interacciones (véase capítulo 2). Se supone que se incrementarán significativamente las conductas facilitadoras de rendimiento cuando sean reforzadas por la maestra. JM mejorará sus calificaciones escolares (obteniendo calificaciones de «suficiente») en cuanto atienda y no actúe hiperactivamente en clase y se incrementen significativamente sus conductas facilitadoras del rendimiento (cumplimiento de tareas escolares, tiempo de estudio, etc.). 4.1.2. Selección de las técnicas de intervención y de las variables potencialmente contaminadoras Nos encontramos frente a una etapa para la cual se requieren amplios conocimientos de intervención psicológica y no sólo de evaluación. La pregunta esencial en este punto es la siguiente: ¿con qué y cómo se va a manipular la hipotética variable independiente?, y ¿qué condiciones pueden estar contaminando el tratamiento elegido? 4.1.2.1. Selección de las técnicas de intervención Aunque la elección del tratamiento exceda los conocimientos evaluativos y se adentre en la especialidad del tratamiento psicológico, consideramos necesario referirnos a dos aspectos metodológicos importantes que influyen en esta fase y que, por tanto, pueden condicionar nuestro diseño y la valoración de la intervención: el rol que el tratamiento ejerce en el diseño evaluativo y los criterios que deben guiar la selección del tratamiento. Así, en primer lugar, conviene salir al paso (aunque sea de manera muy breve) del rol asignado al tratamiento en el interjuego de las distintas variables implicadas. Algunos metodólogos consi- 84 / Evaluación psicológica. Conceptos, métodos y estudio de casos deran que el tratamiento es la variable independiente. Sin embargo, ello conlleva una sobresimplificación desmedida dado que la intervención no es ni más ni menos que la técnica de manipulación de la variable independiente (Evans, 1985). Por ejemplo, si consideramos un caso de depresión mayor (variable dependiente) en la que se hipotetiza, como variable causal, un déficit en el sistema motivacional del individuo (variable independiente), ese sistema motivacional puede ser manipulado mediante un gran número de intervenciones psicológicas (conductuales, conductuales-cognitivas o incluso exclusivamente cognitivas). En otras palabras, existen múltiples formas de tratamiento. Sin embargo, cuando seleccionamos uno específico, estamos seleccionando una específica técnica de manipulación de la variable indepediente y no la variable independiente, que ha debido de ser contrastada y seleccionada previamente. Por tanto, tras el tratamiento, deberemos comprobar los efectos de éste no sólo en la/s variable/s dependiente/s, sino en las medidas registradas de la variable independiente4. Así, deberemos comprobar que el tratamiento ha sido capaz de modificar la variable independiente y, como derivación, que se ha obtenido el cambio esperado en la variable dependiente (Fernández-Ballesteros y Staats, 1992; Fernández-Ballesteros, 1994, 2004). En segundo lugar, la elección del tratamiento ha de regirse por las pruebas existentes sobre la eficacia, efectividad y eficiencia del total de los tratamientos disponibles en la manipulación de una determinada variable independiente y en los conocimientos generales sobre intervenciones clínicas, y ello excede con mucho tanto los conocimientos evaluativos como el propio nivel de dificultad de esta obra. En breve, en distinción de Seligman (1995), se considera que un tratamiento es «eficaz» cuando ha conseguido sus objetivos mediante diseños controlados (relevancia experimental), mientras que puede considerarse «efectivo» si produce efectos en contextos clínicos en que se aplica (relevancia clínica y/o social). Finalmente, se entiende por eficiencia aquella propiedad de un tratamiento en la que se comparan sus costos con la consecución de sus objetivos. Pérez, Fernández-Hermida, Fernández y Amigó (2003) han reunido los más importantes tratamientos psicológicos con el análisis de las pruebas sobre eficacia y efectividad y el lector tiene en esa obra una valiosa fuente de información. No obstante, es importante señalar que por muchos indicadores con los que contemos sobre el valor del tratamiento elegido, ello no determina que en nuestro caso concreto lo sea (véase epígrafe sobre análisis de datos en la valoración del tratamiento), y, por tanto, la valoración del tratamiento se hace totalmente necesaria para hablar de la eficacia, efectividad y eficiencia en nuestro caso particular. En el caso de JM, tras consultar el listado de potenciales tratamientos disponibles, se llegó a la siguiente elección: La técnica de manipulación de la variable independiente seleccionada definida como desatención y excesiva actividad irrelevante en la clase fue la de un programa de reforzamiento mediante atención y refuerzo contingente ante comportamientos facilitadores de ejecución y la extinción ante conductas perturbadoras de rendimiento en la escuela. Pero con esta elección no termina esta fase desde un punto de vista evaluativo; antes de proceder al diseño pormenorizado de la intervención y a su administración, se requerirá evaluar aquellas variables que puedan influir o contaminar el tratamiento. 4.1.2.2. Evaluación y control de las variables potencialmente contaminadoras Los tratamientos psicológicos suelen imponer condiciones que pueden influir «contaminando», en alguna medida, los resultados de la interven- 4 Ésta es la manera de salir al paso de la «inmunización del tratamiento» tan criticada en el ámbito de la evaluación y modificación de conducta (véase Westmeyer, 2001). © Ediciones Pirámide El proceso como procedimiento científico y sus variantes ción. Existe bibliografía respecto al papel modulador que las expectativas del sujeto desempeñan en cualquier tratamiento que se efectúe con él (Bandura, 1987). Será pues necesario constatar el nivel motivacional del sujeto antes de someterlo a un tratamiento con el fin de, si éste no fuera adecuado, proceder a su manipulación como previa condición para iniciar el tratamiento. También los tratamientos suelen requerir una serie de condiciones básicas previas o prerrequisitos. Así, por ejemplo, todo tratamiento que requiera relajación exige una contrastación previa de la capacidad de relajación del individuo (por ejemplo: desensibilización sistemática); todo tratamiento en el que se requiera imaginar algo (por ejemplo: condicionamiento encubierto) exigirá una medida de la capacidad imaginativa del sujeto; todo tratamiento que requiera dispensar refuerzos exige la evaluación de cuáles son las condiciones reforzantes para el individuo que va a ser tratado (por ejemplo, sistema de fichas). Veamos cuáles fueron las variables que se evaluaron y trataron de controlar en el caso de JM: En el caso de JM se trataba de manipular contingentemente eventos positivos (refuerzos). Por ello, antes de proceder a la aplicación del tratamiento, tuvimos que tener en cuenta qué eventos eran los especialmente reforzantes para él con el fin de que éstos fueran utilizados a la hora de reforzar las conductas facilitadoras de rendimiento. Para evaluar este aspecto, previamente al tratamiento, se aplicó a JM el Menú de Refuerzos de Daley (1976), además de que, con el fin de utilizar múltiples fuentes de información, se pidió a los padres que utilizaran el Listado de Refuerzos para Niños de Clement y Richard (1976). Pero ello no fue todo. De entre las variables contaminadoras posibles en el caso de JM había una fundamental, a saber, la efectividad con que la maestra y los padres fueran a dispensar las consecuencias prescritas ante las conductas problema. No obstante, en este caso, no cupo evaluación de tales variables, sino simple preparación de ambos padres y maestra como dispensadores de tratamiento. En resumen, todas las condiciones que puedan ser relevantes para los tratamientos deberán © Ediciones Pirámide / 85 ser sometidas a evaluación y, en su caso, control en este momento del proceso interventivo-valorativo. 4.1.3. Selección del diseño de valoración Antes de pasar a diseñar y administrar el tratamiento, se requiere la selección del diseño de valoración. Un diseño de valoración es un plan de acción que establece quién/quiénes va/n a ser evaluados, con qué medidas y en qué momento (del proceso de evaluación-tratamiento-valoración). En principio, el mejor diseño experimental es aquel en el que se distribuye aleatoriamente a unos sujetos (seleccionados también aleatoriamente de la población de sujetos a la que se pretende generalizar) en una o distintas condiciones experimentales (a los cuales se les aplica el/los tratamiento/s) y en una situación control (en la que no se aplica) registrando las mismas medidas en ambos grupos de sujetos antes (a veces, durante) y después del tratamiento o del no tratamiento. El diseño es un ámbito de conocimiento metodológico extraordinariamente importante para el proceso evaluativo experimental (interventivo-valorativo) y, en general, para la valoración de tratamientos, intervenciones o programas. Sin embargo, ya se ha dicho repetidamente, la evaluación psicológica suele dirigirse a un solo sujeto (o a un grupo especificado de sujetos) y, por tanto, es poco frecuente que a la situación de evaluación e intervención pueda serle aplicable una metodología rigurosamente experimental y, muchas veces, ni siquiera cuasiexperimental. No obstante, sí será posible evaluar mediante diseños pre-experimentales (evaluando al sujeto —o al grupo de sujetos— antes y después de aplicar el tratamiento) o evaluando al sujeto antes, durante y después de la intervención con medidas repetidas de la variable dependiente en típicos diseños N = 1 o diseños de línea base en los que el sujeto es su propio control. El diseño que seleccionemos dependerá de la medida utilizada y, por tanto, dado que deberemos emplear varias medidas, lo más probable es que requiramos distintos diseños (pre-experimentales, 86 / Evaluación psicológica. Conceptos, métodos y estudio de casos pre-post, para las molares, y N = 1 para las moleculares). El lector deberá ampliar este tema en otros textos especializados (por ejemplo, Arnau, 1990, 1995; Botella y Barriopedro, 1995; Campbell y Stanley, 1975; Fernández-Ballesteros, 1992, 1994, 1995, 2004; Kazdin, 1980; Tran y Smith, 2004), aunque aquí se pretende ofrecer un panorama de mínimos básicos: — Quién/quiénes van a ser evaluados. Ya se ha dicho que evaluar y tratar a un solo sujeto o a un grupo especificado de sujetos restringe las posibilidades de diseño. Ello implica que habremos de evaluar a ese sujeto o a ese grupo especificado de sujetos y que no podremos compararlo con ningún otro sujeto o grupo de sujetos similar o asimilable a no ser que encontrásemos a un sujeto o a un grupo de sujetos semejantes a los que van a ser tratados, a los que no aplicaríamos ninguna intervención, lo cual podría infringir nuestro código ético. En resumen, se trata de evaluar a nuestro sujeto antes y después de la intervención o antes, durante y después de ella. — En qué momento van a ser evaluados. Las medidas que hemos debido seleccionar y que son las variables dependientes (el problema debidamente especificado) habrán y podrán registrarse antes, durante o después del tratamiento. — Cuántas veces se evalúa. El diseño más simple consiste en evaluar una sola vez antes del tratamiento y una sola vez después, nada más terminar el tratamiento o varias veces después de haber terminado el tratamiento en tiempos preestablecidos (a los tres meses, seis meses, un año). También, ya se ha dicho previamente, es posible evaluar al sujeto en la/s medida/s seleccionada/s varias veces antes (también llamado diseño de línea base), durante y después del tratamiento. — Con qué medidas van a ser evaluados. Hemos establecido una diferenciación entre las medidas en agregado (aquellas que tienen varios ítems o elementos) y aquellas que son moleculares o que se componen de un solo ítem o se refieren a una sola medida. En general, podemos decir que aquellas medidas en agregado de escasa sensibilidad ante el tratamiento no deberán ser registradas durante un prolongado tiempo y tan sólo parecen ser apropiadas en un diseño pre-post. Sin embargo, aquellas medidas moleculares muy sensibles al tratamiento son aptas para ser administradas a lo largo del proceso de evaluación e intervención: antes (hasta obtener una línea base estable), durante el tratamiento y después de que éste haya finalizado e, incluso, evaluando en un prolongado seguimiento. CUADRO 2.3 Tabla-resumen de tipos de diseños en el proceso interventivo-valorativo Diseño N = 1 Diseño preexperimental pre-post Quién/quiénes Un solo sujeto Un grupo de sujetos Un solo individuo Un grupo de individuos tomados como una unidad En qué momento Antes y después del tratamiento Antes, durante y después del tratamiento Cuántas veces Una sola vez: antes y después, y en el potencial seguimiento Varias veces: antes, durante y después del tratamiento Con qué medidas Medidas en agregado Medidas moleculares © Ediciones Pirámide El proceso como procedimiento científico y sus variantes Con el fin de presentar un recurso didáctico en el momento de planificar la valoración del tratamiento, se ha diseñado el Plan de Intervención y Valoración (PIV) con el objetivo de facilitar la organización de todos los aspectos necesarios a la hora de proceder a una intervención y su futura valoración. En el Apéndice se presenta el PIV; en él podemos apreciar los distintos aspectos sobre los que tomar decisiones y algunos de ellos con referencia a los instrumentos con los que se evaluarán y a sus condiciones psicométricas. Asimismo, en el Apéndice se presentan unas instrucciones para su uso. Finalmente, en el cuadro 2.4 se presenta el PIV aplicado a JM. En el caso de JM se planificó el siguiente diseño: Se utilizó un diseño de un solo sujeto con medidas repetidas de sus calificaciones escolares, en cada evaluación, desde el final del primer curso de EGB hasta realizar un seguimiento hasta un año después del tratamiento. Se utilizó un diseño de un solo sujeto pre-postest con seguimiento en el que se incluyeron como variables dependientes la «no atención», «actividad inapropiada» y «conductas facilitadoras en clase» medidas por el Código de observación de conductas disruptivas de O’Leary et al. (1971). loración. Dado que este texto está dedicado a la evaluación, vamos a analizar los objetivos evaluativos sin referirnos a aquellos propiamente interventivos, aquellos que se refieren a la evaluación continua o de medidas repetidas cuando se ha seleccionado un diseño de caso único: Siguiendo con nuestro ejemplo, en el tratamiento de JM, junto con un diseño pre-post, se estableció un diseño N = 1 de medidas repetidas tomando como unidad de análisis las evaluaciones escolares y por tiempo cada una de las evaluaciones parciales. Así, durante los seis meses que duró el tratamiento de JM, se tuvieron en cuenta sus calificaciones escolares habidas en las evaluaciones parciales, como puede verse en la figura 2.3. Como puede apreciarse en la figura, se tuvieron en cuenta antes de iniciar el tratamiento, como línea base, la evaluación final de 1.o de Primaria y las dos primeras de 2.o de Primaria. Durante el tratamiento siguieron registrándose la 3.a, 4.a y 5.a evaluaciones. En conclusión, aunque la fase de tratamiento es esencialmente interventiva, habremos de tener en cuenta que en diseños de N = 1 se requiere la evaluación continua o de medidas repetidas. 4.3. 4.2. fase 6. Tratamiento: diseño y administración y, en su caso, evaluación continua Hay que resaltar que por tratamiento entendemos cualquier forma de intervención psicológica cuyo objetivo sea un cambio del comportamiento (cognitivo, motor o psicofisiológico) o de otras condiciones psicológicas del sujeto. Evidentemente, ya lo hemos dicho, evaluar e intervenir son las dos tareas aplicadas esenciales de un psicólogo clínico. Ambas están —como se ha podido leer a lo largo de estas líneas— íntimamente relacionadas, pero, también, podrían ser realizadas por distintos profesionales de la psicología. Como en la anterior (fase 5), en esta fase se entremezclan actividades de intervención y de va© Ediciones Pirámide / 87 fase 7. Valoración En esta fase 7 llegamos al momento clave del proceso experimental en el que tratamos de responder a un objetivo de modificación y cambio: ¿hasta qué punto se han alcanzado los cambios comportamentales previamente establecidos? O, en otras palabras, ¿hasta qué punto se han conseguido los criterios de cambio? La lógica del método científico nos lleva a plantear tres cuestiones: que el tratamiento haya servido adecuadamente para manipular las variables independientes, que se hayan obtenido los objetivos de cambio y, finalmente, que no hayan aparecido otros problemas. Hemos de tener en cuenta que, si se han producido los cambios esperados (y no ha aparecido ningún otro problema), éstos van a ser atribuidos al tratamiento, y, a su 88 / CUADRO 2.4 Plan de Intervención y Valoración (PIV) de JM 1 N=1 Prepost X X © Ediciones Pirámide 1 Conductas objetivo Variable dependiente Rendimiento académico Medida Garantías Calificaciones — Variables independientes Criterio cambio «Suficiente» en todas Variable dependiente –Atención –Hiperactividad –Conductas facilitadoras Edición experimental: prof. Fernández-Ballesteros. Medida Garantías Código conductas disruptivas de O’Leary et al. Variables contaminadoras Variable Criterios contamide cambio nadora Acuerdo Cambio interjue- significes 98% cativo en los tres parámetros Sistema de refuerzos del niño Medida Control Menú de refuerzos de Doley. Listado de refuerzos para niños de Clemente y Richard — Expectativas de resultados Técnicas de intervención Tipo Manejo de contingencias Núm. sesiones Duración En todas Seis las sesiones meses de clases Según autor Azrin Medidas — Evaluación psicológica. Conceptos, métodos y estudio de casos Diseño El proceso como procedimiento científico y sus variantes vez, si ello ha ocurrido, vamos a aceptar como probadas nuestras hipótesis interventivas. En otras palabras, tres son las comprobaciones que debemos hacer en esta fase del proceso: — Que se haya producido un cambio, en el sentido esperado, en nuestras variables independientes. — Que se haya producido un cambio, en el sentido esperado, en las conductas objetivo de nuestro sujeto (o grupo de sujetos). — Que no haya aparecido ningún otro problema. Estos tres aspectos conceptuales habrán de valorarse por separado teniendo en cuenta que estamos actuando idiográficamente, tratando de probar los efectos de un tratamiento en una serie de medidas (en agregado o moleculares) procedentes de un solo sujeto (o en un grupo especificado de sujetos) recogidas en un momento concreto del proceso (antes, durante o después del tratamiento). Desde luego, ya se ha dicho que la elección del tratamiento se ha basado en unas hipótesis interventivas (que previamente han sido probadas mediante una observación rigurosa), que, también, el tratamiento ha debido ser elegido en función de su valor (efectividad, eficacia y eficiencia) probado en diseños de grupo y que, a su vez, las medidas seleccionadas para nuestro caso particular lo han sido en virtud de su fiabilidad, validez y utilidad. Pero conviene resaltar una vez más que la propia naturaleza de nuestro trabajo es en sí misma idiográfica (véase capítulo 1), en el sentido de que queremos comprobar si el tratamiento ha dado lugar a efectos significativos en nuestro particular sujeto (o específico grupo de sujetos) y si la/s hipótesis interventiva/s se han probado también, y ello sin pretender generalizar a otros sujetos. Teniendo en cuenta todo ello, se requerirá realizar las siguientes operaciones: — Una nueva recogida de información. — Comunicación de resultados e informe oral y/o escrito. — Seguimiento. © Ediciones Pirámide / 89 4.3.1. Recogida y análisis de datos y valoración de resultados 4.3.1.1. Recogida de información Una vez terminado el tratamiento, se trata de proceder a una nueva recogida de información sobre: — Las conductas problema, con el fin de comprobar si se han alcanzado las metas o criterios propuestos. — Las variables independientes presentes en las hipótesis interventivas formuladas. — En su caso (cuando se ha procedido a una evaluación continua o de medias repetidas), datos relativos a la administración del tratamiento. — Indagación sobre si se han producido otros cambios imputables al tratamiento (positivos o negativos). Con base en el diseño de valoración seleccionado, los datos pueden ser recogidos procedentes de distintos momentos: — Aquellos que ya lo han sido antes y (en su caso) durante la intervención, los cuales han de ser recogidos en idénticas condiciones. — Otros datos que sólo serán registrados después del tratamiento y que, generalmente, se refieren a los niveles de cambio percibido o grado de satisfacción con el tratamiento o cualquier otra condición de la que no se tiene noticia fehaciente antes o durante el tratamiento y que puede implicar efectos colaterales o no buscados. Con todo ello, se trata de establecer medidas que nos permitan dar cuenta de los cambios que se han producido en el sujeto por efecto del tratamiento, y ello debido a la bondad de nuestra/s hipótesis interventiva/s. En el cuadro 2.5 se presenta una matriz en la que aparecen combinadas las variables que han sido examinadas y el momento en el que se han recogido. Así, los diseños pre-post nos permiten contar con datos de las variables cri- 90 / Evaluación psicológica. Conceptos, métodos y estudio de casos CUADRO 2.5 Potenciales variables a examinar después del tratamiento con el fin de maximizar las comparaciones con las recogidas en otros momentos Variables Criterios de cambio Variables independientes Tratamiento Otras Antes Durante X X X X X teriales y de las variables independientes antes y después de haberse producido el tratamiento; los diseños N = 1 nos permitirán realizar comparaciones antes, durante y después de la intervención de las variables criteriales, de las variables independientes (si ello estuviera indicado) y de las variables de tratamiento. Otros aspectos relevantes pueden ser recogidos después del tratamiento, pero no nos permitirán establecer comparaciones con otras puntuaciones anteriores del propio sujeto. No vamos a extendernos en los aspectos de administración de instrumentos; en la segunda y tercera partes de esta obra y en el Apéndice el lector encontrará extensa referencia a la administración de los distintos tests y otros instrumentos de recogida de información. 4.3.1.2. Análisis de datos A tenor de lo expuesto hasta aquí, tres tipos de predicciones han de ser examinadas: — Si tras el tratamiento se han producido cambios de las conductas problema. — Si tras el tratamiento ha habido cambios significativos en las variables relevantes funcionalmente relacionadas con las conductas problema. — Si tras el tratamiento aparecen otras circunstancias no deseadas imputables al tratamiento. Dos de estas predicciones han de ser examinadas a través de análisis que nos permitan esta- Después X X X blecer diferencias entre medidas antes/durante/ después del tratamiento, mientras que la tercera predicción se refiere a otros exámenes en los que se trate de sondear comportamientos concurrentes o posteriores al tratamiento que puedan ser imputados a él post-hoc (Botella y Barriopedro, 1994). Con el fin de analizar los datos en diseños de grupo (intra o intergrupo), sabemos que existen una serie de tests de significación estadística entre dos puntuaciones antes y después de una intervención. Un estadístico «t» o un equivalente no paramétrico, un análisis de varianza o covarianza (cuando pretendemos controlar ciertas variables del pretest) nos ofrecen en diseños experimentales, cuasiexperimentales o preexperimentales de grupo la posibilidad de establecer diferencias significativas entre puntuaciones obtenidas antes, durante o después de un tratamiento. Sin embargo, estos estadísticos de grupo no son aplicables cuando lo que nos interesa es un solo sujeto. En este caso, las posibilidades que —siguiendo a Tran y Smith (2004)— se nos ofrecen son las siguientes: — Índice de cambio intrasujeto. La medida en la que el sujeto ha cambiado como para afirmar que este cambio ha sido significativo o, en otros términos, superior al azar. En resumen, la diferencia entre el post y el pretest debe ser superior al azar y, por tanto, debe ser un cambio fiable. Jacobson et al. (1984) han propuesto un Índice de Cambio Fiable (ICF) que es calculado de la siguiente manera: ICF = Postest-Pretest/Error de medida © Ediciones Pirámide El proceso como procedimiento científico y sus variantes — En esta fórmula, el error de medida es la amplitud de la distribución de los datos en la situación previa al tratamiento (es decir, si no hubiera ocurrido ningún tratamiento o cambio). Un ICF mayor de 1,96 no sería probable que ocurriera (p < .05) sin haberse producido un cambio significativo. — Comparaciones de nuestro sujeto con las procedentes de un grupo patológico. En este caso nuestro sujeto es comparado con un grupo patológico, y lo único que tenemos que tener en cuenta es la desviación estándar de ese grupo. — Comparaciones normativas. Se trata de comparar nuestra puntuación pre y post con la puntuación normativa de un test, teniendo en cuenta la desviación estándar de la distribución muestral de dicho test. En este caso, antes de seleccionar este método de análisis es de extraordinaria importancia el análisis de la muestra de estandarización, y si nuestro sujeto puede asimilarse a ella y es posible realizar comparaciones. — Comparaciones criteriales. Uno de los más utilizados criterios clínicos de cambio es cuando se trata de alcanzar la normalidad en un conjunto de indicadores que previamente han sido establecidos como puntuaciones criteriales pretratamiento. En el epígrafe relativo al establecimiento de los criterios de cambio también se habló de la manera en la cual llegar a establecer lo que se pretende lograr. Hasta aquí se han presentado los análisis que podemos realizar sobre nuestras medidas de cambio, pero, una vez analizadas las medidas de cambio, se trata de establecer en base a qué cambios podemos utilizar distintas etiquetas valorativas. 4.3.1.3. Valoración de resultados En relación con la valoración de los resultados tras el tratamiento, podemos considerar dos tipos © Ediciones Pirámide / 91 diferentes de criterios utilizados: el criterio experimental y el criterio clínico o terapéutico, entre los cuales con frecuencia se dan discrepancias considerables. El criterio experimental hace referencia a la significación empírica del cambio observado como resultado de haber aplicado una determinada intervención terapéutica cuando se compara el nivel previo a la introducción de ésta. En este caso, se trata del producto no sólo de haber utilizado una intervención, sino de que se ha utilizado un diseño controlado, cuasiexperimental o N = 1 con el necesario control de variables. El criterio clínico o terapéutico tiene que ver, sin embargo, con la importancia subjetiva y social que para el sujeto representan los cambios de conducta operados en él como efecto del tratamiento. Lo importante es relacionar estos criterios con las etiquetas valorativas que suelen utilizarse referidas a los tratamientos. Como señalamos en el epígrafe referido a la selección del tratamiento, éste debe apoyarse en criterios experimentales y clínicos y, por tanto, el psicólogo debe seleccionar sus tratamientos mediante datos empíricos que prueben la efectividad (por cumplirse el criterio experimental) o la eficacia (por cumplirse el criterio clínico) del tratamiento elegido. Una vez terminado el tratamiento, y una vez recogida y analizada la nueva información, el evaluador deberá proceder a examinar si se han cumplido los distintos criterios —experimental y/o criterio clínico— tratando de examinar si el tratamiento efectuado ha sido eficaz o/y efectivo (habiendo alcanzado los objetivos o, incluso, otros efectos positivos). En todo caso, como sugieren algunos autores, ambos criterios deben utilizarse conjuntamente en la valoración de toda intervención si se desean obtener conclusiones científicamente válidas y no simples impresiones del terapeuta perfectamente maleables por medios muy diversos (Fernández-Ballesteros, 1992). Siguiendo con nuestro ejemplo, veamos qué sucedió en este momento del proceso en el caso de JM: 92 / Evaluación psicológica. Conceptos, métodos y estudio de casos Con respecto a JM, y tras cuatro meses de tratamiento y un seguimiento a los seis meses, se constató lo siguiente (véanse figuras 2.3 y 2.4): Variables independientes; como podemos observar en la figura 2.4, se aprecian los siguientes cambios esperados y coherentes con los objetivos: 2. Comportamientos problema: 1. Mejora significativamente de las calificaciones escolares obtenidas en las evaluaciones intermedias y en la final del mes de junio en comparación con las del año anterior (figura 2.3). 3. Disminución de las condiciones personales categorizadas como «desatención» (Código de Observación de O’Leary et al., 1972). Disminución de las condiciones personales categorizadas como «hiperactividad» (Código de Observación de O’Leary et al., 1972). 3,5 Tratamiento 3 2,5 2 1,5 1 0,5 0 ia ia ar o . a 1. .2 Ev rim P o . a 2. .2 Ev P . a .2 Ev rim P o . a 4. rim P .2 Ev o . a 5. ar ar ar .2 Ev ia ia ia ar ar o 3. ia ia ar rim rim P o Fi l na 2. rim P o . a 3. rim P .3 Ev Figura 2.3.—Calificaciones de JM antes, durante y después del tratamiento. 80 70 60 50 40 30 20 10 0 No atención Hiperactividad Conductas facilitadoras de rendimiento Antes Después Seguimiento Figura 2.4.—Conductas facilitadoras e inhibidoras de rendimiento de JM antes y después del tratamiento y en el seguimiento. © Ediciones Pirámide El proceso como procedimiento científico y sus variantes 4. Aumento de las conductas categorizadas como «facilitadoras de rendimiento» en la escuela (matriz de interacción). Otras condiciones potenciales relevantes: 5. No se han apreciado otros trastornos conductuales. 6. Los padres de JM y su maestra expresan su satisfacción en relación con el rendimiento de JM. En resumen, la valoración positiva de resultados implica la verificación de las hipótesis explicativas sobre el caso, así como el logro de las metas de cambio. Si no se hubiera obtenido confirmación de los supuestos formulados o se hubieran producido otros trastornos, se impondría la reconsideración del proceso en sus diferentes niveles de evaluación de la situación problemática, teniendo necesariamente que retornar a la segunda o quinta fase del proceso. De todo ello deberá ser informado el sujeto (o sus allegados), ya que éste interviene en esta fase como valorador «social» de su propio cambio (véase capítulo 4). 4.3.2. Comunicación de resultados: el informe Ya se ha señalado en este capítulo repetidamente que toda evaluación lleva consigo la comunicación de resultados al cliente y/o al sujeto y allegados de forma oral y/o escrita. En el capítulo 3 se presentan los aspectos sustantivos del informe oral y escrito, sus características, así como su organización formal, en la que se incluye la valoración. Asimismo, se encuentra el informe de JM, en el que se incluye la valoración de la intervención que vamos a presentar pormenorizadamente a continuación. 4.3.3. Seguimiento Una de las amenazas de los efectos examinados inmediatamente después del tratamiento es © Ediciones Pirámide / 93 que éstos, frecuentemente, se disipan con el tiempo e, incluso, algunos autores consideran que tras el tratamiento (a corto y medio plazo) podrían aparecer efectos negativos. Ello justifica sobradamente que el seguimiento sea una subetapa de la valoración, la última. El seguimiento implica una nueva evaluación que ha de ser planificada transcurrido un tiempo desde la aplicación del tratamiento o con intervalos regulares (por ejemplo, a los tres, seis y doce meses) en función del caso de que se trate. El o los períodos de seguimiento pueden ser más o menos largos y entrañar una o más comprobaciones. Los objetivos de esta fase son los mismos que los de la anterior, ya que implica la comprobación de si se mantienen los efectos benéficos del tratamiento y si han aparecido efectos no deseados imputables a la intervención realizada. Por ello, será necesaria una nueva recogida de información de igual forma y manera que en la anterior fase. Las etapas descritas son las siguientes (Fernández-Ballesteros, 1994, 1995): a) En primer lugar, es necesaria la nueva toma de contacto con el sujeto, como requisito previo. b) En segundo lugar, deberá llevarse a cabo una nueva evaluación de las conductas implicadas en el caso utilizando los mismos procedimientos empleados tanto antes como después del tratamiento. c) En tercer lugar, se procederá a evaluar las variables relevantes en idénticas condiciones que en las fases pre y post y, en su caso, durante el tratamiento. d) También se deberá proceder a evaluar otras variables que puedan ser importantes, posteriores al tratamiento, tanto en relación con la satisfacción y la percepción de cambio del sujeto y allegados como en referencia a la aparición de potenciales efectos negativos. e) Los datos registrados han de ser analizados, estableciendo comparaciones con los obtenidos antes, en su caso, du- 94 / Evaluación psicológica. Conceptos, métodos y estudio de casos rante e inmediatamente después del tratamiento. f ) En el caso de que se hayan estabilizado y mantenido los resultados imputados al tratamiento aplicado, esto avalará el tratamiento y las hipótesis formuladas; en caso contrario, será necesario volver a realizar nuevos supuestos. Sigamos con nuestro ejemplo: Pasado un año de finalización del tratamiento de JM, éste mantenía adecuadas calificaciones escolares y un predominio de las conductas facilitadoras frente a las inhibidoras de rendimiento en la clase (véanse figuras 2.3 y 2.4). Quisiéramos señalar, por último, que tanto la valoración positiva de los resultados obtenidos durante y tras el tratamiento como la de los obtenidos en el seguimiento, en el sentido esperado, resultan ser procedimientos de validación del propio proceso de evaluación. Así, como señalan distintos autores (Silva, 1980, 1989; Fernández-Ballesteros y Carrobles, 1981; Fernández-Ballesteros, 1994), el proceso de evaluación y cambio comportamental, junto con la validación de las hipótesis explicativas y el logro de los objetivos de cambio, permite la comprobación experimental de la evaluación. Conviene resaltar, finalmente, que existe evidencia empírica sobre que el evaluador realiza su trabajo partiendo de un proceso de toma de decisiones y resolución de problemas cuyas fases se ajustan a las propuestas aquí (véanse Adarraga y Zaccagnini, 1992; Westemeyer y Hagebock, 1992; para una revisión, véase Fernández-Ballesteros et al., 2001, 2003). De las fases aquí propuestas, como se ha dicho anteriormente, se ha derivado un conjunto de guías del proceso de evaluación normativas (que se presentan en el capítulo 4 en el epígrafe referido a las garantías del proceso; Fernández-Ballesteros et al., 2001, 2003). También se ha preparado una hoja de autovaloración del proceso de evaluación (HAPE) (tabla 4.3) que permitirá proceder a un autoexamen con el fin de detectar el cumplimiento de los distintos extremos normativos. 5. InDICACIOnES Hasta aquí hemos presentado dos tipos de procesos de evaluación. La indicación de uno y otro, ya se ha dicho, procede del tipo de demanda formulada y objetivos planteados; el proceso descriptivo-predictivo está indicado cuando lo que se pretende es un diagnóstico, una orientación o una selección, mientras que el proceso interventivo-valorativo ha de llevarse a cabo cuando la demanda de nuestro cliente es de intervención y cambio y, por tanto, debe procederse a la administración de un tratamiento y a su valoración posterior. Ambos procesos difieren también en las técnicas de contrastación de los supuestos formulados. En el proceso descriptivo-predictivo se utilizan técnicas tales como la observación, los tests, los autoinformes u otros métodos de recogida de información. Si, en algún caso, se utilizan técnicas en las que se manipula alguna variable independiente (como, por ejemplo, puede ocurrir en los tests de potencial de aprendizaje —véase Apéndice 2.4— o en los Assessment Center) con el fin de observar sus efectos sobre la ejecución del sujeto en un test (a partir de lo propuesto por Shapiro, 1951), con ello no se pretenderá más que llegar a establecer predicciones sobre los efectos de futuros tratamientos sobre el comportamiento, pero no están dirigidos a cambios duraderos del mismo. En ningún caso, durante el proceso descriptivo-predictivo, se llega a una verificación experimental de las hipótesis formuladas, sino, tan sólo, a la descripción, clasificación y predicción probabilística de la conducta del sujeto (o grupo de sujetos). Por el contrario, en el proceso interventivovalorativo la utilización de las técnicas metódicas antes señaladas se realiza con vistas a la operativización del problema y de las variables relevantes con él relacionadas; mientras que, a la hora de verificar los supuestos formulados, se emplean técnicas experimentales. Con ello se consigue la explicación funcional de la conducta y, al final de todo el estudio, lograremos una validación del proceso evaluativo. © Ediciones Pirámide El proceso como procedimiento científico y sus variantes Queda así claro que ambos procesos difieren tanto en los objetivos que con ellos pueden perseguirse como en el procedimiento de verificación de las hipótesis que se formulan. En otras palabras, si con la evaluación lo que se pretende es modificar determinados comportamientos de un sujeto o grupo de sujetos, tendrá que efectuarse a través de un proceso interventivo-valorativo, mientras que si tan sólo se plantea establecer descripciones, clasificaciones o predicciones con vistas a la orientación, diagnóstico o selección del caso que nos ocupe, lo indicado será llevarlo a cabo mediante un proceso descriptivo-predictivo. Por tanto, existen indicaciones de uno u otro proceso. Así, el proceso descriptivo-predictivo estará indicado cuando no se pretendan cambios conductuales, cuando éstos vayan a ser producidos por otros especialistas, los cuales no van a recabar la ayuda del evaluador en la valoración (como, por ejemplo, en el caso de un sujeto remitido por un médico), o cuando, si ocurren cambios posteriores a la evaluación y mediados por ella, éstos no sean provocados ni valorados o seguidos por el evaluador (como, por ejemplo, en el caso de una selección). Así, cuando ambos procesos se suceden, el descriptivo-predictivo precede y forma parte necesaria del interventivo-valorativo (como en el caso de JM) y supone una primera fase a partir de la cual se formulan enunciados funcionales sobre el caso probándose éstos mediante la aplicación de tratamientos y su valoración. En la parte tercera de esta obra, dedicada al estudio de casos, podrán ampliarse todos estos aspectos. En conclusión, ambas variantes del proceso son aplicables frente a objetivos específicos tanto científicos como aplicados y utilizan métodos de contrastación de hipótesis distintos. 6. LAS TéCnICAS DUrAnTE EL PrOCESO DE EVALUACIón PSICOLógICA A lo largo de la descripción de ambos procesos de evaluación nos hemos referido a los distintos © Ediciones Pirámide / 95 instrumentos (tests y otras técnicas de evaluación) que han de ser utilizados a la hora de operacionalizar y recoger información de cada una de las variables implicadas en el caso: entrevistas, observaciones, tests. Los métodos de evaluación van a ser descritos pormenorizadamente en la parte segunda de este texto en los capítulos 5, 6 y 7, y los tests psicométricos más utilizados lo serán en el capítulo 8 y se presentan, además, en el CD de Apéndices, por lo que no vamos a referirnos a ellos en esta sección. Lo que sí es importante es resaltar que en cada momento del proceso de evaluación (tanto descriptivo-predictivo como interventivo-valorativo) los instrumentos y tests (como herramientas que son de recogida de información de las variables implicadas en el caso) han de ser seleccionados eficientemente, en virtud de su amplitud para recoger información relevante en momentos concretos del proceso. Así, existen métodos e instrumentos de amplio espectro que habrán de ser utilizados en las primeras etapas del proceso, mientras que otros se dirigen a evaluar unos aspectos muy específicos del funcionamiento psicológico, y habrá que utilizarlos más adelante o, incluso, a la hora de valorar la intervención aplicada. En este momento en el que se está dando una visión general del proceso de evaluación parece necesario resaltar que a lo largo de él se requieren instrumentos de distinto nivel o grado en un continuo de amplitud-especificidad, amén de su coste. En la figura 2.5 se presenta un esquema en el que se trata de expresar la intervención de los tests y técnicas de evaluación a lo largo del proceso y los niveles de amplitud/especificidad durante las distintas fases del proceso de evaluación. Dos son los parámetros fundamentales manejados a la hora de encajar, jerárquicamente, las técnicas de evaluación: el costo que supone un determinado procedimiento de medida y su nivel de amplitud/especificidad. Es por este último extremo por el que hemos elegido como metáfora un «embudo» con distintos «tamices» o «cernedores» que representan, con bastante claridad, la idea que se pretende transmitir. Pero, además, los 96 / Evaluación psicológica. Conceptos, métodos y estudio de casos Amplitud-especificidad Coste Amplitud Bajo coste 1.er nivel Técnicas de amplio espectro: — Entrevista — Autobiografía — Listados de conductas — Escalas de apreciación — Observación asistemática, etc. 2.o nivel Generales: — Autorregistros — Observación sistemática — Pruebas estandarizadas de ejecución — Tests estandarizados de personalidad Específicas: — Cuestionarios o escalas de autoevaluación — Escalas de apreciación de otros Fase 1 Fases 2 3 5 6 7 3.er nivel — Observación sistemática — Registros fisiológicos Especificidad Alto coste Figura 2.5.—Las técnicas según la etapa del proceso de evaluación psicológica. procedimientos de evaluación utilizados a lo largo del proceso deben ir ganando no sólo en especificidad, sino también en rigor y exactitud. Así, sabemos que la mayor parte de las técnicas consideradas de «primer nivel» son de autoinforme, lo cual implica que sesgos procedentes del propio sujeto pueden contaminar los resultados (véanse capítulos 5 y 7). Así, por ejemplo, si un sujeto consulta por problemas de ansiedad, entre los cuales se encuentra la aparición de taquicardia, el evaluador, en un primer momento, se conformará con la información del sujeto, pero, cuando trate de comprobar la existencia de esa respuesta psicofisiológica, deberá, en un segundo momento, evaluar su aparición mediante autorregistros en los que figure el número de pulsaciones que el sujeto puede constatar por sí mismo y en qué situaciones tales respuestas aparecen, para ya en un tercer momento —cuando esta respuesta cardíaca se convierte en nuestro objetivo de cambio— ve- rificar esto mediante registros psicofisiológicos aplicados al sujeto en situaciones naturales y/o de laboratorio, lo cual desborda un primer nivel de conocimiento de la evaluación psicológica y requiere una especialización en psicología clínica y de la salud. Así, también, si el sujeto informa mediante la entrevista de constantes riñas con su cónyuge, el evaluador contrastará éstas en un segundo momento mediante escalas de apreciación aplicadas a su pareja y, finalmente, recogerá mediante observación sistemática, en el propio hogar del sujeto o en situación de laboratorio (creada al efecto), lo que ocurre en las interacciones matrimoniales. A través de estos ejemplos vemos cómo vamos ganando en especificidad y en precisión de la medida. Se tratará pues de ir contrastando con múltiples métodos y, a poder ser, diferentes fuentes los distintos aspectos relevantes al caso. En base a estos criterios, en el primer momento de especificación de la demanda y el problema © Ediciones Pirámide El proceso como procedimiento científico y sus variantes (fase 1) el evaluador utiliza técnicas de muy amplio espectro y bajo coste, como la entrevista, la autobiografía o listados generales sobre conductas, así como observación asistemática de la situación de examen, escalas de apreciación cumplimentadas por allegados y datos de archivo aportados por el sujeto. En un segundo momento, ya en la tercera fase del proceso (fase 3), es cuando el psicólogo planea la aplicación de técnicas más costosas, pero más fiables y válidas, que le van a permitir constrastar las hipótesis formuladas sobre el caso (algunas de ellas requerirán formación especializada). Cuando, en un caso en el que se requiera el cambio de conducta, se trata de seleccionar las variables dependientes (la/s conducta/s problema) / 97 e independientes (las variables relevantes funcionalmente asociadas con ellas), se tomarán aquellas medidas de mayor exactitud, las cuales procederán, en términos generales, de las técnicas de mayor coste y mayor especificidad (fases 5, 6 y 7). Es a través de estas medidas cuando, finalmente, se van a contrastar y seguir los cambios producidos como efecto del tratamiento. Obviamente, puesto que el lector aún no está familiarizado con los procedimientos de recogida de información en evaluación psicológica, podría resultar prematuro el tratamiento de estos temas. Sin embargo, nos parece importante dejar esbozada la importancia de la selección de instrumentos y tests y su conexión con el proceso evaluador. COnCLUSIOnES En este capítulo dedicado al proceso se ha tratado de presentar éste como una estrategia básica de evaluación y su importancia desde cualquier modelo teórico que se utilice. En definitiva, esencialmente se pretende poner de relieve que la evaluación, en la práctica, implica un proceso de solución de problemas a través del cual han de tomarse decisiones para dar respuesta a la demanda del sujeto. Pero el proceso de evaluación dependerá de la demanda y de los objetivos de la evaluación. Así, si los objetivos son de diagnóstico, orientación o selección, el proceso será descriptivo-predictivo y en él se utilizará una metodología eminentemente observacional y correlacional. Sin embargo, si existen objetivos de cambio, el proceso habrá de ampliarse ajustándose a estrategias experimentales articuladas en fases interventivo-valorativas a través de sus siete fases, entre las que se encuentran las cuatro fases del proceso descriptivo-predictivo. En definitiva, cuando se trata de interve- © Ediciones Pirámide nir, siempre se requerirá una primera parte evaluativa en la que el psicólogo trate de contrastar hipótesis sobre el caso mediante tests y otras técnicas de evaluación. Ello es imprescindible para llegar a un modelo teórico interventivo sobre el caso y, con base en ese modelo, establecer las predicciones de cambio en las que se articularán mediante variables dependientes, independientes (y potencialmente contaminadoras) y las técnicas de intervención o tratamiento. Una de las fases del proceso es esencialmente interventiva, y potencialmente de evaluación continua o de medidas repetidas. Una vez finalizada la intervención, habrá de procederse a la evaluación de los resultados, que nos permitirá contrastar las hipótesis interventivas y la eficacia de la intervención. Finalmente, se ha puesto de relieve la relación de las distintas fases del proceso con los tipos de técnicas. Se trata de lograr el proceso más eficiente con la utilización de las técnicas más pertinentes. 98 / Evaluación psicológica. Conceptos, métodos y estudio de casos BIBLIOgrAfÍA BáSICA Botella, J. y Barriopedro, M. I. (1995). Análisis de datos. En R. Fernández-Ballesteros (dir.). Evaluación de programas, Madrid: Síntesis. Campbell, D. T. y Stanley, J. C. (1975). Diseños experimentales y cuasi experimentales para la investigación en la enseñanza, Buenos Aires: Amorrortu. Fernández-Ballesteros, R. (dir.) (1992). Introducción a la evaluación psicológica, vol. 1, cap. 2, Madrid: Pirámide. Fernández-Ballesteros, R. (1992). Evaluación de intervenciones. En R. Fernández-Ballesteros (dir.). Introducción a la evaluación psicológica, vol. II, Madrid: Pirámide. Fernández-Ballesteros, R. (1994). El proceso en evaluación conductual. En R. Fernández-Ballesteros (dir.). Evaluación conductual hoy. Un enfoque para el cambio en psicología clínica y de la salud, Madrid: Pirámide. Fernández-Ballesteros, R., De Bruyn, E. E., Godoy, A., Hornke, L., Vizcarro, C., Westmeyer, H., Westhoff, K. y Zacagninni, J. L. (2001, 2003). Guidelines for the As- sessment Process. A proposal for discussion. European J. of Psychological Assessment, 17, 187-201 (traducción castellana en Papeles del Colegio, 2003, 84, 58-70). Fernández-Ballesteros, R., Márquez, M. O., Vizcarro, C. y Zamarrón, M. D. (2011). Sistema Interactivo Multimedia de Aprendizaje del Proceso (SIMAPE), Madrid: Pirámide. Godoy, A. (1996). Toma de decisiones y juicio clínico. Una aproximación psicológica, Madrid: Pirámide. Godoy, A. y Silva, F. (1992). La evaluación psicológica como proceso, Valencia: NAV Llibres. Silva, F. (1989). Evaluación conductual y criterios psicométricos, Madrid: Pirámide. Staats, A. W. (1997). Conducta y personalidad, Bilbao: Desclée de Brouwer. Vizcarro, C. (1987): Aproximaciones empíricas al estudio del proceso diagnóstico. Evaluación psicológica/ Psychological Assessment, 3, 299-344. Westmeyer, H. (2001). Evaluación y psicoterapia, Valencia: Promolibro. rEfErEnCIAS BIBLIOgráfICAS Alonso Tapia, J. (2004). Evaluación psicológica: Coordenadas, procesos y garantías, Madrid: Servicio de Publicaciones de la Universidad Autónoma. Arnau, J. (1990). Metodología experimental. En J. Arnau, M. T. Anguera y J. Gómez. Metodología de la investigación en ciencias del comportamiento, Barcelona: PPT. Arnau, J. (1995). Diseños experimentales de caso único. En R. Fernández-Ballesteros (dir.). Evaluación conductual hoy. Un enfoque para el cambio en psicología clínica y de la salud, Madrid: Pirámide. Bandura, A. (1987). Pensamiento y acción, Barcelona: Martínez Roca. Benton, A. L. (1989). Test de Retención Visual de Benton, Madrid: TEA. Campbell, D. T. y Stanley, J. C. (1975). Diseños experimentales y cuasi experimentales para la investigación en la enseñanza, Buenos Aires: Amorrortu. Cook, T. D. (1985). Postpositivism critical multiplisms. En L. Shotland y M. M. Marck (eds.). Social Science and Social Policy. Beverly Hills: Sage Pub. Clement, P. W. y Richard, R. C. (1976). Identifying reinforcers for children. En E. J. Masch y L. G. Terdal (eds.). Behavior therapy assessment, Nueva York: Springer. Daley, M. F. (1976). The reinforcement menue: finding effective reinforcers. En E. J. Mash y L. G. Terdal (eds.). Behavior therapy assessment, Nueva York: Springer. EJPA (2003). Special Issue: Case Formulation. European J. Psychological Assessment, 15, 1-147. EJPA (2011). Special Issue: Case Formulation. European J. Psychological Assessment, 27, 1-29. Evans, I. M. (1985). Building systems models as a strategy for target behavior selection in clinical assessment. Behavioral Assessment, 7, 21-32. Fernández-Ballesteros, R. (1980). Psicodiagnóstico. Concepto y Metodología, Madrid: Cincel-Kapelusz. Fernández-Ballesteros, R. (1983). Psicodiagnóstico, Unidades Didácticas, Madrid: UNED. Fernández-Ballesteros, R. (dir.) (1992). Introducción a la evaluación psicológica, 2 vols., Madrid: Pirámide. © Ediciones Pirámide El proceso como procedimiento científico y sus variantes Fernández-Ballesteros, R. (1994). El proceso en evaluación conductual. En R. Fernández-Ballesteros (dir.). Evaluación conductual hoy. Un enfoque para el cambio en psicología clínica y de la salud, Madrid: Pirámide. Fernández-Ballesteros, R. (2004). El proceso como procedimiento científico I. En R. Fernández-Ballesteros (dir.). Evaluación psicológica. Concepto, métodos y estudio de casos, Madrid: Pirámide. Fernández-Ballesteros, R. y Carrobles, J. A. I. (1981). Evaluación versus tratamiento. En R. FernándezBallesteros y J. A. I. Carrobles (dirs.). Evaluación conductual, Madrid: Pirámide. Fernández-Ballesteros, R. y Staats, A. W. (1992). Paradigmatic behavioral Assessment, Treatment, and Evaluation: Answering the crisis in behavioral assessment. Advances in Behavioral Research and Therapy, 14, 1-28. Germain, J. y Rodrigo, M. (1957). Test de Medida de la Inteligencia Terman-Merrill, Madrid: Espasa Calpe. Godoy, A. (1996). Toma de decisiones y juicio clínico. Una aproximación psicológica, Madrid: Pirámide. Godoy, A. y Silva, F. (1992). La evaluación psicológica como proceso, Valencia: NAV Llibres. Haynes, S. N. y O’Brian, W. H. (2000). Principles and practice of behavioral assessment, Nueva York: Kluwer/Plenum. Haynes, S. N. (1992). Models of Causality in Psychopathology, Nueva York: Macmillan Pub. Co. Haynes, S. N. y Heiby, E. (eds.) (2004). Behavioral Assessment. En M. Hersen (ed.). Comprehensive Handbook of Psychological, Nueva York: Pergamon. Haynes, S. N. y Heiby, E. (eds.) (2004). Behavioral Assessment. En M. Hersen (ed.). A Comprehensive Handbook of Psychological Assessment, Nueva York: John Wiley & Son. Hersen, M. (ed.) (2003). Comprehensive Handbook of Psychological Assessment, 4 vols., Nueva York: John Wiley & Son. Jacobson, N. S., Follette, W. C. y Revenstorf, D. (1984). Psychotherapy outcome research: Methods for reproting variability and evaluating clinical significance. Behavior Therapy, 15, 336-352. Kazdin, A. E. (1980). Research design in clinical psychology, Nueva York: Harper & Row. Maloney, M. P. y Ward, M. P. (1976). PsychologicalAssessment: a conceptual approach, Oxford University © Ediciones Pirámide / 99 Press. Mutti, M., Sterling, R. y Spalding, N. (1978). Quick Neurological Screening Test, Novato, CA: Academic Therapy Publication. Nelson, R. O. (1988). Relationship between assessment and teatment with a behavioral perspective. Journal of psychopathology and behavioral assessment, 10, 155-170. Nezu, A. M., Nezu, C. M., Peabock, M. A. y Girdwood, C. P. (2004). Case formulation in cognitivebehavior therapy. Haynes, S. N. y Heiby, E. (eds.). Behavioral Assessment. En M. Hersen (ed.). A Comprehensive Handbook of Psychological Assessment, Nueva York: John Wiley & Son. O’Leary, K. D. et al. (1972). Procedures for Classroom, Observation of teachers and Children. Manuscrito no publicado, Nueva York: State University of New York. Pérez, M., Fernández-Hermida, J. R., Fernández, C. y Amigo, I. (coord.) (2003). Guía de tratamientos psicológicos eficaces, Madrid: Pirámide. O’Leary, K. D. et al. (1972). Procedures for Classroom, Observation of Teachers and Children. Manuscrito no publicado, Nueva York: State University of New York. Pérez, E., Muñoz, M. y Ausín, B. (2003). Diez claves para la elaboración de informes psicológicos (de acuerdo con las principales leyes, estándares, normas y guías actuales). Papeles del Colegio, 86, 48-60. Seligman, M. E. (1995). The effectiveness of psychotherapy: The consumer reports study. American Psychologist, 50, 965-974. Shapiro, M. B. (1951). An experimental approach to diagnostic psychological testing. International Journal of Social Psychiatry, 408, 749-764. Shapiro, M. B. (1951). An experimental approach to diagnostic psychological testing. International Journal of Social Psychiatry, 408, 749-764. Silva, F. y Martorell, M. C. (1983, 1987). Bateria de Socialización BAS-1, 2 y 3, Madrid: TEA (véase Apéndice 3.7). Silva, F. (1999). Fundamentos psicométricos de la evaluación conductual, Madrid: Pirámide. Silva, F. (1980). Análisis funcional de la conducta en el aula. Revista de Psicología General Aplicada, 35, 63-88. Silva, F. (1989). Evaluación conductual y criterios psicométricos, Madrid: Pirámide. 100 / Evaluación psicológica. Conceptos, métodos y estudio de casos Staats, A. W. (1997). Conducta y Personalidad, Bilbao: Desclée de Brouwer. Tran, G. Q. y Smith, J. P. (2004). Behavioural Assessment in the Measurement of Treatment Outcome. En M. Hersen (ed.). Comprehensive Handbook of Psychological Assessment, vol. 3, Nueva York: Wiley. Vizcarro, C. (1987). Aproximaciones empíricas al estudio del proceso diagnóstico. Evaluación psicológica/ Psychological Assessment, 3, 299-344. Wechesler, D. (1971). Escala de Medida de la Inteligencia para niños de Wechsler, Madrid: TEA. Westmeyer, H. (2001). Evaluación y psicoterapia, Valencia: Promolibro. Westmeyer, H. y Hagebock, J. (1992). Computerassissted Assessment: A normative perspective. European Journal of Psychological Assessment, 8, 4-21. © Ediciones Pirámide Comunicación de los resultados: el informe psicológico 3 ROCÍO FERNÁNDEZ-BALLESTEROS OBJETIVOS DEL CAPÍTULO • Ser capaz de redactar un informe psicológico del caso individual científico, comprensible y útil, presentando garantías tanto científicas como éticas. • Ser capaz de informar verbalmente respecto de una evaluación psicológica realizada con base en el informe tanto al sujeto como al cliente. • Conocer y aplicar las condiciones deontológicas que rigen para los informes psicológicos tanto procedentes de las Guías para el Proceso de Evaluación Psicológica (GAP) como del código deontológico del psicólogo. © Ediciones Pirámide 1. InTrODUCCIón El proceso en evaluación psicológica —tanto descriptivo-predictivo como interventivo valorativo— termina con la comunicación oral y/o escrita de sus resultados. En la información suministrada se presentará el diagnóstico, las descripciones, orientaciones, predicciones y propuestas de intervención y, en su caso, valoración de la intervención realizada que dé respuesta a los objetivos planteados inicialmente por el sujeto o remitente. Así pues, como señala Tallent (1988), la expresión palpable de la evaluación psicológica, como culminación de un proceso, es el informe. El informe cobra importancia desde muy distintos puntos de vista: 1. Es la expresión del trabajo profesional del psicólogo, y ha de ser estrictamente científico, como cualquier informe de investigación, al mismo tiempo que ajustado a la deontología profesional (véanse cuadro 3.1 y capítulo 4). 2. El informe es un testimonio archivable y duradero sobre la tarea realizada por el evaluador en una fecha concreta y utilizando unos procedimientos bien descritos. Todo ello se podrá examinar, en cualquier momento, y repasar los resultados de la evaluación debidamente sintetizados y analizados. 3. Supone una excelente fuente de información en la contrastación de las hipótesis formuladas, base de las orientaciones efectuadas que son necesarias a la hora de la valoración del proceso y los tratamientos o intervenciones efectuados, es decir, el informe convierte la evaluación en replicable. 4. Resulta necesario a la hora de comunicar los resultados de la evaluación tanto en forma oral como escrita y tanto al sujeto como, en su caso, al cliente, personas allegadas o terceros cuando el sujeto y/o cliente así lo autoriza (maestros, otras personas relevantes, etc.) y se considere oportuno, ético y útil. 5. El informe escrito puede ser considerado un documento potencialmente legal, en el sentido de suponer una fuente de información sobre un sujeto procedente de un momento concreto de la vida de éste, en el que, en su caso, pueden apoyarse decisiones jurídicas. 6. Por último, es sin duda un rastro de conducta, tanto del cliente como del evaluador. Así, el documento puede ser utilizado con posterioridad (cuando así lo autoriza el sujeto/cliente) como fuente de medidas «no contaminadas» (por ejemplo, valórese la importancia que puede tener para un sujeto adulto, con un determinado trastorno psicológico, poder contar con documentos sobre exploraciones realizadas durante su infancia; véase capítulo 5). En definitiva, el informe ha de presentar unas características científicas y éticas. Con respecto a © Ediciones Pirámide Comunicación de los resultados: el informe psicológico las características éticas hemos de recordar que en él han de regir tanto el código deontológico del psicólogo como las Guías del Proceso de Evaluación Psicológica (GAP; véase capítulo 4). Ésa es la razón por la que vamos a presentar, en primer lugar, las características reguladas por ambos grupos normativos. 2. nOrmAS y gUÍAS PArA EL InfOrmE En el cuadro 3.1 se presentan los cinco artículos que establece el código deontológico (véase capítulo 4, Apéndice) elaborado por el Consejo de Colegios Oficiales de Psicólogos (2010), que rigen específicamente para la comunicación de / 103 resultados y el informe psicológico. Las características esenciales que marca el código deontológico son las relativas a la confidencialidad, los derechos del sujeto a conocer el informe (aunque haya sido demandado por otras personas o instituciones), a no ser que se deriven de ello males mayores, la necesidad de hacerlo comprensible y útil y la importancia de no utilizar en él un lenguaje descalificador. Las 13 Guías del Proceso de Evaluación (Fernández-Ballesteros et al., 2001, 2003; véase GAP 2.2, capítulo 4) referidas al informe y a la comunicación de resultados se presentan en el cuadro 3.2. Como podemos apreciar, las GAP se refieren a aspectos científicos y éticos que deberá presentar el informe oral y escrito. Por tanto, aunque CUADRO 3.1 Artículos relativos al informe psicológico presentes en el código deontológico del Colegio de Psicólogos (1) Artículo 12 Especialmente en sus informes escritos, el/la psicólogo/a será sumamente cauto/a, prudente y crítico/a, frente a nociones que fácilmente degeneran en etiquetas devaluadoras y discriminatorias, del género de normal/anormal, adaptado/inadaptado o inteligente/deficiente. Artículo 41 Cuando la evaluación o intervención psicológica se produce a petición del propio sujeto de quien el/la psicólogo/a obtiene información, ésta sólo puede comunicarse a terceras personas, con expresa autorización previa del/de la interesado/a y dentro de los límites de esta autorización. Artículo 42 Cuando dicha evaluación o intervención ha sido solicitada por otra persona —jueces, profesionales de la enseñanza, padres, empleadores, o cualquier otro solicitante diferente del sujeto evaluado—, este último o sus padres o tutores tendrán derecho a ser informados del hecho de la evaluación o intervención y del destinatario del informe psicológico consiguiente. El sujeto de un informe psicológico tiene derecho a conocer su contenido, siempre que de ello no se derive un grave perjuicio para él o para el/la psicólogo/a, y aunque la solicitud de su realización haya sido hecha por otras personas. Artículo 43 Los informes psicológicos realizados a petición de instituciones u organizaciones en general, aparte de lo indicado en el artículo anterior, estarán sometidos al mismo deber y derecho general de confidencialidad antes establecido, quedando tanto el/la psicólogo/a como la correspondiente instancia solicitante obligados a no darles difusión fuera del estricto marco para el que fueron recabados... Artículo 48 Los informes psicológicos habrán de ser claros, precisos, rigurosos e inteligibles para su destinatario. Deberán expresar su alcance y limitaciones, el grado de certidumbre que acerca de sus varios contenidos posea el informante, su carácter actual o temporal, las técnicas utilizadas para su elaboración, haciendo constar en todo caso los datos del profesional que lo emite. © Ediciones Pirámide 104 / Evaluación psicológica. Conceptos, métodos y estudio de casos hemos comenzado por describir las características del informe escrito, ello no excluye que éste se complemente con su descripción oral. La presentación oral ocurre esencialmente cuando se trata de aclarar potenciales puntos oscuros, siempre que el sujeto o el cliente así lo soliciten, y, en muchos casos, ello puede ocurrir como prescripción técnica. Pero, aunque fuera más oportuno comunicar los resultados verbalmente, el informe escrito siempre debe ser redactado por las razones enunciadas anteriormente. En resumen, el proceso de evaluación psicoló- gica termina con la comunicación al sujeto y/o cliente de los resultados de la evaluación y mediante la redacción de un informe, y ello es regulado tanto por el código deontológico como por las Guías del Proceso de Evaluación Psicológica (GAP). A continuación vamos a examinar los tipos de informe más frecuentes y las distintas características exigibles del informe psicológico escrito y a presentar una propuesta sobre su organización realizando también ciertas recomendaciones sobre cómo darlo a conocer, para terminar con la presentación de nuestro caso práctico. CUADRO 3.2 Guías de los GAP en cuanto a la comunicación de resultados: el informe escrito y oral 44. 45. 46. 47. 48. 49. 50. 51. 52. 53. 54. 55. 56. 57. 58. 59. 60. 61. 62. 63. 64. 65. 66. 67. La forma de presentar el informe (oral, escrita o ambas) será la apropiada. El informe incluirá un resumen con las conclusiones más importantes. El informe señalará quién es el autor, el cliente y el sujeto, así como a quién se presentará o enviará. Los datos se presentan de acuerdo con las fuentes de información, instrumentos y procedimientos utilizados. Los datos se estructurarán siguiendo criterios psicológicos y se situarán en la parte de resultados que habrá en el informe. Los asuntos que sobrepasan las demandas iniciales no se ignorarán, aunque sí serán considerados aparte. El informe responderá a las demandas del cliente con recomendaciones apropiadas. Las demandas del cliente nunca deberán quedar sin abordarse. Las fuentes de información, los instrumentos y tests utilizados quedarán reflejados con el suficiente detalle. El informe detallará los pasos y procedimientos utilizados para responder a las demandas del cliente. La sección del informe destinada a exponer los resultados reflejará el peso dado a la información obtenida y la forma en que se ha integrado. En la sección del informe sobre los resultados, cada afirmación psicológica será expresamente basada en los datos recogidos y valorada en función de su importancia con respecto a las demandas del cliente. Las inconsistencias encontradas entre los datos se discutirán en la sección sobre resultados. Cada una de las frases empleadas será clara y comprensible para el cliente. El apoyo científico de un enunciado se explicitará siempre que exista la posibilidad de que se malinterprete. La terminología técnica utilizada debe clarificarse de la forma apropiada. Los elementos descriptivos, comparativos e interpretativos se distinguirán entre sí. La interpretación de los datos no se dejará en manos del lector. Las conclusiones se expondrán con claridad, y las inferencias tentativas se señalan como tales. El evaluador discutirá con el cliente o sujeto las diferentes secciones del informe. El evaluador tratará con el cliente, sujeto u otras personas implicadas en la evaluación las posibles recomendaciones, asegurándose de que las entienden. El evaluador reflejará en el informe las cuestiones surgidas durante la información de resultados y de recomendaciones, en la versión final de éste. Si se requiere intervención y el evaluador no está cualificado para llevarla a cabo, el sujeto será remitido al profesional más adecuado. Si es pertinente, el evaluador deberá enviar un informe a los profesionales oportunos. © Ediciones Pirámide Comunicación de los resultados: el informe psicológico 3. TIPOS DE InfOrmE El informe puede ser organizado de muy distintas formas; desde lo particular y más sencillo hasta lo más global y comprometido, el informe puede realizarse con base en las técnicas aplicadas, con base en el problema o situación evaluada y con base en la teoría de base del evaluador. Dado que nuestra propuesta trata de congregar distintos componentes de estos tres tipos de informe, vamos a tratar de examinarlos con algún detenimiento. a) Basado en las técnicas Una de las formas más frecuentes de organizar el material de evaluación es aquella en la que se presentan los resultados obtenidos por el sujeto ordenados según los tests y técnicas administrados. Este tipo de informe no exige ningún esfuerzo de organización y síntesis de resultados, por lo que su redacción es francamente sencilla. Por ende, los datos incongruentes procedentes de las distintas técnicas empleadas no tienen por qué ser justificados. Por estas razones, generalmente es utilizado por evaluadores neófitos en vías de entrenamiento o bien cuando un sujeto es remitido a un psicólogo para que realice la administración de un determinado test o técnica de evaluación. El inconveniente más importante de este tipo de informe está en lo incomprensible que puede resultar para quienes no son psicólogos, de modo que el individuo que consulta a un psicólogo en demanda de ayuda, el contexto escolar que solicita orientación educativa para sus escolares o el jefe de personal que persigue la selección del mejor candidato para un puesto de trabajo no se benefician en absoluto de tal organización. b) Basado en el problema El informe basado en el problema está diseñado en función de las cuestiones planteadas por el remitente (o el sujeto). Este tipo de informe centrado en los objetivos del caso puede ser redactado en base a formatos previamente definidos. © Ediciones Pirámide / 105 Un ejemplo de este tipo de informe, que conviene resaltar por su eficacia, es el «Registro Orientado al Problema» (Problem-Oriented Record, POR), diseñado por Weed (1971). Su ventaja fundamental es la de permitir un informe unitario utilizable por distintos profesionales en situaciones clínicas, e incluso se ha generalizado electrónicamente (Rector et al., 1990). En el POR se integran cuatro componentes. En primer lugar, los datos básicos en los que se vierte toda la información que forma la base de la toma de decisión posterior. Se incluyen así datos biográficos, análisis clínicos, examen del funcionamiento intelectual, de la personalidad, etc. El segundo componente del POR está formado por el listado de problemas, en el que se incluyen trastornos médicos, ambientales, conductuales y sociales y que han sido puestos de manifiesto a través de los datos básicos. A cada uno de estos problemas le es asignado un número de identificación. El tercer componente estriba en la formulación de un procedimiento de intervención para cada uno de los problemas enumerados. Por último, el POR presenta un componente de seguimiento con el fin de registrar los distintos datos que vayan recogiéndose sobre los cambios producidos en los problemas en función de los diferentes procedimientos de intervención. Las dificultades fundamentales de este tipo de informe son las siguientes: en primer lugar, la mayor parte de los problemas tiene diferentes modalidades, aspectos o variantes, por lo que su homologación, con características de exclusivi dad y exhaustividad, es difícil. En segundo lugar, este tipo de informe presenta una versión muy limitada del funcionamiento psicológico del sujeto, ya que no se incluyen en él los aspectos positivos, sino sólo el listado de las conductas patológicas. Por último, existen dificultades en conseguir acuerdo en el término «problema», en el mismo sentido que en la definición de lo que es «anormal», por lo que describir a un sujeto únicamente enumerando una serie de «problemas» estándar puede no ser procedente. No obstante, existen ventajas también en este tipo de informe, por cuanto los problemas del sujeto y su tratamiento son claramente explicitados. 106 / c) Evaluación psicológica. Conceptos, métodos y estudio de casos Basado en la teoría Ya se ha dicho que detrás de un evaluador existe siempre una teoría de la conducta humana. Esto —que ha sido tratado como base para formular los distintos modelos de evaluación— puede servir de cauce a la hora de organizar el material del informe. Así, desde una perspectiva dinámica, en el informe psicológico se incluirán apartados como: «estructura de la personalidad», «mecanismos de defensa», etc. Así también, desde un modelo médico, deberían ser descritos y debidamente ponderados los específicos síndromes y síntomas que el sujeto presente. Existen posibilidades de división aún más particulares o específicas en base a presupuestos teóricos; por ejemplo, al seguir el modelo de Lazarus (1975) —el llamado por el acrónimo BASIC-1D’—, tendríamos que organizar los resultados del informe según los siguientes apartados: conducta, afecto, sensaciones, imaginación, cognición, funcionamiento interpersonal y drogas. Los problemas de este tipo de informe son dos en lo fundamental. En primer lugar, la restricción de la comunicación que necesariamente implica, ya que los posibles receptores del informe no tienen por qué conocer la teoría de referencia del evaluador. En segundo lugar, el hecho de tener que presentar los resultados de una evaluación en función de unas determinadas construcciones teóricas puede ser un obstáculo para cumplir con una o varias de las características enunciadas en el apartado anterior (por ejemplo, la de utilidad). La única ventaja que aporta la organización del material a partir de la teoría depende de que el evaluador tenga el mismo enfoque teórico que la persona a la cual dirige el informe. El análisis de estos tres tipos de informe ha podido llevar al lector a pensar que todos ellos son, al menos hasta cierto punto, defendibles en general o en ciertas condiciones. Así, el informe basado en los tests o técnicas resulta ser más replicable que el basado en la teoría. Del mismo modo, el informe basado en el problema parece ser más útil al sujeto que consulta que a cualquier otro. Por último, el informe basado en la teoría podría ser considerado inevitable, por cuanto una teoría está sirviendo de base a una evaluación y será, probablemente, la guía —de una manera u otra— de la integración de los resultados. 4. CArACTErÍSTICAS DEL InfOrmE El informe debe presentar tres características esenciales: a) ser un documento científico, b) servir de vehículo de comunicación y c) ser útil. Veamos con cierto detenimiento estas tres características. a) Ser un documento científico Ante todo, un informe psicológico es un documento científico. Supone el producto de un proceso ajustado a normas a través del cual se han obtenido unos resultados de los que se deriva una serie de acciones que dan respuesta a la demanda y a los objetivos previamente formulados. Dicho proceso ha sido realizado por un experto (el psicólogo evaluador, auxiliado, en su caso, por sus colaboradores) que asume la responsabilidad de todas sus acciones. Por tanto, un informe psicológico no debe diferir, en líneas generales, de lo que es el informe de una investigación científica y debe contar con los suficientes datos para identificar a su autor, así como para que lo en él vertido sea replicable o contrastable por otros evaluadores. En el cuadro 3.3 se presentan los distintos apartados propuestos por diferentes autores para que un informe reúna las condiciones éticas y científicas exigibles (Tallent, 1988; Pérez, Muñoz y Ausín, 2003). Conviene justificar algunos de estos puntos. Los tres primeros apartados se refieren a los protagonistas de la evaluación: el sujeto, el cliente (en el caso de que no sea el propio sujeto el que consulta) y el/los evaluador/es (apartados 1, 2 y 3). Por supuesto, estos datos son confidenciales (con excepción hecha de la identificación del evaluador) y tan sólo servirán, a los efectos del informe que se entrega, exclusivamente, al sujeto y/o al cliente con uso reservado. En segundo lu© Ediciones Pirámide Comunicación de los resultados: el informe psicológico CUADRO 3.3 Estructuración del informe: apartados 1. 2. 3. 4. 5. 6. 7. 8. 9. 10. 11. Datos de identificación del/los evaluador/es (nombre, apellidos y número de colegiado del responsable de la evaluación y, en su caso, de sus colaboradores). Datos de identificación del/los sujeto/s evaluado/s. Datos de identificación del/los cliente/s. Descripción de la demanda y objetivos de la evaluación. Fechas de evaluación. Tests, técnicas o aparatos de medición utilizados en la recogida de información con especificación de cuanto detalle sea pertinente (formato, fecha de la estandarización, etc.). Procedimiento seguido. Resultados cuantitativos. Integración de resultados. Conclusiones y recomendaciones. En su caso, diseño y valoración de la intervención realizada. gar, ya se ha dicho que la evaluación psicológica debe realizarse en función de la demanda y de los objetivos de evaluación, y, por tanto, ello debe ser descrito en el informe, así como las fechas de las exploraciones realizadas (4 y 5). En tercer lugar, para que una evaluación sea replicable se hace necesario que en el informe aparezcan todos los detalles relativos a los tests, técnicas, aparatos y otros procedimientos que se han utilizado. La utilización de baterías estándar de tests psicológicos resulta —por las razones ya dichas— generalmente improcedente, pero, aun así, éstas deberán estar especificadas instrumento a instrumento. Así también, además de las condiciones relativas al sujeto/s de evaluación/evaluador, fechas, objetivos y demandas, como en todo documento científico en el que se vierten los resultados de una investigación deberán figurar las siguientes particularidades: — Los tests, instrumentos y procedimientos utilizados, etc. (apartados 6 y 7). © Ediciones Pirámide / 107 — Los resultados de esos instrumentos en forma cuantitativa referidos a cada una de las técnicas utilizadas (apartado 8). — La integración de los resultados obtenidos, en la que se entrelacen tanto los aspectos cualitativos como los cuantitativos (apartado 8). — Grado de certeza con el que se emita cualquier aseveración sobre el sujeto (por ejemplo, «su funcionamiento intelectual es superior a la media con una probabilidad del 99 por 100»); en otras palabras, las descripciones, diagnósticos y predicciones formuladas sobre el caso deberán ser relativizados bien a través del nivel de probabilidad con el que se realizan, bien a través de la forma verbal en que son formulados. — Cualquier resultado o conclusión (por ejemplo, «presenta un déficit de atención», «rendirá adecuadamente en el grado de matemáticas», etc.) deberá estar justificado mediante los datos de base procedentes de las técnicas utilizadas y que apoyan esas inferencias. — Conclusiones y recomendaciones que den respuesta a la demanda y a los objetivos de evaluación (véase Fernández-Ballesteros et al., 2001). — Finalmente, cuando se trata de un proceso de evaluación, interventivo-valorativo, debe figurar también el plan de tratamiento, su administración y la valoración del cambio, por lo que, en estos casos, el informe debe contener un apartado relativo a la valoración (apartado 11). b) Servir de vehículo de comunicación No hay que olvidar que si bien el informe es necesario ética y científicamente como producto de una intervención técnica, lo es también como vehículo o transmisor de información a otras personas. Así, el informe puede ser considerado un documento duradero que deja constancia de lo acontecido. En el cuadro 3.4 se presenta un lista de sus funciones. 108 / Evaluación psicológica. Conceptos, métodos y estudio de casos El informe puede ser dirigido a distintos implicados en la evaluación psicológica. Conviene recordar que la evaluación psicológica puede ser realizada a demanda del propio sujeto, de personas allegadas a él (padres, familiares) o de otros profesionales (psiquiatras, neurólogos, médicos generales, maestros, asistentes sociales, directivos de una organización, etc.). Así, los resultados derivados de una evaluación que se presenten en un informe deberán ser expresados de tal forma que sean entendibles por la persona a la que van dirigidos, que es, generalmente, la peticionaria de la exploración o bien el cliente de la evaluación. CUADRO 3.4 Funciones comunicativas del informe 1. 2. 3. 4. Resalta la expresión de un precepto del código deontológico del psicólogo de dejar constancia de los resultados de la evaluación. El informe supone un testimonio archivable sobre la tarea realizada por el evaluador, el testimonio de un acto profesional del cual se podrán rescatar, en cualquier momento, los resultados de la evaluación debidamente sintetizados y analizados. El informe escrito puede ser considerado un documento legal en la medida en que supone una fuente de información sobre un sujeto procedente de un momento concreto de la vida de éste en el que, en su caso, pueden apoyarse decisiones jurídicas. Por último, el informe escrito supone un rastro de conducta, tanto del cliente como del evaluador. Tal documento puede ser utilizado con posterioridad como fuente de medidas no contaminadas (por ejemplo, valórese la importancia que puede tener para un sujeto adulto, con un determinado trastorno psicológico, poder contar con documentos sobre exploraciones realizadas durante su infancia; véase capítulo 5). Todo esto implica, como ya se ha dicho, que en el informe deberá figurar la persona o entidad que demandó la evaluación y a la cual se dirige el informe, pero también que éste habrá de ser redactado teniendo en cuenta al receptor. En otras palabras, el lenguaje utilizado, su extensión y su contenido formal deberán adecuarse al caso —al menos hasta cierto punto— con el fin de hacer transmisibles los resultados de la evaluación. Esto no quiere decir, en absoluto, que el evaluador se tenga que comportar «camaleónicamente» al redactar el informe, sino que debe esmerarse en utilizar una redacción comprensible, sin que esto merme la presentación de datos técnicos que permitan la contrastación de los resultados por otros psicólogos. Basándonos en las Guías para el Proceso de Evaluación-GAP (Fernández-Ballesteros et al., 2001), en el código deontológico y en las recomendaciones de Pérez, Muñoz y Ausín (2003), en el cuadro 3.5 se presentan las más importantes condiciones de un informe para que éste sea comprensible. CUADRO 3.5 Condiciones para hacer comprensible un informe — Cada afirmación debe ser expresada en un lenguaje claro y comprensible para la persona a la que va dirigido el informe, evitándose cualquier etiqueta devaluativa o discriminatoria. — Toda afirmación redactada en términos técnicos ha de ser aclarada según su base científica y también según su traducción a un lenguaje comprensible al individuo al que se dirige. — Deberá dejarse claro cuándo una información es descriptiva, comparativa o interpretativa. — No debe dejarse al lector la interpretación de los datos. — Las conclusiones deben presentarse claramente, además de que cualquier inferencia tentativa debe ser señalada. Conviene resaltar que la característica fundamental de comprensibilidad del informe no debe ser obstáculo para hacer de éste un documento científico replicable o repetible. Así, vaya por delante que la característica de rigor científico debe primar sobre otra cualquiera. Resulta perfectamente compatible una redacción clara y sencilla con la inclusión de datos técnicos. © Ediciones Pirámide Comunicación de los resultados: el informe psicológico c) Ser útil Las investigaciones existentes unánimemente llegan a la conclusión de que una de las características más aceptadas y apreciadas de los informes psicológicos es que sean útiles. Sin embargo, lo que no está claro es cuál es el concepto de utilidad. El concepto de utilidad es polisémico, e, incluso, la aceptación de los informes por ser «muy prácticos» no parece estar en relación con la manifestación expresa de recomendaciones u orientaciones. El hecho de que informes en los que se presentan características irrelevantes puedan ser plenamente aceptados por los sujetos se ha puesto múltiples veces de relieve, comenzando por Meehl (1956) a mediados del pasado siglo (y repetido en innumerables estudios con los mismos resultados) en su seminal articulo «Wanted: a cookbook», en el que propone adoptar la frase «efecto Barnum» para estigmatizar todos aquellos informes clínicos y psicométricos en los que aparecen descripciones triviales. De hecho, desde entonces, se ha llamado así al tipo de informe que presenta una combinación de aseveraciones aplicables a todos los sujetos, moderadamente negativas, neutrales o lisonjeras, del tipo: «superior a la media en inteligencia y aptitud mental», «tiene tendencia a preocuparse, pero no en exceso», «le gusta estar con la gente, especialmente con la que conoce bien», etc. Todas estas afirmaciones son aplicables a la mayor parte de la gente y, por tanto, los sujetos y hasta los remitentes aceptan los informes sin más consideraciones. En resumen, un informe no científico podrá ser aceptado en tanto en cuanto presente una combinación de aseveraciones aplicables a todos los sujetos, moderadamente negativas y neutrales. Sin embargo, el concepto que manejamos de utilidad no es el mismo que el de aceptabilidad y no tiene que ver con la validez social (a la que después nos referiremos en el capítulo 4); no basta con que un informe psicológico sea aceptado sin más, sino que ha de contener otras características para ser considerado útil. Tal vez uno de los estudios en los que aparece contrastación empírica del concepto de utilidad es el de Weiss y Bucuvalas (1981), que han indagado en los criterios de valor © Ediciones Pirámide / 109 con los que son juzgados los estudios evaluativos. Para ello procedieron, primero, interrogando sobre criterios para enjuiciar los informes evaluativos a los responsables de instituciones dedicadas a promover y juzgar este tipo de estudios valorativos en el ámbito de la salud mental, el alcoholismo y la drogadicción. Cada juez (N = 155) analizó 50 informes evaluativos y plasmó sus opiniones sobre ellos en una hoja resumen estándar, en la cual figuraban 29 dimensiones descriptivas presentadas en forma de preguntas sobre la calidad técnica, objetividad, aplicabilidad de los resultados, etc. Las respuestas fueron sometidas a varios análisis factoriales. Un análisis factorial de segundo orden puso de relieve, en definitiva, la existencia de dos superfactores principales: un criterio de bondad y un criterio de utilidad. Lo importante para nuestros fines es que el criterio de utilidad contaba con un componente fundamental: la orientación a la acción; en otras palabras, está relacionado con la formulación de recomendaciones prácticas derivadas de los resultados. En definitiva, el informe debe siempre contar con recomendaciones prácticas y orientaciones concretas en torno a los objetivos planteados en la evaluación. 5. OrgAnIZACIón DEL InfOrmE El informe es la expresión del trabajo realizado durante el proceso que parte de la demanda efectuada por el sujeto y/o el cliente. En el cuadro 3.3 se presentaron los apartados mínimos que debe contener el informe para que pueda ser considerado un documento científico. La mayor parte de los apartados hacen referencia a condiciones éticas y a la esencial característica de replicabilidad de toda actividad científica. Sin embargo, existen múltiples propuestas que completan el esquema presentado en esa tabla y que, sobre todo, amplían el apartado de resultados, que, en definitiva, es lo que se quiere comunicar y, por tanto, resulta de vital importancia para el informe. Más allá de los datos básicos que debe contener un informe, en otro lugar hemos tratado de 110 / Evaluación psicológica. Conceptos, métodos y estudio de casos agrupar las distintas propuestas en tres fundamentales: informes basados en las técnicas, en el problema o situación por la que se consulta y, finalmente, en la teoría (el informe se desarrolla en función de las construcciones esenciales de una teoría). La organización que aquí se propone trata de sintetizar esas tres propuestas: en primer lugar, en orden a hacer repetible el informe, los resultados obtenidos por el/los sujetos en evaluación en las distintas técnicas deben figurar explícitamente. En segundo lugar, en orden a hacerlo lo más útil posible, en la integración de resultados debe figurar la demanda formulada según los distintos objetivos (diagnóstico, orientación, selección y valoración de cambio) y dársele respuesta. Finalmente, también en la integración de resultados, puede darse cabida al modelo de evaluación del que parte el evaluador (de entre los mencionados en el capítulo 1). En segundo lugar, no obstante, el formato de informe que aquí se propone es el siguiente: — Datos personales del sujeto, del cliente y del/los evaluador/es y fecha de las sesiones de evaluación y del informe. — Referencia, demanda y objetivos de la evaluación. — Datos biográficos relevantes. — Conducta durante la exploración. — Técnicas utilizadas y procedimiento seguido. — Resultados cuantitativos de cada test o técnica administrada. — Integración de resultados cuantitativos y cualitativos: a) comportamientos objeto de estudio (en su caso); b) condiciones de la persona (cognitivo-lingüísticas, emocionales-motivacionales y sensomotrices), y c) condiciones socioambientales (pasadas y presentes) y, en su caso, condiciones biológicas (pasadas o presentes). — Conclusiones y recomendaciones: diagnóstico, orientación, selección y/u objetivos de cambio e intervención. — En su caso, diseño (ejecución) y valoración de la intervención. Vamos a tratar, aunque sea brevemente, cada uno de estos apartados. 1. Datos personales del sujeto, del cliente y del/los evaluador/es y fecha de las sesiones de evaluación y del informe. Figuran aquí el nombre, sexo, edad, estado civil, escolaridad, profesión y fechas de exploración. Constará también aquí el nombre del/los evaluador/es y su debida acreditación (número de colegiado). 2. Referencia y objetivos. Motivo de la evaluación y objetivos planteados tanto por el remitente del caso como por el propio sujeto y/o sus familiares. 3. Datos biográficos relevantes. Deberán figurar en este apartado aquellos datos de interés sobre las condiciones ambientales pasadas, así como sobre el contexto próximo, y algunas informaciones sobre evolución y desarrollo. También se incluirán aquí los datos sociodemográficos relevantes y una referencia a la historia del problema (en su caso). 4. Conducta durante la exploración. En este apartado figurarán los datos relevantes de observación sobre la conducta manifiesta del sujeto durante la exploración. Así, se incluirán observaciones sobre las conductas motoras externas y las conductas verbales dignas de mención (por ejemplo, temblores, falta de coordinación visomotora, llanto, verbalizaciones de inadecuación, etc.); también podrán incluirse las actitudes que el evaluador infiera sobre este tipo de conducta, como, por ejemplo, colaboración, persistencia, intolerancia, etc., siempre y cuando se vea avalado por los comportamientos de base. 5. Técnicas y procedimientos. Se realizará aquí el listado de técnicas, tests o instrumentos utilizados como dispositivos de re© Ediciones Pirámide Comunicación de los resultados: el informe psicológico cogida de información. En el caso de utilizarse tests estandarizados, deberá figurar también la muestra de tipificación utilizada en la obtención de las puntuaciones estándar, así como la fecha de edición. Figurará también toda cuestión de procedimiento que permita la contrastación de la evaluación por otro psicólogo, así como la apreciación de las garantías científicas de los datos (así, por ejemplo, si se ha recurrido a varios observadores, el acuerdo entre ellos). En el caso de ir dirigido el informe a otro profesional psicólogo, o cuando se considere necesario, en este apartado deberá figurar también copia de los protocolos obtenidos mediante los procedimientos de recogida de información. 6. Resultados cuantitativos. Se presentarán los resultados cuantitativos (puntuaciones directas, tipificadas, etc.) procedentes de los distintos tests y técnicas de evaluación administrados. En el caso de tratarse de puntuaciones directas, debe establecerse el rango de respuesta o un porcentaje que haga comprensible el dato bruto. 7. Integración de resultados. Es en este apartado donde, necesariamente, existe mayor heterogeneidad en las formas de presentación, lo cual depende tanto de la demanda y del problema como de la teoría del evaluador. Nuestra propuesta tiene, necesariamente, que adecuarse a la síntesis conceptual formulada en el capítulo 1. A partir de los resultados serán presentados por medio de los siguientes subapartados: — Comportamientos objeto de estudio (sólo en el caso de que se consulte por una situación problema) En este apartado figurará la especificación y operativización de aquellos comportamientos por los que se consulta en sus tres modalidades: motora, fisiológica y cognitivo-verbal, con mención expresa de los datos de base. © Ediciones Pirámide / 111 — Características psicológicas (funcionamiento cognitivo, afectivo y motivacional y de la personalidad o repertorios básicos de conducta, RBC) Se presentarán todos aquellos resultados referidos a comportamientos o características estables procedentes de los sistemas cognitivo-verbal, emocional-motivacional y sensomotor. Esta clasificación es perfectamente compatible con la distinción tradicional entre el funcionamiento intelectual o cognitivo, emocional y psicomotriz. Así, en nuestro informe, cuando lo requiera el caso, podrán figurar datos sobre las funciones intelectuales y, entre ellas, los resultados en torno al nivel intelectual, aptitudes, potencial de aprendizaje, memoria, etc. En funcionamiento emocional-motivacional se integraría lo hallado en relación con el mundo afectivo y motivacional del sujeto, sus actitudes, expectativas, personalidad etc. Por último, las funciones psicosensomotrices pondrían de manifiesto lo referente a aspectos tales como la coordinación visomotora, la organización espacial, el predominio lateral, etc. — Condiciones socioambientales Ya que los datos sobre condiciones ambientales pasadas se presentarán en el apartado sobre información biográfica, tan sólo habrán de analizarse aquí las condiciones ambientales que el sujeto presenta en la actualidad. Así, deberán incluirse cuáles son los contextos relevantes al caso, comportamientos diferenciales ejecutados en los distintos ambientes, situaciones problemáticas para el sujeto, tanto físicas como sociales, o estímulos físicos y sociales que mantienen ciertas conductas indeseables, etc. — Condiciones biológicas (en su caso) Integrando en este apartado los resultados procedentes de las exploraciones neuropsicológicas y neurobiológicas, si las hubo. En su caso, se incluirá también aquí un resumen de exámenes físicos realizados por otros profesionales en la medida en que sean relevantes al caso. 112 / Evaluación psicológica. Conceptos, métodos y estudio de casos Dos precauciones habrán de ser tenidas en cuenta en este apartado: • En primer lugar, es importante resaltar, una vez más, que la exploración se dirige a aspectos concretos del comportamiento y el funcionamiento psicológico —los relevantes al caso— y no tiene por qué ser necesario efectuar exploraciones no relevantes y, por tanto, tener que informar sobre todos los posibles repertorios de conducta o componentes psicológicos del individuo. • En segundo lugar, cabe destacar nuevamente que, dado que los resultados se apoyan en unos concretos datos de base, éstos deberán figurar como apoyo y aval de cualquier aseveración sobre el caso. Por ejemplo, si se dice «funcionamiento intelectual normal», habrá que añadir «WISC: CI total = 109, TermanMerrill: CI = 105», con el fin de que pueda replicarse tal afirmación y conocer qué datos, de todos los recogidos sobre el sujeto, apoyan una determinada conclusión. Ello se enfatiza tanto en las GAP como en el código deontológico. 8. Conclusiones y recomendaciones: diagnóstico, orientación, selección y, en su caso, objetivos de cambio e intervención. En este apartado se dará respuesta a los objetivos planteados. Su contenido dependerá, obviamente, del apartado segundo. Así, en un caso de orientación profesional se plantearán las profesiones para las que, supuestamente, el sujeto es apto y ante las cuales presenta motivaciones positivas. Así también, en el caso de una selección profesional, se tratará, como resultado de la evaluación, de aceptar o no al sujeto para un determinado puesto de trabajo. En un caso clínico se procurará realizar (en el caso de que éste sea pedido) un diagnóstico y/o se recomendará un determinado tratamiento. En el caso de que la orientación vaya dirigida a la realización de una determinada intervención, deberán seleccionarse y cuantificarse las conductas que habrán de servir de variables dependientes a través de las cuales se van a valorar los resultados del tratamiento, así como qué variables independientes deberán ser manipuladas y, en algunos casos, qué técnicas de tratamiento son las más indicadas. Frecuentemente, la orientación, el tratamiento o las recomendaciones son variados y de distinto orden. En este caso, deberán ser no sólo listados, sino jerarquizados con el fin de seguir un orden en la orientación e intervención. En definitiva, ya se ha dicho, en este apartado deberá darse respuesta a lo planteado al inicio de la evaluación, además de incluir todo tipo de orientaciones que el psicólogo crea vayan a repercutir positivamente en el caso. 9. En su caso, diseño (ejecución) y valoración de la intervención. Este extremo estará presente tan sólo en aquellos informes en los cuales el evaluador se haya encargado no sólo de la evaluación del caso, sino también del tratamiento y/o la valoración de éste. Cabe aquí incluir lo siguiente: 1) En primer lugar, el plan de tratamiento que se realizó y ejecutó. 2) Asimismo, se dará cuenta de la valoración y, en su caso, seguimiento del tratamiento realizado. Cabe señalar que a la hora de la evaluación del tratamiento se deberá proceder al análisis de los cambios experimentados en las variables dependientes, es decir, los datos objetivos sobre los cambios producidos por la intervención y si se han alcanzado las metas propuestas; igualmente, se tendrá en cuenta si se han producido, también, los predichos cambios en las variables independientes. Todo ello deberá verse complementado con los niveles de probabilidad que facilitan las medidas utilizadas. 3) Finalmente, también se deberá incluir lo que el sujeto, o personas allegadas a él (incluso el propio terapeuta), piensan sobre los efectos del tratamiento efectuado con el fin de considerar la validez social de la intervención (véase capítulo 4). Dado que la valoración del tratamiento generalmente se realiza en distintos momentos, después de aplicado éste puede producirse una adenda © Ediciones Pirámide Comunicación de los resultados: el informe psicológico al informe si se realizan uno o varios seguimientos efectuados sobre el caso, es decir, los cambios que en distintos momentos, después de haberse aplicado el tratamiento, se hayan producido en determinadas conductas del sujeto. Tratando de resumir, todo informe psicológico debe ser científico, comprensible y útil. La organización del informe, en su integración de resultados, depende de la demanda y de los objetivos de evaluación, por lo cual el esquema que aquí se presenta debe adaptarse a los propósitos de la evaluación. 6. — Comenzar con los resultados relativos a la demanda del sujeto/cliente y, posteriormente, examinar una por una todas las restantes conclusiones y recomendaciones teniendo en cuenta, en cada caso, las potenciales repercusiones y/o decisiones que puedan y/o deban tomarse. — Si se requiere una intervención, discutir las distintas alternativas de tratamiento existentes con sus potenciales efectos y costes y, en el caso de que el evaluador no esté preparado para realizarla, discutir con el sujeto y/o cliente el/los profesional/les que habrá/n de hacerse cargo del tratamiento. — Si se trata de un informe que incluye la valoración de una intervención, facilitar los resultados mediante gráficos u otros formatos que permitan la comprensión del cambio efectuado por el sujeto. — Mantenerse a disposición del cliente y/o sujeto para cualquier aclaración necesaria, así como, si es preciso, informar sobre potenciales psicólogos u otros especialistas que asuman el caso en el futuro. LA InfOrmACIón DEL InfOrmE Como se ha señalado más arriba, generalmente el informe escrito no es suficiente para lograr una adecuada comunicación de los resultados de la evaluación y se hace necesaria una comunicación oral al cliente o sujeto (o a ambos). Los objetivos a conseguir en la sesión de comunicación de resultados, también llamada «informe de devolución», son esencialmente dos: 1) que el sujeto y/o cliente sea informado y comprenda debidamente los resultados obtenidos, esencialmente aquellos referidos a su demanda inicial, y 2) que ello le sirva para tomar las decisiones pertinentes. Por lo que se refiere a la información de resultados, como ocurre en el informe escrito, éstos deben tener las siguientes características (con base en las GAP; véase capítulo 4): — Ser expresados en un lenguaje oral comprensible al destinatario tanto en su formato verbal como en su sentido teórico y práctico. Para ello se realizarán las necesarias aclaraciones teóricas, metodológicas y prácticas utilizando un tono sereno y tranquilizador. — Ser presentados dentro del relativismo científico en el que se encuentran, en el sentido de que toda afirmación en ciencia se mueve en un intervalo de confianza determinado. © Ediciones Pirámide / 113 Insistimos en que todas estas características se presentan aquí no como expresión del «purismo» o el perfeccionismo académico, sino porque implican buenas prácticas derivadas de las exigencias de las asociaciones profesionales y que, por tanto, deberían ser de cumplimiento obligatorio en el trabajo psicológico. 7. Un CASO PrÁCTICO A lo largo del capítulo 2, a través de la descripción y pormenorizado análisis del proceso de evaluación en sus dos variantes descriptivo-predictivo e interventivo-valorativo, hemos ido presentando, en cada una de sus fases, un caso que hemos denominado «JM». Como aparece en la figura 2.1, la primera variante del proceso descriptivo-predictivo termina cuando se alcanzan —mediante las operaciones 114 / Evaluación psicológica. Conceptos, métodos y estudio de casos básicas de descripción, clasificación y predicción— las metas aplicadas de orientación, diagnóstico, selección o propuesta de tratamiento, y que ello debe ser comunicado mediante el informe. También se ha dicho que la comunicación escrita debe estar completada con la comunicación oral (también llamada «entrevista de devolución»). Por tanto, a continuación aparece el informe psicológico de JM. Ahora bien, en ese primer informe se recomienda un tratamiento y, por tanto, la tarea del evaluador no concluye aquí con esa primera comunicación, ya que él mismo u otro profesional de la psicología tendrá que emprender un nuevo proceso de evaluación, modificación experimental y valoración del cambio, lo cual ha de realizar- se a través de la variante experimental (interventiva-valorativa) del proceso. Así, en el caso de JM, se ha producido un segundo informe (una adenda al primero) en el que se presenta el diseño y valoración de la intervención. Finalmente, es importante señalar que para tratar de normalizar ambos procesos, se ha generado un derivado de las «Guías del Proceso de Evaluación» (GAP, Fernández-Ballesteros et al., 2001, 2003): una «Hoja de autovaloración del proceso de evaluación» (HAPE, cuadro 4.4) a través de la cual se puede verificar el cumplimiento de las distintas normas que permiten garantizar la calidad del proceso de evaluación —se presentan en el capítulo 4, junto con los GAP—, y que pueden ser aplicadas al caso de JM. INFORME PSICOLÓGICO Realizado por: XYZ (núm. de colegiado: xyz). Nombre: JM. Sexo: varón. Edad: siete años y un mes. Escolaridad: 2.o de Primaria. A petición de: sus padres. Fechas de exploración: 3, 5, 7, 10, 28 de enero de 1989. Referencia y objetivos Los padres de JM consultan sobre su hijo por presentar un déficit en el rendimiento escolar. Pretenden con ello una orientación y, en su caso, el tratamiento del niño. Datos biográficos (informan los padres) Nacido de parto a término, con fórceps, 24 primeras horas en incubadora por presentar lo que fue calificado por el pediatra de un leve trastorno respiratorio. Desarrollos motor, del lenguaje, social y esfinteriano normales. Ningún dato en cuanto a trastornos conductuales en la primera infancia. Enfermedades, las normales en la edad. En familia, así como en situaciones no propiamente escolares, su conducta es descrita como «normal». Desde hace un año y medio presenta dificultades escolares con calificaciones de insuficiente en las principales materias. Los padres temen que ello sea debido a una disfunción cerebral. La maestra —que ha sido su principal profesora durante el año anterior y el presente— le describe como «infantil y poco maduro para su edad». Conducta durante la exploración JM ha colaborado a todo lo largo de la exploración, en sesiones de más de una hora, sin mostrar cansancio. © Ediciones Pirámide Comunicación de los resultados: el informe psicológico / 115 Tests, técnicas y procedimientos 1 . Tests y técnicas: — Wechsler Intelligence Scale for Children (edición TEA, 1976). — Test de Medida de la Inteligencia Terman-Merrill (edición Espasa Calpe, 1957). — Test de Discriminación Neurológica (Quick Neurological Screening Test de Mutti, Sterling y Spalding, 1978). — Test de Retención Visual de Benton (1989) (administración A, forma C). — Código de conductas perturbadoras en clase de O’Leary et al. (1971). — Matriz de interacciones maestra-niño (construida al efecto). — Batería de socialización BAS-1 de Silva y Martorell (cumplimentada por la maestra). — Análisis del material escolar producido por el niño. — Calificaciones escolares. — Entrevistas (padres, niño, maestra). 2. Procedimiento: Aplicación de los tests en tres sesiones. Administración del BAS-1 por parte de la maestra. Observación mediante el Código de conductas perturbadoras con intervalos de 20 segundos de observación y 10 de registro durante 20 minutos dos veces al día. Período total: dos semanas (con períodos de habituación). Observación con matrices de interacciones maestra-niño preparadas al efecto: períodos completos de 20 minutos, dos veces al día, durante dos semanas. Resultados cuantitativos — Escala de Inteligencia de Wechsler para Niños (WISC): Escala verbal Información Comprensión Semejanzas Vocabulario R. aritmético Dígitos CI verbal PT 12 13 14 13 12 9 110 Escala manipulativa Figuras incompletas Historietas Cubos Rompecabezas Clave números Laberintos © Ediciones Pirámide 10 13 13 12 12 10 CI manipulativo 107 CI total 111 — Escala de Medida de la Inteligencia de Terman-Merrill: Edad basal Edad techo Edad mental Cociente intelectual PT 8 años 10 años 8 años y 6 meses 120 116 / Evaluación psicológica. Conceptos, métodos y estudio de casos — Test de Discriminación Neurológica (QNST): Puntuación directa Percentil 15 50 — Test de Retención Visual de Benton: Puntuación directa de aciertos Puntuación directa de errores 5 (máx. 10) 7 — Código conductas perturbadoras: Acuerdo interjueces Conductas de no atención a la tarea Respuestas de orientación Levantarse de la silla 82-90% 35% 37% 12% — Batería de socialización BAS-1 (centiles): Liderazgo Jovialidad Sensibilidad social Respeto-autocontrol Apatía-retraimiento Ansiedad-timidez Agresividad-terquedad 60 50 45 45 30 30 70 — Matriz de interacciones (construido al efecto): Acuerdo interjueces Conductas perturbadoras seguidas de atención de la maestra Conductas perturbadoras seguidas de no atención Conductas facilitadoras de rendimiento seguidas de no atención 80-88% 80% 20% 100% Conducta durante la exploración JM se adapta adecuadamente a la situación de evaluación. Colabora en todo lo que se le pide. No se aprecian diferencias dignas de mención en su comportamiento en las distintas técnicas y tareas realizadas. El niño «explica» su falta de rendimiento en el colegio alegando que el estudio no le gusta nada porque «la profesora le hace estar quieto mucho tiempo y le regaña por todo». Hay que resaltar que durante la exploración no se presentaron conductas hiperactivas (fuera de lo que es esperable a la edad del niño) ni desatención, a pesar de que alguna de las sesiones llegó a durar una hora y cuarenta minutos. © Ediciones Pirámide Comunicación de los resultados: el informe psicológico / 117 Integración de resultados • Conductas objeto de estudio: El niño obtuvo cuatro calificaciones insuficientes (y, asimismo, la nota global) en 1.o de Primaria (matemáticas, lengua, naturaleza y ciencias sociales) en las evaluaciones finales del mes de junio, pero consiguió la calificación de aprobado, en todas ellas, en la convocatoria de septiembre. En la 1.o y la 2.o evaluaciones del 2.o curso de Primaria, el niño presentó la calificación de insuficiente en estas cuatro materias. Comportamiento hiperactivo y desatento en la clase (35 por 100 de no atención a la tarea, 37 por 100 de respuestas de orientación y 12 por 100 de levantarse de la silla). • Repertorios intelectuales: Inteligencia «normal-alta» (en WISC: CIT = 111; en Terman: CI = 120). Rinde por debajo de sus posibilidades en aquellas tareas que requieren atención y concentración (Dig. = 9; Fig. incomp. = 10). Presenta una adecuada memoria visual (TRVB: PDA = 5, PDE = 7). La observación del niño en clase arroja los resultados siguientes: extravertido y jovial (per 50 y 60), normalidad en cuanto a su sensibilidad social y respeto y autocontrol (per 45); escasa apatía y ansiedad (per 30), destaca en cuanto a su terquedad en clase (se sitúa por encima del 70 por 100 de su grupo). • Condiciones socioambientales: Los comportamientos inadecuados en la clase van seguidos de atención por parte de la maestra (80 por 100 en MI), mientras que, cuando se conduce apropiadamente en la situación escolar, no recibe ningún tipo de atención por parte de ella (100 por 100 en MI). En familia, parece estar fundamentalmente apoyada la actividad deportiva del niño, y no parece que se promuevan otras actividades paraescolares (datos de entrevista). • Condiciones biológicas: Los exámenes médicos aportados no arrojan ningún déficit, ni sensorial ni físico. No se aprecian déficit conductuales ligados a disfunciones cerebrales (TRVB: PDA = 5, PDE = 7; QNST: PD = 15, Per. = 50). Conclusiones y recomendaciones La falta de rendimiento escolar no parece estar relacionada ni con inadecuadas capacidades intelectuales ni con trastornos o disfunciones cerebrales. Se trata de un niño bien dotado intelectualmente. El problema escolar parece estar generado, mantenido o controlado —en estos momentos— por los apoyos que las conductas inadecuadas del niño reciben por parte de la maestra en el aula. Se aconseja la administración de un tratamiento mediante el cual se eliminen las consecuencias positivas frente a las conductas perturbadoras del rendimiento del niño en la escuela y se moldee el comportamiento escolar del niño mediante apoyo de toda conducta facilitadora e indicativa de rendimiento escolar. Se orienta a los padres para que premien el trabajo escolar en casa, así como todo indicio de buen rendimiento en la escuela. Las intervenciones recomendadas deberán ser supervisadas por un especialista. Fecha: ________________ © Ediciones Pirámide Firma del psicólogo 118 / Evaluación psicológica. Conceptos, métodos y estudio de casos INFORME PSICOLÓGICO (ADENDA) Realizado por: XYZ (núm. de colegiado: xyz). Nombre: JM. Sexo: varón. Edad: siete años y un mes. Escolaridad: 2.o de Primaria. A petición de: sus padres. Fechas de exploración: 3, 5, 7, 10, 28 de enero de 1989. Fechas de tratamiento: febrero-julio, 1989. Referencia y objetivos Los padres de JM consultaron sobre su hijo por presentar un déficit en el rendimiento escolar. Una vez realizada la evaluación, se les aconsejó la realización de un tratamiento cuyo diseño y evaluación se presentan aquí. Diseño y valoración de la intervención El deficitario rendimiento escolar de JM (conducta problema), demanda de la evaluación, se supuso era debido o estaba asociado funcionalmente a su falta de atención e hiperactividad en clase, que, además, suponíamos eran mantenidas por la atención que les prestaba la maestra. La técnica de tratamiento utilizada ha sido la de un programa de reforzamiento mediante atención y refuerzo contingente a comportamientos facilitadores de las tareas escolares y la extinción ante conductas de desatención e hiperactividad. Con este fin se entrenó y siguió a la maestra y se evaluó el sistema de refuerzos del niño mediante el «Menú de refuerzos» (Daley, 1976) y se administró a los padres el «Listado de refuerzos para niños» (Clement y Richard, 1976). Se utilizó un diseño de un solo sujeto con medidas repetidas de sus calificaciones escolares, en cada evaluación, desde el final del primer curso de Primaria, ya recogido como medida basal (con el fin de tener un prolongado período pre-test), hasta realizar un seguimiento a los seis meses después del tratamiento. Con el fin de evaluar los potenciales cambios que se esperaban en las conductas de hiperactividad y desatención, se utilizó un diseño «prepostseguimiento» por el que el «Código de observación» de O’Leary et al. (1972) y la «Matriz de interacciones maestra-niño» se volvieron a administrar inmediatamente después de la intervención y después de seis meses de seguimiento. Tras cuatro meses de tratamiento y un seguimiento a los seis meses, se constató lo siguiente (véanse gráficos de la p. 123): • Comportamientos problema: 1. Mejora significativa de las calificaciones escolares obtenidas en las evaluaciones intermedias y en la final del mes de junio en comparación con las del año anterior, así como mantenimiento a los seis meses. Todo ello, esperado en los objetivos y en la demanda. • Condiciones personales potencialmente relevantes, como podemos observar en el gráfico inferior; se aprecian los siguientes cambios esperados y coherentes con los objetivos: 2. Disminución de las condiciones personales categorizadas como «desatención» (Código de observación de O’Leary et al., 1972). 3. Disminución de las condiciones personales categorizadas como «hiperactividad» (Código de observación de O’Leary et al., 1972). 4. Aumento de las conductas categorizadas como «facilitadoras de rendimiento» en la escuela («Matriz de interacción»). © Ediciones Pirámide Comunicación de los resultados: el informe psicológico / 119 • Otras condiciones potenciales relevantes: 5. 6. No se han apreciado otros trastornos conductuales. Los padres de JM y su maestra han apreciado esos cambios y han expresado su satisfacción en relación con el rendimiento y el comportamieno de JM. 3,5 Tratamiento 3 2,5 2 1,5 1 0,5 0 ia ia ar o . a 1. .2 Ev im Pr o . a 2. .2 Ev . 3. .2 Ev im Pr o . a 4. im Pr .2 Ev 80 70 60 50 40 30 20 10 0 o . a 5. ar ar ar .2 Ev ia ia ia ar ar o a ia ia ar im Pr im Pr o Fi l na 2. im Pr o . a 3. im Pr .3 Ev No atención Hiperactividad Conductas facilitadoras de rendimiento Antes Después Seguimiento Conclusiones y recomendaciones finales Se considera que el tratamiento efectuado ha sido eficaz porque ha conseguido sus objetivos (mejora del rendimiento académico), al tiempo que ha mejorado el comportamiento de atención e hiperactividad. Durante el período que ha durado la intervención y el seguimiento, no han aparecido otras manifestaciones conductuales inadecuadas. Con el fin de realizar un segundo seguimiento, se contactará con los padres pasados seis meses. Si antes de esa fecha apareciera cualquier comportamiento inusual y negativo, se recomienda ponerse en contacto de nuevo con la psicóloga. Fecha: ________________ © Ediciones Pirámide Firma del psicólogo 120 / Evaluación psicológica. Conceptos, métodos y estudio de casos COnCLUSIOnES A lo largo de este capítulo se ha tratado sobre la comunicación de los resultados de la evaluación, cuya expresión es el informe. En conclusión, las ideas fundamentales transmitidas son las siguientes: 1. 2. 3. El informe psicológico debe ser emitido por un profesional de la psicología, por lo que, en él, junto con el nombre y apellidos de éste, deberá figurar su acreditación como psicólogo. Este informe supone un documento científico en el que se vierten los resultados del estudio psicológico de un sujeto (o grupo de sujetos), por lo que constituye requisito esencial que su contenido pueda ser contrastable. Esto no habrá de ser obstáculo para que esté redactado en términos comprensi bles a la persona a la cual va dirigido. Asimismo, el informe escrito deberá ser completado, en los casos en que se considere necesario, con un informe oral. Como en todo informe de investigación, deberán figurar en él —junto al nombre y, en su caso, titulación de la/s persona/s que lo solicitaron— los objetivos propuestos. Asimismo, en él se harán constar los instrumentos psicológicos utilizados (tests, técnicas, aparatos, etc.), con mención expresa —en su caso— del tipo de material empleado en la obtención de puntuaciones normalizadas. En esta misma línea, deberá 4. ser incluido cualquier otro pormenor de procedimiento que permita la contrastación de los resultados. En el informe psicológico se hará expresa mención de aquellas conclusiones que den respuesta a los objetivos planteados (diagnóstico, orientación, selección, tratamiento). Las descripciones psicológicas sobre el sujeto, así como su diagnóstico, orientación o predicción, deberán estar debidamente justificados en base a los datos brutos (cualitativos y cuantitativos) en los que tales inferencias se apoyen. Asimismo, en el caso de objetivos de cambio, la valoración sobre efectos del tratamiento deberá estar basada explícitamente en los cambios conductuales detectados. El informe psicológico debe estar sujeto a los principios de la deontología profesional del psicólogo y a las Guías del Proceso de Evaluación GAP. El/los sujeto/s sobre el/los que el psicólogo realiza el informe tiene/n derecho a conocer su contenido, a no ser que con ello pudiera vulnerarse algún otro principio deontológico, y ha de tenerse en cuenta su custodia dado que el informe psicológico es un documento considerado estrictamente confidencial para el psicólogo, que no podrá disponer de él sin el debido permiso del sujeto y, en todo caso, será utilizado con arreglo al código deontológico del psicólogo (véase capítulo 4). BIBLIOgrAfÍA BÁSICA Fernández-Ballesteros, R. (dir.) (1992). Comunicación de los resultados del proceso: el informe. En R. Fernández-Ballesteros (dir.). Introducción a la evaluación psicológica, vol. 1, cap. 2, Madrid: Pirámide. Fernández-Ballesteros, R. (1994). El proceso en evaluación conductual. En R. Fernández-Ballesteros (dir.). Evaluación conductual hoy. Un enfoque para el cambio en psicología clínica y de la salud, Madrid: Pirámide. Fernández-Ballesteros, R., De Bruyn, E. E., Godoy, A., Hornke, L., Vizcarro, C., Westmeyer, H., Westhoff, K. y Zacagninni, J. L. (2001, 2003). Guidelines for the Assessment Process. A proposal for discussion. European J. of Psychological Assessment, 17, 187© Ediciones Pirámide Comunicación de los resultados: el informe psicológico 201 (traducción castellana en Papeles del Colegio, 2003, 84, 58-70). Godoy, A. y Silva, F. (1992). La evaluación psicológica como proceso, Valencia: NAV Llibres. Klopfer, W. G. (1960). The Psychological Report, Nueva York: Grune Stratton (hay traducción castellana, Buenos Aires, E. B. A., 1980). Martorcll, M. C. (1985). El informe diagnóstico. En F. Silva. Psicodiagnóstico, Valencia: Centro Editorial de Servicios y Publicaciones Universitarias. / 121 Pérez, E., Muñoz, M. y Ausín, B. (2003). Diez claves para la elaboración de informes psicológicos (de acuerdo con las principales leyes, estándares, normas y guías actuales). Papeles del Colegio, 86, 48-60. Pelechano, V. (1976). Psicodiagnóstico, Unidades Didácticas, UNED. Tallent, N. (1988). Psychological Report Writing, Englewood Cliffs, NJ: Prentice Hall. rEfErEnCIAS BIBLIOgrÁfICAS Colegio Oficial de Psicólogos (1987). Código Deontológico del Psicólogo. Papeles del Colegio, 6, 32, 24-47. Consejo General de Colegios Oficiales de Psicólogos (2010). Código Deontológico, Madrid: Documento del CGCOP. Daley, Jr., R. (1976). The reinforcement menu: finding effective reinforcers. En E. J. Mash y L. G. Terdal (eds.). Behavior Therapy Assessment, Nueva York: Springer. Clement, P. W. y Richard, R. C. (1976). Identifying reinforcement for children: a children’ reinforcement survey. En E. J. Mash y Terdal, L. G. (eds.). Behavior Therapy Assessment, Nueva York: Springer. Benton, A. L. (1989). Test de Retención Visual de Benton, Madrid: TEA. Cook, T. D. (1985). Postpositivism critical multiplisms. En L. Shotland y M. M. Marck (eds.). Social Science and Social Policy, Beverly Hills: Sage Pub. Fernández-Ballesteros, R. y Staats, A. W. (1992). Paradigmatic Behavioral Assessment, treatment and evaluation: answering the crisis in behavioral assessment. Advances in behavior research and therapy, 14, 1-28. Fernández-Ballesteros, R., De Bruyn, E. E., Godoy, A., Hornke, L., Vizcarro, C., Westmeyer, H., Westhoff, K. y Zacagninni, J. L. (2001, 2003). Guidelines for the Assessment Process. A proposal for discussion. European J. of Psychological Assessment, 17, 187201 (traducción al español en Papeles del Colegio, 2003, 84, 58-70). Germain, J. y Rodrigo, M. (1957). Test de Medida de la Inteligencia Terman-Merrill, Madrid: Espasa Calpe. © Ediciones Pirámide Godoy, A. (1996). Toma de decisiones y juicio clínico. Una aproximación psicológica, Madrid: Pirámide. Godoy, A. y Silva, F. (1992). La evaluación psicológica como proceso, Valencia: NAV Llibres. Maloney, M. P. y Ward, M. P. (1976). Psychological Assessment: a conceptual approach, Oxford University Press. Meehl, P. E. (1956). Wanted - A good cookbook. American Psychologist, 29, 263-272. Mutti, M., Sterling, R. y Spalding, N. (1978). Quick Neurological Screening Test, Novato, CA: Academic Therapy Publication. Nelson, R. O. (1988). Relationship between assessment and teatment with a behavioral perspective. Journal of psychopathology and behavioral assessment, 10, 155-170. O’Leary, K. D. et al. (1972). Procedures for Classroom, Observation of Teachers and Children. Manuscrito no publicado, Nueva York: State University of New York. Pérez, E., Muñoz, M. y Ausín, B. (2003). Diez claves para la elaboración de informes psicológicos (de acuerdo con las principales leyes, estándares, normas y guías actuales). Papeles del Colegio, 86, 48-60. Rector, A. L., Nolan, W. A. y Kay, A. (1991). Foundations for an Electronic Medical Record. Methods of Information in Medicine, 30, 179-186. Shapiro, M. B. (1951). An experimental approach to diagnostic psychological testing. International Journal of Social Psychiatry, 408, 749-764. Silva, F. y Martorell, M. C. (1983, 1987). Batería de Socialización BAS-1, 2 y 3, Madrid: TEA (véase Apéndice 3.7). 122 / Evaluación psicológica. Conceptos, métodos y estudio de casos Tallent, N. (1988). Psychological report writing, 3.a ed., Englewoods Cliffs: Prentice-Hall. Vizcarro, C. (1987). Aproximaciones empíricas al estudio del proceso diagnóstico. Evaluación psicológica/ Psychological Assessment, 3, 299-344. Wechesler, D. (1971). Escala de Medida de la Inteligencia para Niños de Wechsler, Madrid: TEA. Weiss, C. y Buscuvalas, M. J. (1981). Truth tests and utility tests. En H. Freeman y M. Solomon (eds.). Evaluations studies, Beverly Hills, CA: Sage Pub. Weed L.L. (1971) The Problem Orientated Record as a basic tool in medical education, patient care and clinical research. Annual Clinical Research, 3, 131134. Westmeyer, H. y Hagebock, J. (1992). Computer-assissted Assessment: A normative perspective. European Journal of Psychological Assessment, 8, 4-21. © Ediciones Pirámide PARTE segunda Métodos de recogida de información garantías científicas y éticas de la evaluación psicológica ROCÍO FERNÁNDEZ-BALLESTEROS MARÍA DOLORES CALERO 4 OBJETIVOS DEL CAPÍTULO • Conocer y distinguir las diferencias entre métodos, técnicas e instrumentos. • Repasar, de entre los conocimientos adquiridos en psicometría, cuáles son las más importantes puntuaciones utilizadas en evaluación. • Repasar los conocimientos adquiridos en psicometría y saber aplicar a la evaluación de un caso individual los conceptos de fiabilidad, validez y utilidad. • Conocer y saber aplicar las Guías del Proceso de Evaluación (GAP) al caso en evaluación. • Conocer los criterios y guías para la revisión, adaptación y uso de los tests. • Conocer y saber aplicar las condiciones de deontología profesional que rigen en evaluación psicológica. © Ediciones Pirámide 1. InTrODUCCIón Como ya se ha dicho, la evaluación psicológica tiene por objeto el análisis científico del comportamiento de un sujeto, o grupo de sujetos, realizado a través de un proceso de toma de decisiones que trata de responder a la demanda de un sujeto y/o cliente. Durante este proceso se formulan hipótesis que han de ser operacionalizadas mediante un conjunto de procedimientos científicos de recogida de información (tests, técnicas, instrumentos, etc.) a través de los cuales se pretende la indagación y cuantificación de los comportamientos, características o propiedades del sujeto (o sujetos) en estudio y de su contexto. Esos procedimientos de recogida de información han de presentar un conjunto de garantías científicas tanto en su construcción como en su uso. Pero, además, el proceso de evaluación supone un procedimiento científico sujeto a ciertas reglas del que emanan unos resultados idiográficos procedentes del sujeto/os en evaluación. Todo ello ha venido siendo regulado mediante guías, normas, directrices o estándares. Por último, cualquier actividad humana está sometida a una regulación dictada por los agentes sociales y por la propia profesión que condiciona la actuación del psicólogo en su tarea evaluativa. Por ello, en este capítulo nos vamos a ocupar de las garantías científicas y éticas de la evaluación psicológica. A pesar de que la medida y sus principios son objeto de otras disciplinas metodológicas (fundamentalmente de la psicometría), creemos conveniente realizar un breve apunte de todo aquello más significativo para la comprensión de los temas que van a seguir. En primer lugar, vamos a diferenciar entre los distintos procedimientos de recogida de información. Vamos también a referirnos, muy brevemente, a las distintas formas de cuantificar o puntuar las operaciones observadas derivadas de nuestras técnicas e instrumentos. A continuación, vamos a efectuar una síntesis sobre las propiedades que deben reunir los procedimientos estándar de medida. Posteriormente, trataremos de establecer qué criterios utilizar a la hora de garantizar no sólo las cuantificaciones derivadas de los procedimientos estándar de evaluación, sino las aportadas por nuestros propios datos de observación del caso. Hablaremos, también, de las vías a través de las cuales someter a prueba la calidad del proceso de evaluación. Y, finalmente, nos referiremos a las garantías éticas de la evaluación psicológica. 2. TESTS, TéCnICAS y OTrOS PrOCEDImIEnTOS DE EVALUACIón Un test, como señala Cronbach (1990), «es un procedimiento sistemático para observar la conducta y describirla con la ayuda de escalas numéricas o categorías establecidas [...] el evaluador recoge información preguntando y observando a todas las personas de la misma manera, en la misma o en comparables situaciones. Esta definición engloba los cuestionarios, a través de los cuales se obtienen informes sobre la personalidad, procedimientos para observar la conducta social, apara© Ediciones Pirámide Garantías científicas y éticas de la evaluación psicológica tos de medida de la coordinación o, incluso, registros sobre productos» (p. 32). Dos extremos conviene que sean resaltados: por un lado, el requisito de que el test presente escalas numéricas o categorías establecidas; por otro, que un test implica un procedimiento por el que a todas las personas se les debe preguntar u observar de la misma manera. Por otra parte, Pelechano (1976, 1988) añade una tercera característica a las aportadas por Cronbach, a saber: la de que los tests permitan comparaciones interindividuales. En definitiva, como ya señalamos anteriormente, los tests son procedimientos de medida cuyo material, forma de administración, puntuación, corrección y valoración son estándares y de ellos se derivan puntuaciones normativas. Como podemos anticipar, no todos los procedimientos de evaluación psicológica son tests. Existen otros dispositivos de recogida de información que vamos a denominar «técnicas» o «instrumentos» y que diferenciamos de los tests por el hecho de no cumplir con alguna de las características antes mencionadas. Conviene señalar que las técnicas e instrumentos pueden ser estándares, en el sentido de contar con un material, forma de administración y corrección homologados, o pueden adoptar una forma flexible, en la que ni el material, ni la administración ni la escala de puntuación estén tipificados. Finalmente, existen técnicas cualitativas en las que no se dan formas de puntuación preestablecidas y que permiten formas subjetivas (del evaluador) de valoración. A ello volveremos más tarde. Además, aunque en muchos casos se utiliza el término «instrumento» como sinónimo de «técnica», vamos a utilizar tal denominación, también, para referirnos a aquellos aparatos a través de los cuales puede recogerse información sobre manifestaciones observables o amplificables de los sujetos. Tales instrumentos o aparatos permiten la aplicación de tests o técnicas estándares de medida. En este sentido, la comunidad científica ha procurado establecer normas para la construcción de tests y técnicas de medida elaborando criterios que permiten valorar los tests, técnicas e instrumentos. Ya hemos dicho que el evaluador © Ediciones Pirámide / 127 no es necesariamente un constructor de tests, sino un usuario de ellos; por ello, también existen normas para el uso de los tests. El evaluador debe conocer qué principios y requisitos deben reunir los dispositivos de medida a utilizar en el caso concreto que le ocupa. Así, con tales normas se busca, también, que cada técnica de medida presente una serie de requerimientos e informaciones que faculten al usuario (al psicólogo, entre otros) a la hora de decidir, en función de sus objetivos de evaluación, qué dispositivos de medida utilizar. Finalmente, en evaluación psicológica también se utilizan medidas simples o moleculares que son registradas mediante instrumentos o técnicas. Por ejemplo, el registro del pulso da lugar a una medida simple de tasa cardíaca, del autorregistro del número de cigarrillos fumados se obtiene la frecuencia de cigarrillos en una unidad de tiempo determinada o las calificaciones escolares proporcionan una medida de rendimiento académico. Así pues, los procedimientos de recogida de información —ya se ha dicho, y en ello se abundará más adelante— no se reducen a los tests o técnicas estándar de medida. En muchas ocasiones el evaluador debe realizar observaciones, recoger informes (del sujeto o sus allegados) o respuestas psicofisiológicas mediante técnicas no estandarizadas, flexibles, no tipificadas e incluso cualitativas que han de adecuarse al caso particular de que se trate. Pongamos un ejemplo de lo dicho hasta aquí. Así, por ejemplo, en el caso de JM (caso presentado a lo largo de los capítulos 2 y 3), se aplicaron dos tests de medida de la inteligencia, el WISC y el Terman-Merrill; se eligieron aquellos que presentaban mayores garantías de validez y fiabilidad y que eran más apropiados al caso. También se utilizó un código de observación (el de O’Leary et al., 1972) con el fin de registrar las conductas perturbadoras en la clase de JM; este instrumento general se eligió también en razón de las excelentes propiedades psicométricas que presentaba. Pero, también en este caso, se utilizó una matriz de interacciones maestra-niño que fue adaptada al problema concreto de JM en función de lo que pretendíamos saber sobre él y su maestra y que permitía conocer la frecuencia de un 128 / Evaluación psicológica. Conceptos, métodos y estudio de casos determinado comportamiento. Desde luego, conocíamos ciertos datos sobre el valor de este tipo de instrumentos, pero eso no resultaba suficiente. Con el fin de contrastar los resultados obtenidos mediante la matriz, realizamos una serie de operaciones. Tuvimos que utilizar dos observadores para comprobar el acuerdo entre ellos (y así, la objetividad del registro); tuvimos, también, que observar durante largos períodos de tiempo con el fin de que nuestras observaciones no fueran casuales (y así demostrar la estabilidad de la medida); observamos en diferentes situaciones escolares con el fin de saber si existía estabilidad intersituacional en las interacciones. Relacionamos lo hallado mediante las matrices de interacción con otros procedimientos de observación y, asimismo, con otros tipos de pruebas (la entrevista); lo mismo hicimos entre los dos tests de medida de la inteligencia o con los dos que evaluaban disfunciones cerebrales. Comprobamos tales relaciones con el fin de averiguar si existía concordancia entre los distintos métodos utilizados para evaluar las mismas variables. También, en ese caso, se utilizaron medidas procedentes de archivos que nos permitieron operacionalizar los objetivos de caso y probar la eficacia de la intervención realizada. Éstos y otros pormenores del caso nos llevaron a pensar que nuestros datos eran presumiblemente aptos para ser interpretados y extraer información fidedigna de ellos. En definitiva, con este ejemplo hemos pretendido resaltar que el evaluador debe seleccionar aquellos tests estándar que sean idóneos a la hora de medir las unidades de análisis objeto de estudio; debe elegir también aquellas técnicas, instrumentos o medidas que den cuenta de las características específicas del caso. Pero una evaluación no sólo incluye recogida de información mediante tests, técnicas, medidas estándar o específicas y su elaboración, sino que también supone un proceso de toma de decisiones que ha de poder ser repetido y cuyos resultados han de ser examinados a la luz de un conjunto de criterios de bondad en nuestro caso particular. Es decir, en el proceso descriptivo-predictivo el diagnóstico, la orientación o la selección no son ni más ni menos que decisiones que el evaluador adopta partiendo de los datos que se han obtenido, cuya bondad habrá de probar. Así también, el proceso puede no terminar con el diagnóstico, la orientación o la selección del caso, sino con la aplicación de tratamientos y su valoración. Entonces, el proceso, en su vertiente interventivavalorativa, ha de ser debidamente contrastado mediante la utilización de los diseños de investigación oportunos que se ajusten a otras cautelas y mediciones. En los apartados que van a seguir serán tratados todos estos aspectos. 3. PUnTUACIOnES UTILIzADAS Aunque el estudio de las puntuaciones, sus características y propiedades es propio de la psicometría, dado que el evaluador, por el hecho de serlo, utiliza unidades de medida y éstas suelen representarse en puntuaciones, vamos a tratar (aunque de un modo muy general) de algunas cuestiones básicas. 3.1. Escalas de medida Al hablar de escalas de medida, solemos referirnos en psicología a la clásica presentación de Stevens (1946, 1951) al defender la posibilidad en psicología de las escalas de medida nominal, ordinal, de intervalo y de razón. Estas cuatro escalas, aunque son las más comúnmente utilizadas, no están exentas de crítica, si bien ésta se refiere fundamentalmente a la escala nominal y su inclusión en las escalas de medida. En lo esencial, las diferencias entre estas cuatro escalas están en las operaciones empíricas básicas necesarias para crearlas y en el tipo de transformación requerida para dejarlas invariantes. En las escalas nominales, la operación empírica básica necesaria para crear la escala es la determinación de igualdad, y la transformación que deja invariante la escala, la permutación. Así, utilizamos escalas nominales cuando clasificamos © Ediciones Pirámide Garantías científicas y éticas de la evaluación psicológica una conducta que ocurre como «desadaptada». En definitiva, los sistemas de clasificación de la conducta anormal (por ejemplo, el DSM-IV o el CIE-10) son sistemas de clasificación nominal. En la escala ordinal, la operación empírica básica necesaria es la determinación de grado de magnitud (mayor que, menor que) para poder ordenar las puntuaciones, y la transformación que deja invariante la escala, la isotónica. Así, por ejemplo, cuando puntuamos según la frecuencia de una conducta en «siempre», «frecuententente», «algunas veces», «nunca», utilizamos escalas ordinales. En la escala de intervalo, la operación empírica es la igualdad de intervalos o de diferencias, y la transformación que deja invariante la escala, la transformación lineal. Cualquier puntuación de desviación (como, por ejemplo, la puntuación T empleada en el MMPI o los CI de desviación de las Escalas de Inteligencia de Wechsler) está utilizando una escala de intervalos. En la escala de razón, la operación empírica básica necesaria para crear la escala es la igualdad de razones, y la transformación que deja invariante la escala es la transformación geométrica. No suelen existir puntuaciones en evaluación psicológica que utilicen escalas de razón. 3.2. Puntuaciones directas y referidas a criterios y a normas La evaluación psicológica en una parte importante de su quehacer utiliza la medición, y la disciplina que se ocupa de la medición en psicología es la psicometría. Asumimos que el lector de este texto tiene conocimientos básicos psicométricos (Abad et al., 2011; Martínez Arias, 1995; Martínez Arias et al., 2006; Muñiz, 2002; Yela, 1990). Medir de modo general es asignar números a objetos, variables o constructos, y esta asignación se hace mediante una escala. Normalmente, el evaluador atribuye números a los eventos o situaciones a evaluar. Por ejemplo, Luis obtiene en un test de inteligencia 10 puntos; ello, generalmente, quiere decir que ha resuelto © Ediciones Pirámide / 129 bien diez problemas. Ésta es una puntuación directa. Es el resultado directo de anotar cuantos problemas (a veces, en cuánto tiempo) ha realizado Luis, pero ¿qué nos dice esa puntuación? Realmente muy poco. En primer lugar, no sabemos cuál es la puntuación máxima del test, con lo que no podemos afirmar si ese 10 es poco o mucho; por otro lado, tampoco sabemos, si queremos compararlo con su grupo, si es mejor o peor que el resto; incluso difícilmente podremos comparar este resultado con un resultado de 15 puntos, por ejemplo, en un test de atención del mismo sujeto, para afirmar que es mejor en una prueba que en otra. Esta puntuación sólo adquiere significado si se la compara con algo, es decir, dentro de un marco de referencia. Así, esa puntuación la podemos comparar con el total, a través de un porcentaje, y podemos decir que Luis ha resuelto el 95 por 100 de los problemas del test, lo cual es más que decir que ha alcanzado una puntuación de 10. En esta misma línea pero en el ámbito del comportamiento anormal, en un inventario de síntomas (de perturbaciones conductuales) una puntuación directa en ese test nos ofrece el número absoluto o relativo (en porcentajes) de los síntomas que presenta una determinada persona. Así, la mayor parte de los inventarios conductuales tienen el objetivo de indagar los comportamientos problemáticos del sujeto para convertirlos en objetivos de análisis y tratamiento. Pero una puntuación directa (o en porcentaje) nos da una información de valor muy relativo. A la hora de conseguir mayor información con una puntuación, existen dos métodos de comparación básicos conocidos como «referencia al criterio» y «referencia a la norma». Veamos, de un modo general, en qué consisten (Glaser, 1963). Las puntuaciones que proceden de tests o técnicas de evaluación referidos al criterio son aquellas deliberadamente construidas para producir mediciones directamente interpretables en términos de un estándar de ejecución o conocimiento bien definido y especificado de antemano. Este criterio de logros u objetivos a cumplir sería el marco de referencia frente al cual hay que interpretar la puntuación (información) recogida del 130 / Evaluación psicológica. Conceptos, métodos y estudio de casos sujeto. Por ejemplo, si consideramos que los sujetos deben contestar correctamente al menos a diez de una serie de cuestiones que les proponemos, éste sería el criterio con el que comparar los aciertos reales obtenidos por cada sujeto, es decir, su puntuación directa. En función de ello, ya podemos interpretar, por ejemplo, que una puntuación directa de 8 puntos es bastante buena, mientras que una puntuación directa de 2 puntos es bastante baja. Así pues, el marco de referencia con el que se compara al sujeto, el criterio, es función de los logros u objetivos que pretenda el evaluador con la tarea concreta que le propone. Podemos considerar, por ejemplo, como prueba referida a un criterio, un examen en el que lo que interesa es el nivel de conocimientos alcanzados por cada uno de los sujetos de modo individual. Para trabajar con referencia al criterio son útiles las puntuaciones directas y los porcentajes de respuestas dados, y lo importante en este tipo de instrumentos es la categoría de ejecución asignada al sujeto evaluado. Existen múltiples técnicas de evaluación referidas a criterios que podemos examinar en la parte cuarta de esta obra. Por ejemplo, el MMSE (Mini-Mental State Examination) evalúa el deterioro cognitivo y el Inventario de Depresión de Beck (Beck Depression Inventory) evalúa mediante puntuaciones criteriales distintos niveles de gravedad de la depresión. Por el contrario, una puntuación se halla referida a una norma cuando el marco de referencia con el que se compara para que obtenga significado es un grupo, es decir, se obtiene la posición relativa del sujeto evaluado con respecto a un grupo normativo de referencia. Para poder interpretar correctamente una puntuación de este tipo son necesarias dos fases: en primer lugar, el establecimiento del grupo de referencia adecuado; y, en segundo lugar, la transformación de la puntuación directa del sujeto en otra que indique la posición que ocupa respecto a ese grupo de referencia elegido. Esto es, la evaluación referida a la norma sitúa a los individuos en un continuo en el que no se establece a priori ningún criterio mínimo. Los tests se publican con una tabla de normas (baremos) que se construyen a partir de una muestra representativa. Existen distintos tipos de puntuaciones referidas a la norma, aunque las más usuales suelen ser los percentiles y las puntuaciones tipificadas o puntuaciones estándar. El percentil es una puntuación en términos de la posición ocupada por un sujeto en un grupo y nos indica el porcentaje del grupo al que el sujeto en cuestión sobrepasa o si obtiene puntuaciones inferiores a éste. Por ejemplo, decir que un sujeto está en el percentil 70 de su clase se interpreta como que obtiene puntuaciones superiores al 70 por 100 de sus compañeros de clase. Aunque este tipo de puntuaciones nos porporciona más información que la simple puntuación directa, y es muy fácil de calcular y de interpretar, esta información tampoco es demasiado completa. Nos sirve sólo para ordenar a los sujetos, pero no nos informa sobre el grado en que el individuo posee lo evaluado ni sobre la cuantía de las diferencias entre dos personas, dado que su distribución no es homogénea. Tampoco puede interpretarse como índice de progreso; así, no es lo mismo, o no se puede interpretar de igual modo, la diferencia entre un percentil de 50 y uno de 55 que la que hay entre un percentil de 90 y uno de 95, aun para el mismo grupo. Además, incluso en un mismo sujeto, el decir que en una prueba de atención, por ejemplo, está en el percentil 80 y en una de lectura en el 70 no puede interpretarse como que tiene mejor nivel en atención que en lectura. Podría suceder que el sujeto en cuestión tuviese mejor nivel en lectura pero que el grupo de referencia con el que se le compara fuese también muy bueno. El segundo tipo de puntuaciones referidas a la norma a que hemos hecho alusión son las puntuaciones tipificadas o puntuaciones estándar. Las puntuaciones típicas son una transformación lineal de la puntuación directa (PD) en función de la media y desviación típica del grupo y nos indican cuánto se separa el sujeto de la media del grupo en relación con lo que se separan los demás. Es decir, la puntuación directa se interpreta en relación con la media del grupo, pero tomando como unidad de medida la desviación típica de ese gru© Ediciones Pirámide Garantías científicas y éticas de la evaluación psicológica mayoría se separa seis o más unidades. (Recordemos que la desviación típica es una medida de la dispersión de las puntuaciones del grupo.) Número de casos po. No es lo mismo separarse cuatro unidades de la media del grupo cuando la mayoría de los sujetos sólo se separa dos unidades que cuando la / 131 2,14% 0,13% –4σ –3σ 13,59% –2σ 34,13% 34,13% –1σ 2,14% 13,59% +1σ 0,13% +2σ +3σ +4σ Media de las calificaciones de la prueba Calificación z –4 –3 –2 –1 0 +1 +2 +3 +4 10 20 30 40 50 60 70 80 90 200 300 400 500 600 700 800 55 70 85 100 115 130 145 Calificación T Calificación CEEB CI de la desviación (DT = 15) Estaninos 4% 7% 1 2 12% 17% 20% 17% 12% 7% 3 4 5 6 7 4% 8 9 Percentiles 1 5 10 20 30 40 50 60 70 80 90 95 Figura 4.1 © Ediciones Pirámide 99 132 / Evaluación psicológica. Conceptos, métodos y estudio de casos Estas puntuaciones tienen el inconveniente de presentar valores decimales y valores negativos. Para salvar este inconveniente, suelen realizarse diversas transformaciones lineales de las puntuaciones típicas (que, como tales, no modifican la forma de la distribución de las puntuaciones originales), que es lo que se conoce como «puntuaciones típicas derivadas», obteniéndose así una nueva escala que tendrá por media el valor que nosotros queramos y por desviación típica otro valor cualquiera elegido por nosotros. Una puntuación típica derivada que se utiliza bastante en teoría de tests es, por ejemplo, la escala T, que se obtiene utilizando como media 50 y como desviación típica 10. Este tipo de puntuaciones tiene la ventaja de eliminar las puntuaciones negativas y decimales, pero la forma de su distribución original no varía. Hay, sin embargo, otro tipo de puntuaciones típicas: las normalizadas, que sí la modifican, ajustándola a la curva normal. Trabajar con las puntuaciones típicas normalizadas tiene la ventaja de poder compararlas, aunque provengan de pruebas distintas. Una puntuación típica normalizada de uso frecuente es el CI de desviación con media = 100 y desviación típica = 15. Para realizar esta transformación, se parte de la transformación a percentiles de las puntuaciones directas y, utilizando la tabla de la curva normal, se averigua la puntuación típica normalizada que corresponde a cada uno de esos percentiles. Así, como podemos apreciar en la figura 4.1, podemos establecer equivalencias entre diversas puntuaciones estándar, y es muy fácil entender las características y posibilidades de transformación entre estas puntuaciones. Veamos el ejemplo: un niño de seis años que hace bien 11 ítems en el Test de Inteligencia de Raven, o sea, que tiene una puntuación directa (PD) de 11, tendría un percentil 5, y si hubiera hecho bien 13 ítems, tendría un percentil 10. Otro niño de la misma edad con una PD de 22 puntos tendría un percentil 50, y con 24, tendría un percentil 65. Esto es, una diferencia de dos puntos supone incrementos de habilidad diferentes si se da en distintos puntos de la escala. Del mismo modo, fijándonos en la figura 4.1, pode- mos observar que un percentil 50 supone una puntuación típica de 50, mientras que el percentil 65 supone una puntuación típica de 54. Vemos por tanto que las trasformaciones no son homogéneas. 4. GArAnTÍAS DE LOS TESTS y OTrAS TéCnICAS DE EVALUACIón Es evidente, y cada vez existe un mayor acuerdo en aceptar la necesidad de establecer que tanto el proceso de evaluación como las técnicas con que éste se lleve a cabo, cualesquiera que sea su fundamento teórico, como apuntaba Yela (1990), deben realizarse cubriendo ciertas garantías de calidad. El problema se plantea a la hora de considerar qué requisitos son los que muestran la calidad de proceso e instrumentos y, por tanto, deben exigirse en la evaluación psicológica. Como ya se ha dicho, la subdisciplina de la psicología que se ocupa de estas garantías es la psicometría; sin embargo, propiamente, la psicometría se ocupa de cúales son las propiedades que deben reunir los tests o, mejor dicho, las puntuaciones que de ellos se extraen, y cuáles son sus bases matemáticas y sus formulaciones psicométricas. En nuestro caso, la evaluación psicológica que se dirige a la evaluación del sujeto individual y/o de un especificado grupo de sujetos debe ocuparse de elegir aquellos instrumentos y utilizar aquellas puntuaciones que mejor respondan a la demanda del caso y a los objetivos de evaluación y no, desde luego, a cómo se obtienen. Desde los inicios de la teoría clásica de los tests (TCT) se desarrollaron y se establecieron los requisitos psicométricos que, en principio, aparecen mezclados y confundidos y posteriormente se separan en los dos conceptos clave de fiabilidad y validez, que se fijan como aquellos que deberían cumplir los instrumentos de evaluación, y se integran en las normas de la APA (American Psychological Association) desde 1954 (revisadas en 1966, 1974, 1985 y 1999). Con el tiempo, estos criterios se han ido completando y modificando en función de las nuevas aportaciones teóricas y © Ediciones Pirámide Garantías científicas y éticas de la evaluación psicológica han ido evolucionando hacia unas definiciones lo suficientemente amplias como para que los conceptos de fiabilidad y validez sean aplicables a cualquier tipo de instrumento que se utilice en evaluación Lo que aquí se trata se basa en los conceptos básicos psicométricos (véanse Abad et al., 2011; Martínez Arias, 1995, Martínez Arias et al., 2006; Muñiz, 2002; Yela, 1990). 4.1. Fiabilidad El término «fiabilidad», según el Diccionario de la Real Academia, hace referencia a la probabilidad del buen funcionamiento de una cosa. Técnicamente, el término «fiabilidad» fue introducido en la psicología por Spearman en una serie de trabajos publicados entre 1904 y 1913 en la revista American Journal of Psychology. En éstos la fiabilidad fue definida como «... el coeficiente de correlación entre una forma experimental de un test y una forma hipotéticamente equivalente...» (Spearman, 1927). Un test será más fiable cuanto mayor sea la proporción de variabilidad de las puntuaciones recogidas que se deba a la variabilidad de las puntuaciones verdaderas, y menor, la que se deba a la del error. La idea básica de la TCT es que detrás de la puntuación observada que obtiene una persona en un test hay una puntuación verdadera. La versión actual mayoritaria de la teoría define la puntuación verdadera como el valor promedio de las puntuaciones observadas obtenidas en n administraciones «equivalentes» del test. De forma lógica, las diferencias entre las puntuaciones observadas y la puntuación verdadera se considera error de medida. La calidad de la estimación está vinculada al cumplimiento por estos datos de los supuestos del modelo de tests paralelos (Bejar, 1993). De ahí el interés práctico por determinar si dos administraciones de un test o dos tests dados son o no paralelos. El coeficiente de correlación de Pearson entre mediciones es el estimador más frecuente (Bejar, 1993). © Ediciones Pirámide / 133 De modo general, podemos decir que existen tres tipos de evidencias de fiabilidad: 1. Relacionadas con la estabilidad temporal de la medida, es decir, con la posibilidad de que medidas hechas en momentos distintos sean iguales. 2. Con la consistencia interna u homogeneidad de la prueba; es decir, en aquellos tests que se componen de un agregado o conjunto de elementos los ítems o reactivos que componen una prueba deben ser equivalentes. 3. Con la objetividad del registro, en el sentido de que diferentes evaluadores (observadores, entrevistadores, puntuadores, etc.) obtengan semejantes resultados. Una primera condición de la medida para ser considerada fiable es que sea replicable en el sentido en el que tomada en distintos momentos nos ofrezca los mismos resultados o semejantes. Así, el procedimiento de test-retest parte de la consideración de que un mismo test puede considerarse idéntico consigo mismo, por lo que si se administra en dos ocasiones separadas por un intervalo temporal, en el que la variable objeto de la medición no haya cambiado, debe proporcionar mediciones iguales. La correlación entre las mediciones obtenidas en las dos administraciones informa de la estabilidad de éstas; de ahí que el coeficiente también se denomine «coeficiente de estabilidad». Sin embargo, en el capítulo 2, cuando se ha presentado el proceso valorativo-interventivo, hemos dejado constancia de que, cuando hemos de valorar una intervención, lo que se exige a las puntuaciones de un test es que sean sensibles a un determinado tratamiento. En otras palabras, una medida debe ser estable en condiciones habituales, pero ello debe ser compatible con ser afectada ante una acción excepcional, como un tratamiento (por ejemplo, véase Abad et al., 2011). Una aproximación diferente para el cálculo de la fiabilidad fue desarrollada por quienes se interesaron por el problema desde la perspectiva de la consistencia interna o de la homogeneidad de los 134 / Evaluación psicológica. Conceptos, métodos y estudio de casos ítems. Se trataba de estimar el coeficiente de fiabilidad a partir de las covarianzas entre todos los ítems del test. Existen numerosos procedimientos estadísticos para estimar la fiabilidad a partir de las covarianzas entre los ítems. Martínez-Arias (1995; Martínez Arias et al., 2006) resalta el coeficiente alfa de Cronbach (1951), los coeficientes de Kuder y Richardson (1937) para ítems dicotómicos con diferentes niveles de dificultad (KR20) o con el mismo nivel de dificultad (KR21), los coeficientes «lambda» de Guttmman (1945), los coeficientes basados en el análisis factorial (Zeller y Carmines, 1980) y los coeficientes basados en el análisis de varianza (Hoyt, 1941). La dificultad de realizar dos administraciones del test y el excesivo coste y dificultad para elaborar dos formas paralelas condujeron al desarrollo de procedimientos que requerían una sola administración del test: el procedimiento de dos mitades. Este procedimiento agrupa los ítems en dos mitades intentando que sean lo más paralelas posible —la asignación por pares-impares es una de las más conocidas, pero no la única—. A continuación, calcula la correlación entre las puntuaciones totales de los sujetos en cada mitad y, por último, corrige el valor de la correlación para obtener la estimación de la fiabilidad del test completo. El valor corregido informa de la «consistencia interna» del test. Finalmente, las puntuaciones recogidas sobre el mismo sujeto (mediante entrevistas, escalas de apreciación, códigos de observación) por distintos jueces (entrevistadores, observadores, etc.) están sometidas a errores. Así, la objetividad representa una medida de fiabilidad de esas puntuaciones, y habrá de ser contrastada mediante distintos procedimientos, como es el coeficiente kappa (cuando se pretende averiguar la concordancia entre dos jueces utilizando variables ordinales o nominales), el coeficiente de concordancia (dos jueces valorando variables continuas) o coeficientes intraclase (basados en el modelo ANOVA). Ejemplos de estas formulaciones aparecen en el capítulo 6, sobre la observación, y en Abad et al. (2011). Finalmente, conviene señalar que mientras que el concepto de validez con el paso del tiempo ha sufrido grandes cambios, el concepto de fiabilidad ha permanecido bastante invariable desde los estándares de 1954, reflejando simplemente el desarrollo evolutivo de la ciencia, esto es, incluyendo las teorías surgidas con el transcurso de los años. La inclusión de estas teorías, como la teoría de respuesta al ítem (TRI), por ejemplo, ha hecho que en la última versión de los estándares de 1999 se preste una atención especial al error de medida condicional (centrado en un determinado punto de la escala). Por ello, en esta última versión de los estándares se entiende que «... la fiabilidad y la función de información del test hacen referencia a la consistencia de las medidas cuando se readministra el mismo test, o una forma alternativa, a los individuos o grupos» (APA, 1999; cap. 2). O sea, recoge el concepto «función de información» (propuesto por Birbaum, 1968) como paralelo al de fiabilidad. La TRI entiende la fiabilidad como la precisión o error cometido a la hora de estimar la puntuación de cada persona. El análisis del error de medida, como veremos en el capítulo 9, es muy diferente del realizado por la TCT. La diferencia entre la aproximación clásica y la de la TRI reside en que para la TCT el concepto de fiabilidad opera globalmente para el conjunto de valores posibles de habilidad y, por tanto, se define de manera incondicionada, mientras que para la TRI la función (de información) característica del ítem introduce el concepto de precisión (con la que se hace la estimación para un sujeto), que es independiente de cualquier criterio normativo, opera localmente y se condiciona a niveles particulares de habilidad. En definitiva, como reflejamos en el cuadro 4.1, existen hoy diferentes procedimientos empíricos para recoger las diferentes evidencias sobre la fiabilidad de unas técnicas. Estos procedimientos fueron desarrollados desde diferentes perspectivas teóricas, pero hoy pueden ser considerados bajo un concepto unificado de fiabilidad. Lo importante es comprobar que la técnica de evaluación que seleccionemos para ser aplicada en determinado caso haya utilizado el procedimiento empírico de recogida de evidencias acorde con el uso que nosotros pretendamos hacer. © Ediciones Pirámide Garantías científicas y éticas de la evaluación psicológica / 135 CUADRO 4.1 Procedimientos de obtención de evidencias de fiabilidad y teoría base desde la que pueden llevarse a cabo Tipo de evidencia Procedimiento empírico Teoría base Estabilidad de la medida Formas paralelas Test-retest Estabilidad de la línea base TCT Conductual Objetividad del registro Formas paralelas Test-retest Correlación entre observadores TCT Conductual Acuerdo interjueces Acuerdo interjueces Homogeneidad de la prueba Dos mitades Covarianza de los ítems Análisis de varianza TCT Precisión Función de información TRI 4.2. Validez Como hemos visto hasta aquí, la fiabilidad nos informa sobre el error de medida de una puntuación, pero nada nos dice sobre lo que se está midiendo. Sin embargo, lo que se está midiendo puede ser extraordinariamente heterogéneo: desde una conducta simple cuya medida se realiza por procedimientos físicos (latido cardíaco, distancia entre dos personas, ocurrencia de conducta observable) hasta constructos psicológicos de alto nivel de inferencia («extroversión», «modelo de mundo», «ideas irracionales»); por tanto, las pruebas sobre el valor de una medida dependen del nivel de inferencia de la variable que pretendamos medir. Ésta es la razón por la que, desde la evaluación conductual, Cone (Cone, 1981, p. 59) nos dice: «la exactitud está destinada a describir cómo una medida representa fielmente los rasgos topográficos objetivos de una conducta de interés». Existe una diferencia conceptual importante entre exactitud y validez, como señalan Johnston y Pennypacker (1980), que estriba en que con exactitud se está implicando la existencia de una verdadera medida independiente, mientras © Ediciones Pirámide que la validez conlleva la ausencia de tales valores, por lo que éstos deben ser estimados mediante criterios de validación. En otras palabras, la naturaleza de nuestras variables requiere criterios de validación, y ésta es la razón por la que en psicología, psicometría y, por tanto, en evaluación psicológica un concepto clave sea el de validez, aunque haya sufrido cambios importantes plasmados en los estándares para los tests educativos y psicológicos (APA 1954, 1966, 1974, 1985, 1999). La última edición disponible de los estándares para los tests educativos y psicológicos (APA, AERA y NCME, 1999) ha reafirmado la importancia de la validez al valorarla como «... la consideración más importante en la elaboración y evaluación de los tests...» (p. 9). Hasta 1954 la idea imperante sobre validez aseguraba que incumbía a quien elaboraba o proponía un uso determinado de un test para probar que éste medía lo que pretendía medir. En 1954 aparece, por influencia de Cronbach y Meelh (1955), el concepto de validez de constructo, que ellos establecen para ser utilizado en situaciones especiales, o sea, en aquellas técnicas menos cuan- 136 / Evaluación psicológica. Conceptos, métodos y estudio de casos titativas y/o menos susceptibles de operacionalización. A partir de entonces, la validez se fragmenta en cuatro tipos, cada uno relacionado con el uso que del test se planea hacer. Así se incorporan los conceptos de validez de contenido, predictiva, concurrente y de constructo. En esta versión de los estándares se dice: «... la información sobre la validez indica al usuario el grado en el que el test es capaz de alcanzar ciertos objetivos. Los tests son utilizados para diferentes tipos de juicios, y cada tipo de juicio implica un tipo diferente de validación...» (p. 13). Así se requerirá la validez de contenido para los tests que describen el desempeño de las personas sobre un universo definido de ítems o tareas; la predictiva cuando el test predice el desempeño futuro; la concurrente cuando se demuestra la concurrencia con medidas simultáneas, y la de constructo cuando se pretende hacer inferencias sobre constructos no observables (Shepard, 1993). La validez de constructo, según los estándares, «... se estudia de forma ordinaria cuando el usuario del test no dispone de una medida criterio definitiva de la cualidad en la que está interesado y debe utilizar medidas indirectas para validar la teoría...» (p. 14). En 1966 se da un pequeño paso hacia la unificación y se habla sólo de tres tipos de validez: validez predictiva y concurrente se reunifican bajo la etiqueta de validez de criterio, quedando consagrada lo que Guion denominó la «santa trinidad de la validez»: contenido, criterio y constructo (Guion, 1980). Esta división expresa la diferenciación señalada por Campbell y Stanley (1963, 1970) entre la validez interna (constructo) y externa (predictiva) del test. Así, la validez de contenido, definida del modo clásico, se centra en la relevancia y representatividad de los ítems que conforman el test, pero no en las interpretaciones que se hacen. La validez de criterio enfatiza la estructura externa del test, o sea, sus relaciones con el criterio, pero no las posibilidades de generalización de éste. La validez de constructo expresa la teoría que subyace en el test. En 1974 se mantiene esa clasificación en tres tipos de validez pero se comienza a prestar atención a las inferencias que desde los resultados del test hace el evaluador, y en la definición se avanza hacia las posiciones actuales. Así se dice que «las cuestiones de validez hacen referencia a lo que se puede inferir de forma adecuada a partir de las puntuaciones en el test; la validez se refiere a la adecuación de las inferencias hechas desde las puntuaciones de los tests u otras formas de evaluación [...]. Es importante notar que la validez en sí es inferida, no medida [...]. Es, por tanto, algo que es juzgado como adecuado o marginal o insatisfactorio» (p. 25). En esta versión también se redefine la noción de constructo en términos actuales como «una idea teórica desarrollada para explicar y organizar algún aspecto del conocimiento existente [...] el constructo es más que una etiqueta; es una dimensión inferida o comprendida desde su red de interrelaciones» (p. 29); por ello la evidencia de la validez de constructo se recoge de diferentes estudios. La influencia de Cronbach (1980) y, esencialmente, Messick (1989) fuerza la evolución del concepto hacia un constructo unitario bajo el supuesto de que todas las interpretaciones que de un test se hacen están inspiradas por un constructo teórico. Según ellos, es necesario validar el significado, o sea, la interpretación de las puntuaciones, tanto como las implicaciones que para la acción tiene ese significado; en otras palabras, el núcleo fundamental de la validez es la representación del constructo. De acuerdo con estos planteamientos, en la versión de los estándares de la APA de 1985 se sitúa la validez en la primera fase del proceso de valoración de un test y se da un paso importante hacia la unificación cuando se define validez como la «apropiación, significación y utilidad de las inferencias específicas realizadas a partir de las puntuaciones de los tests. Se pueden realizar una variedad de inferencias a partir de las puntuaciones producidas por un determinado test y hay muchas formas de acumular evidencias para apoyar cualquier inferencia en particular. La validez es, sin embargo, un concepto unitario» (p. 9). Las tres categorías son consideradas entonces estrategias de validación y pasan a denominarse «evidencias relacionadas con...», presentándose, © Ediciones Pirámide Garantías científicas y éticas de la evaluación psicológica en primer lugar, las evidencias relacionadas con la validez de constructo. Posteriormente Messick (1994, 1995, 1998) plantea que la división clásica en tres facetas es incompleta porque no tiene en cuenta las consecuencias sociales del test y promueve la consideración de otros conceptos dentro de la validez tales como la relevancia, la utilidad, las implicaciones de la evaluación y las consecuencias sociales de ésta, dividiendo a su vez las evidencias en dos grupos fundamentales interconectados: a) las que justifican el test (evidencias y consecuencias) y b) las centradas en los resultados del test (interpretación y uso). Según sus palabras, la validación de un test sería la valoración empírica de su significado y de las consecuencias de su medida; combina por tanto argumentos científicos y racionales (Messick, 1994). Siguiendo a Messick, pues, actualmente se considera que existen seis aspectos distinguibles en la validez: de contenido, sustantiva, estructural, externa, generalizable y consecuencial. Los estándares de 1999 (APA, 1999) presentan una teoría unificada de la validez en la que el constructo es el eje central de un proceso largo e indefinido de validación y en la que se incorporan el énfasis en las consecuencias del uso de los tests, el papel de la teoría de la generalizabilidad y el uso de los tests para la toma de decisiones políticas; definitivamente, aportan la siguiente definición: «Validez es un concepto unitario. Es el grado en que todas las evidencias acumuladas apoyan la proyectada interpretación de las puntuaciones del test implicadas en el propósito propuesto [...]. Validez se refiere al grado en que evidencia y teoría soportan las interpretaciones de las puntuaciones del test implicadas en los usos propuestos del mismo [...]. El proceso de validación implica acumulación de evidencias que proporcionen una base científica sólida para las interpretaciones que se proponen (cursiva añadida). Esto es, deben ser evaluadas las interpretaciones de las puntuaciones del test requeridas para usos propuestos, no el test mismo» (pp. 9-11). Así el planteamiento general de los estándares de 1999, vigentes en la actualidad, no sólo reafir© Ediciones Pirámide / 137 ma la posición central de la validez, sino que entiende que los principios de la validez se basan en las inferencias sobre el significado de comportamientos o de atributos consistentes. Esta perspectiva integra resultados cuantitativos y cualitativos, o sea, no sólo se limita a puntuaciones, sino que se dirige a atributos y a comportamientos. Como Messick señalaba (1995), el término «puntuación» es usado genéricamente como resumen de consistencias observadas o regularidades de ejecución, pero también se refiere a consistencias funcionales y a atributos de grupos, situaciones o ambientes. El término «evidencia» queda explicado al aclarar este autor (Messick, 1980) que: «... por evidencia entiendo tanto los datos o hechos o las razones o argumentos que cimentan los hechos dentro de una justificación de las inferencias basadas en las puntuaciones de los tests...» (p. 101). O sea, los datos no son la información, sino que ésta procede de la interpretación de los datos. La relación de aspectos propuesta por Messick debe entenderse como un desglose de las fuentes de evidencias de la validez que deberían ser utilizadas para valorar la interpretación deseada de las puntuaciones. Las principales fuentes de evidencias son: 1. Evidencias basadas en el contenido del test: incluye evidencias de relevancia, representatividad y calidad técnica del instrumento. Éstas proceden del análisis de las relaciones entre el «contenido» del test y el constructo que se pretende medir. Por contenido se entiende los temas, palabras, formatos de ítems y/o tareas que forman el test tanto como las instrucciones y los procedimientos de administración y puntuación. Podríamos considerar, como señalan algunos autores (Allen y Yen, 1979; Nevo, 1985), integrada en ésta a la validez aparente, que hace referencia a la relevancia asignada al contenido del test por parte de las personas que son evaluadas con él, aspecto que puede determinar en cierta medida los resultados obtenidos. 138 / 2. Evaluación psicológica. Conceptos, métodos y estudio de casos Evidencias basadas en la relación del test con otras variables (validez externa). Se incluyen aquí los análisis de relaciones: a) asociaciones entre el test y otras variables externas utilizadas como criterio (evidencia concurrente y/o convergente), sean ejecuciones o puntuaciones de otros tests que midan el mismo constructo o, también, que midan alguna variable con la que teóricamente nuestro test no debe estar asociado (evidencia discriminante); b) asociación con medidas de constructos diferentes que puedan situarse en la red nomológica del test, y c) algún tipo de variable criterial que se pretenda predecir con el test (evidencia predictiva). Como herramientas matemáticas en la búsqueda de este tipo de evidencia se sitúan aquí los típicos análisis predictivos de regresión, correlacionales, como las Matrices Multirrasgo-Multimétodo (Campbell y Fiske, 1959; Dumeci, 2003). Finalmente, puede incluirse aquí la validez (evidencia) diagnóstica, a través de la cual se trata de establecer hasta qué punto un determinado test es capaz de detectar a aquellas personas que pertenecen a una determinada categoría díagnóstica (por ejemplo, «depresión mayor», «demencia») y que han sido diagnosticadas independientemente (llamando a esta propiedad diagnóstica «sensibilidad»), lo que las distingue de aquellas que no han sido independientemente evaluadas como no pertenecientes a esa categoría diagnóstica (llamando a esta propiedad diagnóstica «especificidad»). 3. Evidencias basadas en la estructura interna: tratan de analizar las relaciones de los ítems de un test entre sí y de ellos con el constructo que sirve para la interpretación de las puntuaciones obtenidas. Las herramientas matemáticas utilizadas son los análisis factoriales, tanto exploratorios como confirmatorios, que permiten responder a la pregunta de investigación sobre si los ítems presentes en un test agru- pan una estructura coherente con la teoría desde la que se elaboraron los ítems. 4. Evidencias basadas en los procesos de respuesta (validez sustantiva): en éstas se trata de recurrir al análisis teórico y empírico de los procesos de respuesta de las personas que cumplimentan el test para valorar el ajuste entre el constructo y la respuesta real de los examinados. Por tanto, se requiere un modelo previo de dichos procesos que deben guiar el proceso de construcción del test y que deben predecir una ejecución diferencial en los elementos del test. Como señala Embretson, el diseño de tests cognitivos de evaluación debería seguir los siguientes pasos: a) especificar sus objetivos, b) establecer el modelo de procesamiento que se requiere, c) generar ítems cuyas variaciones requieran variaciones en los procesos de respuesta y d) evaluar empíricamente el modelo diseñado. Con respecto a las estrategias matemáticas de contrastación, se han desarrollado modelos de Teoría de Respuesta al Ítem (TRI) para el examen de los diversos procesos establecidos teóricamente. 5. Las evidencias de generalizabilidad serían aquellas que examinan la extensión en que las puntuaciones y su interpertación son generalizables a través de grupos, contextos y tareas, incluyendo relaciones testcriterio. Las consideraciones acerca de estas evidencias desde la teoría de la generabilidad, que las considera dentro del proceso de evaluación y no de manera aislada en cada test o instrumento, serán examinadas pormenorizadamente en el epígrafe 5.2. 6. Evidencias sobre las consecuencias del uso del test; se trata de atender a las consecuencias previstas y no previstas del uso del test —potenciales y reales—, positivas y negativas. Con la consideración de las consecuencias del uso de los tests como parte de la validez, Messick (1998) dirigió la aten© Ediciones Pirámide Garantías científicas y éticas de la evaluación psicológica ción hacia «... los efectos colaterales no anticipados de los usos legítimos de los tests, especialmente si se pueden relacionar los efectos adversos imprevistos con fuentes de invalidez del test tales como la baja representación del constructo o la dificultad no relacionada con el constructo...» (p. 40). Se trataría en definitiva de considerar qué efectos, positivos o negativos, puede tener el uso de una técnica sobre el sujeto evaluado. El conflicto entre garantías empíricas y «valoradas consecuencias sociales» es largo en la historia de la psicología aplicada; por ello, para algunos autores la validez consecuencial es una peligrosa intrusión de la política en la ciencia (Less-Haley, 1996). Está claro que las consecuencias sociales son importantes, pero el rechazar hipótesis a partir de ellas, sean positivas o negativas, puede generar gran confusión con las preferencias y deseos de la gente. En este sentido se manifiesta también Meherens (1997) cuando dice «... ese concepto en el que se confunden las inferencias sobre calidad de la medida con la eficacia del tratamiento (o la sabiduría en la toma de decisión) me parece falto de sagacidad» (p. 17). La confusión de validez de la medida con la validez de resultados sociales del proceso oscurece el propio concepto de validez y puede llevar a confundir tests con potenciales impactos en la sociedad. La consideración de las consecuencias sociales refleja el estado actual de la psicología, o sea, refleja el interés en la consideración de la influencia social de la psicología y la responsabilidad que tiene el psicólogo en la toma de decisiones, pero puede suponer, como señala Zimiles (1996), un peligro de generalización excesiva. Aunque es importante tenerlo en cuenta, sería necesario separar las diferentes fuentes de error que pueden concurrir en un acto evaluativo para facilitar su comprobación y su control. © Ediciones Pirámide / 139 De entre las evidencias referidas a las consecuencias de la administración de los tests encontramos la proporcionada por la validez social. Kazdin (1977) y Wolf (1978) propusieron dos métodos para evaluarla: 1) la valoración subjetiva de la aceptabilidad social y de la importancia de las metas, procedimientos y/o resultados obtenidos y 2) la valoración cuantitativa de resultados mediante comparaciones normativas. Actualmente se proponen diversos métodos para evaluarla y diversos momentos para llevarla a cabo entendiéndose que la validez social es un constructo multidimensional formado por dos subsconstructos generales: aceptabilidad y relevancia social (Foster y Mash, 1999). Como señalan estos autores, demostrar que los tests arrojan puntuaciones que pueden producir o producen efectos positivos o negativos es realmente complejo (véanse Abad et al., 2011; Bosch y Fuqua, 2001; Geller, 2001; Kennedy, 2002). Pero, además, las puntuaciones de los tests no sólo tienen impacto social, sino que pueden ser más o menor útiles. Como señala Silva (1985) comentando un trabajo de Rollet (1976), por evaluación «... debe entenderse, ante todo, [...] la obtención y elaboración de datos sobre una base teórica dentro de un proceso de decisión ponderado y en atención a un objetivo predeterminado de tratamiento [...] no se trata ya de lograr un diagnóstico máximamente válido sino de lograr, a través del diagnóstico, un máximo de decisiones correctas, un máximo de utilidad...». Se trata pues de tomar las decisiones más útiles, y esto puede ser operacionalizado de diferentes modos, según distintos autores (Tran y Smith, 2003): Así, utilidad puede ser considerada: a) la sensibilidad de una técnica para detectar variables de tratamiento; b) su eficacia para identificar comportamientos objetivo del tratamiento, o sea, aquellos comportamientos que van a cambiar con 140 / Evaluación psicológica. Conceptos, métodos y estudio de casos la intervención, y, finalmente, c) el grado en que la utilización de una técnica contribuye a mejorar los resultados del tratamiento (Nelson, 1987; Hayes, Nelson y Jarrett, 1987). La utilidad es, por tanto, una característica del proceso de evaluación, no de las técnicas, y no tiene por qué estar relacionada con fiabilidad y validez, sino que se podría describir mejor como una mezcla equilibrada de conocimientos, reglas y prototipos que guían el proceso de toma de decisión, al que vamos a dedicar el próximo epígrafe (De Bruyn y Godoy, 1998; Bleyen, Vertommen y Van Andehahove, 1998; Hayes, Nelson y Jarrett, 1987; Kleimuntz, 1990). En el capítulo 2, cuando se trata el proceso valorativo-interventivo, se presentan algunas características de las medidas que han de seleccionarse en la etapa 5, en la que se establece el plan de tratamiento y su valoración, así como se presenta esquemáticamente el PIV (Plan de Intervención y Valoración) y se hace mención de la fiabilidad y validez de las medidas seleccionadas para valorar el tratamiento. Todo esto nos lleva a la necesidad de normalizar el proceso como método de garantía de las decisiones, a la hora de determinar las consecuencias de la evaluación (validez consecuencial) y de incluir al paciente como persona con responsabilidad adquirida en el curso de su vida y a la de establecer unas directrices. Frente a una posible visión negativa de la utilidad de la evaluación psicológica debida a la imprecisión en su definición, las últimas aportaciones realizadas por el grupo de trabajo de evaluación psicológica de la APA (Psychological Assessment Working Group) parecen demostrar que la evaluación psicológica es, por lo menos, tan útil como la médica para los siguientes campos y aplicaciones: a) para la descripción de la sintomatología clínica y el diagnóstico diferencial; b) para la predicción del comportamiento funcional; c) para la predicción de resultados médicos; d) para la predicción del uso de los sistemas de salud; e) para la predicción de los resultados de los tratamientos psicológicos, y f ) para la predicción de resultados en salud mental (Kubinszyn et al., 2000). En definitiva, parece que con los estándares de 1999 se ha llegado a la reunificación de un concepto de validez aplicable a las diversas técnicas que puede utilizarse en evaluación. Con esta definición de validez: 1. Se recogen las teorías y métodos que durante estos años se han desarrollado: teoría de la generalizabilidad, métodos factores en las matrices multirrasgo/multimétodo, teoría de respuesta al ítem, etc. 2. Se incorpora, además, el interés por lo social y por la responsabilidad del psicólogo en relación con la toma de decisión que él u otros, según sus datos (políticos, por ejemplo), hacen. En este sentido, como Markus (1998) apunta, la teoría unificada de la validez implica un juicio individual de validez para cada interpretación o uso dado al test. 3. Se integran conceptos que, aunque respondían al nombre de validez, se separaban en su consideración de requisito psicométrico, pues se asociaban más a efectos del proceso de evaluación que a las técnicas en sí. Éstos eran los conceptos de validez aparente, validez social y/o utilidad. 4. Implica la aceptación del concepto de validez desde esquemas conductuales de construcción de técnicas de evaluación. Así, en 1997, Cone revisa la aplicabilidad de los requisitos psicométricos en este contexto y, muy en línea con Messick, propone dos tipos de evidencias que él denomina «representacional» y «elaborativa»: representacional, o evidencias del grado en que la medida representa el criterio que se quiere evaluar, y elaborativa, o evidencias sobre la utilidad de la medida. © Ediciones Pirámide Garantías científicas y éticas de la evaluación psicológica No parece, pues, que, en el momento actual, y dada la amplitud de uso que han adquirido los términos «puntuación» y «evidencia» (que ya hemos comentado en el apartado anterior), haya que distinguir los instrumentos construidos desde modelos conductuales de otros instrumentos psicológicos para la consideración de sus requisitos de calidad (véase capítulo 1). De hecho Suen y Rzasza (2003) aplican el planteamiento de Messick a la evaluación conductual estableciendo sólo una diferencia de métodos en la recogida de evidencias entre una y otra metodología. En definitiva, como reflejamos en el cuadro 4.2, existen hoy diferentes procedimientos empíricos para recoger las distintas evidencias sobre la validez de unas técnicas. Estos procedimientos fueron desa- / 141 rrollados desde diferentes perspectivas teóricas, pero pueden hoy ser considerados bajo un concepto unificado de validez. Lo importante es comprobar que la técnica de evaluación que seleccionemos para ser aplicada en determinado caso haya utilizado el procedimiento empírico de recogida de evidencias acorde con el uso que nosotros pretendamos hacer. 4.3. Selección de instrumentos según sus garantías Con todo lo dicho hasta aquí en lo relativo a las garantías científicas, y teniendo en cuenta lo señalado en el capítulo 2 dedicado al proceso de CUADRO 4.2 Procedimientos de obtención de evidencias de validez y teoría base desde la que pueden llevarse a cabo Tipo de evidencia Evidencias basadas en el contenido Procedimiento empírico Teoría base Análisis de temas, palabras y formatos de los ítems y/o códigos TCT conductuales Instrucciones para aplicadores u observadores Conductual Métodos de muestreo Directrices de administración y puntuación Evidencias basadas en los procesos de Análisis de los procesos de respuesta TCT respuesta Datos que muestran que el sujeto responde utilizando procesos adecuados Métodos de entrenamiento para eliminar sesgos en los observadores Conductual Evidencias sobre la estructura interna Análisis factoriales Análisis de consistencia TCT Evidencias de generabilidad TCT TRI Conductual Correlación con criterios Precisión Exactitud Evidencias basadas en la relación con Evidencias convergentes y discriminantes, modelos estructurales TCT otras variables Red nomológica Exactitud TRI Evidencias sobre las consecuencias © Ediciones Pirámide Consecuencias para el evaluado Sensibilidad, especificidad, poder predictivo y utilidad TCT Conductual 142 / Evaluación psicológica. Conceptos, métodos y estudio de casos evaluación en sus dos variantes «descriptivo-predictivo» e «interventivo-valorativo», hemos de recordar que en la fase 2 (deducción de enunciados verificables) y, en caso de contar con objetivos de cambio, también, en la fase 5 (plan de tratamiento y su valoración), a la hora de seleccionar las técnicas de evaluación adecuadas, se requiere revisar, identificar y seleccionar aquellos instrumentos que cuenten con las mejores evidencias en el caso individual, que, necesariamente, diferirán en dependencia de los objetivos de evaluación y las demandas en cada caso. En el cuadro 4.3 se presentan distintos ejemplos de qué garantías tener en cuenta en distintos supuestos. Así, por ejemplo: — Si se nos pide un diagnóstico basado en sistemas de clasificación nominales (por ejemplo, el DSM-IVR o el ICE-10), deberemos utilizar evidencias en torno al poder de clasificación (validez diagnóstica), esto es, a la validez externa del instrumento. — Si la clasificación se refiere a sistemas psicopatológicos dimensionales, que cuentan con agregados de elementos, deberemos examinar la estabilidad de la medida, su objetividad y su consistencia interna, además de recoger evidencias sobre la validez de contenido y estructural concurrente y de constructo de tal instrumento y el examen sobre una potencial validez consecuencial (validez social y utilidad). — Si, con el fin de establecer interacciones entre un niño y su maestra vamos a utilizar las observaciones, deberemos examinar en qué medida el código de observación seleccionado presenta categorías estructuralmente basadas, sus evidencias de validez de contenido y cuáles son los niveles de acuerdo interobservadores. — Si lo que pretendemos es orientar a un individuo para un determinado puesto de trabajo o para su futuro profesional mediante las predicciones que pueden hacerse a tenor de sus aptitudes, además de los datos sobre consistencia interna y estabili- dad de la medida deberemos examinar las evidencias sobre la validez predictiva y de constructo externa (predictiva), así como si existen datos sobre validez social u otras consecuencias del/los instrumentos a utilizar. — Si vamos a examinar a un grupo de escolares en su funcionamiento cognitivo con el fin de tomar decisiones sobre acciones futuras, además de examinar la estabilidad de la medida y su consistencia interna, deberemos constatar las evidencias relativas a la estructura interna y el proceso de respuesta y la validez externa, así como potenciales evidencias sobre consecuencias positivas y negativas. — Si se trata de seleccionar medidas para establecer los efectos de una intervención y si seleccionamos medidas en agregado, deberemos hacerlo con base en evidencias en torno a la consistencia, la estabilidad y, también, la utilidad (la sensibilidad —en el sentido en el que puedan ser modificadas por la intervención—); además, deberemos buscar datos sobre validez estructural y relaciones con otros constructos (convergente y discriminante) del constructo a evaluar aportadas por la técnica a seleccionar y, desde luego, su utilidad. En definitiva, lo importante para un psicólogo es la elección de variables relevantes para el caso en evaluación y la operacionalización de tales variables con base en los indicadores de calidad que proporciona la psicometría. 5. GArAnTÍAS DEL PrOCESO DE EVALUACIón El proceso de evaluación puede ser considerado la espina dorsal de la evaluación; por tanto, desde la calidad de la primera recogida de información hasta la plausibilidad de las hipótesis formuladas, pasando por su operacionalización mediante la selección de los tests y otras técnicas © Ediciones Pirámide Ejemplos de garantías requeridas para la selección de instrumentos en evaluación psicológica Agregados homogéneos X Relaciones funcionales observadas X Contenido X X Contenido (universo de sus potenciales estudios Funcionamiento cognitivo escolares X X Contenido (universo de ítems) X Sens. Validez diagnóstica Validez concurrente Representatividad de los ítems Orientar a un escolar en sus estudios mediante sus aptitudes Valorar los efectos de una intervención en agregados Relaciones con otras variables X Estructura Proceso Consecuencias Validez social Validez de constructo Utilidad Validez de constructo de las categorías observadas Proceso de respuesta Validez predictiva Validez concurrente Validez de constructo Validez concurrente y discriminante Validez de constructo Consecuencias Proceso de respuesta Utilidad Garantías científicas y éticas de la evaluación psicológica X Representatividad de los X ítems Evidencias sobre los tests objetivos del caso Diagnóstico (sistemas de clasificación nominal) Diagnóstico (sistema continuo) Evidencias de validez Objetividad Fiabilidad Estabilidad © Ediciones Pirámide CUADRO 4.3 / 143 144 / Evaluación psicológica. Conceptos, métodos y estudio de casos de evaluación y el rigor en la administración de los tests, todo ello va a influir en la seriedad del proceso y, con ello, en las decisiones finales referidas al diagnóstico, orientación, selección o tratamiento del caso. Además de utilizar instrumentos y técnicas de evaluación en la contrastación de las hipótesis que presenten garantías psicométricas, dos son las vías mejor establecidas para garantizar el proceso de evaluación: 1) la utilización de las Guías del Proceso de Evaluación, que suponen normas que la comunidad científica ha elaborado (GAP, Fernández-Ballesteros et al., 2001), y 2) garantizar los propios datos (no sólo las técnicas utilizadas) mediante el heurístico que provee la teoría de la generalizabilidad y cuando se trata de una demanda de tratamiento y cambio. 5.1. Las Guías del Proceso de Evaluación (GAP) Recientemente, bajo los auspicios de la Sociedad Europea de Evaluación Psicológica (European Association of Psychological Assessment, EAPA), se han desarrollado unas Guías del Proceso de Evaluación (GAP) publicadas por la comisión redactora formada por Fernández-Ballesteros, De Bruyn, Godoy, Hornke, Ter Laak, Vizcarro, Westhoff, Westmeyer y Zacagnini (2001). Las GAP han sido desarrolladas en distintas etapas a través de las cuales se ha mantenido contacto con un amplio grupo de evaluadores que han revisado las distintas ediciones presentadas. Se parte de un esquema general del proceso de evaluación, que se presenta en el cuadro 4.4. Este esquema es muy semejante y sigue la misma estructura que los presentados en los capítulos 2 y 3. Cuenta con cuatro etapas básicas, de un dígito, que se subdividen jerárquicamente en otras hasta llegar a un nivel de tres dígitos. En las distintas fases y subfases se articulan 96 guías que aparecen en el cuadro 4.5. Los objetivos de las GAP son los siguientes: 1) asistir a los evaluadores en su esfuerzo por optimizar la calidad de su trabajo; 2) asistir al cliente de una evaluación para que pueda enjuiciar el trabajo evaluativo, y 3) facilitar el entrenamiento en evaluación. El trabajo se complementa con una revisión teórica y empírica del proceso de evaluación y con un glosario de términos relevantes en evaluación psicológica. En el cuadro 4.5 presentamos una herramienta de las GAP que hemos denominado «Hoja de autovaloración del proceso de evaluación» (HAPE) y que comprende cada una de las 95 normas en formulación de pasado perfecto con el fin de permitir la valoración sobre el cumplimiento de las GAP mediante un autoexamen. En realidad, lo que hemos hecho es convertir las normas GAP («El evaluador debe...») en cumplimientos («El evaluador ha...») con el fin de procurar la reflexión sobre si cada una de esas normas se ha cumplido total o parcialmente, no se ha cumplido o no es aplicable en el caso que se trate de valorar. 5.2. Garantía de los datos recogidos Ya hemos dicho que una cosa es que los instrumentos de evaluación presenten las garantías científicas necesarias para basar en ellos nuestras inferencias y otra que los datos recogidos en nuestra evaluación las presenten. Desde luego, no cabe duda de que cuanto mejores instrumentos utilicemos, tantas más adecuadas garantías presentarán nuestros datos, al menos si hemos seguido con minuciosidad y rigor las indicaciones para su selección. También hemos dicho que nuestros datos proceden tanto de los tests como de otras técnicas, no estándar, que han de adecuarse al caso particular, o, incluso, que algunos de nuestros resultados procederán de observaciones no sistemáticas sobre el sujeto durante el proceso evaluador. Cabe preguntarse, además de tratar de verificar las hipótesis formuladas mediante los tests y las técnicas más rigurosas, ¿es posible establecer algún tipo de garantía de nuestros propios datos procedentes de las distintas medidas recogidas? Trataremos de responder a esta pregunta. © Ediciones Pirámide Garantías científicas y éticas de la evaluación psicológica / 145 CUADRO 4.4 Proceso de evaluación: estructura básica y pasos a seguir según las GAP COMIENZO DEL PROCESO: el proceso comienza cuando una persona o institución (cliente) plantea a un evaluador que responda a una cuestión o que dé un consejo profesional referente a un sujeto o caso. NO SÍ CONDICIONES PREVIAS: el evaluador debe examinar si está cualificado para satisfacer la demanda y si la demanda se ajusta a criterios profesionales. El evaluador debe observar, además, los principios éticos y los requisitos legales que rijan en el país. 0. PRINCIPIOS GENERALES. 1. ANÁLISIS DEL CASO (EVALUACIÓN DESCRIPTIVA). 1.1. Análisis de las demandas, quejas y metas. 1.1.1. Investigación y evaluación de las demandas del cliente o sujeto. 1.1.2. Síntesis de las demandas del cliente y de los aspectos de la situación problemática general. 1.1.3. Acuerdo formal. 1.2. Formulación de hipótesis de evaluación CONTRASTABLES: CONVERSIÓN DE LAS DEMANDAS, QUEJAS Y METAS EN FORMULACIONES DE EVALUACIÓN. 1.2.1. A partir de la información recogida, formulación de las demandas en términos técnicos. 1.2.2. Operativización de las hipótesis mediante instrumentos y procedimientos de evaluación. 1.3. Recogida de información: recopilación de la información pertinente. 1.3.1. Planificación de la administración de los procedimientos de evaluación. 1.3.2. Aplicación de los procedimientos de evaluación. 1.3.3. Valoración de la aplicación de los procedimientos de evaluación. 1.4. Procesamiento de la información: RELACIÓN DE LOS DATOS CON LAS HIPÓTESIS PLANTEADAS. 1.4.1. Análisis de los datos. NO 1.4.2. Formulación de conclusiones. 2. ORGANIZACIÓN E INFORMACIÓN DE LOS RESULTADOS: elaboración técnica de los resultados e información al cliente o sujeto. 2.1. Integración de los resultados: RESPUESTA A LAS CUESTIONES PLANTEADAS POR EL CLIENTE O SUJETO DE LA FORMA MÁS COMPLETA POSIBLE. 2.1.1. Combinación de los resultados en una formulación global del caso. 2.1.2. Formulación de conclusiones en relación con las demandas del cliente o sujeto. 2.2. Informe: PRESENTACIÓN ORAL O ESCRITA DEL INFORME. 2.2.1. Requisitos para la generación del informe. 2.2.2. Inclusión en el informe de información importante. 2.2.3. Generación de un informe fácil de entender. 2.3. Discusión y toma de decisiones. 2.3.1. Discusión del informe con el cliente, sujeto u otros participantes. NO 2.3.2. Analizar si las circunstancias generales aconsejan volver a empezar, finalizar o pasar a intervenir. SÍ 3. PLANIFICACIÓN DE LA INTERVENCIÓN: si el evaluador considera que es necesario intervenir, hay que llevar a cabo varios actos de evaluación antes de la administración del tratamiento. 3.1. Elección de hipótesis específicas para la intervención. 3.1.1. Elección y operativización de la intervención y de las variables para evaluar los resultados. 3.1.2. Revisión y elección de los procedimientos de intervención que mejor se ajusten al caso. 3.1.3. Elección y evaluación de las variables apropiadas para la supervisión de la intervención. REALIZACIÓN DEL TRATAMIENTO 4. VALORACIÓN Y SEGUIMIENTO: si se ha intervenido, deben llevarse a cabo nuevos actos de evaluación. 4.1. Recogida de datos sobre los efectos de la intervención. 4.1.1. Inspección de los datos ya existentes. 4.1.2. Recogida de datos posteriores a la intervención. 4.2. Análisis de los resultados de la intervención. 4.2.1. Sobre los datos recogidos, y siguiendo lo establecido en 1.4, extracción de conclusiones acerca de los efectos de la intervención. 4.2.2. Informe de los resultados al cliente, sujeto u otros participantes. 4.2.3. Si es necesario, informe escrito al cliente, al sujeto o a las otras personas participantes. 4.3. Seguimiento. 4.3.1. Planificación del seguimiento de acuerdo con el cliente y el sujeto. 4.3.2. Evaluación del sujeto de acuerdo con el plan establecido. 4.3.3. Análisis de resultados. 4.3.4. Discusión de los resultados con el cliente, el sujeto y los otros participantes. 4.3.5. Si es necesario, informar por escrito al cliente, al sujeto o al resto de los participantes. FIN DEL PROCESO DE EVALUACIÓN: el proceso de evaluación finaliza cuando el evaluador termina su relación profesional, en lo que a tareas de evaluación se refiere, con la persona o institución (cliente) y con el sujeto o caso. FUENTE: Fernández-Ballesteros, De Bruyn, Godoy, Hornke, Vizcarro, Westhoff, Westmeyer y Zacagninni (2001, 2003). © Ediciones Pirámide 146 / Evaluación psicológica. Conceptos, métodos y estudio de casos CUADRO 4.5 Hoja de autovaloración del proceso de evaluación (HAPE) INSTRUCCIONES: una vez terminada cada fase de la evaluación, el evaluador deberá examinar si ha cumplido cada una de las guías formuladas anotando en la casilla correspondiente: «totalmente», «parcialmente», «no cumplido», «no aplicable». En el caso de que alguna de ellas no se haya cumplido (ni total ni parcialmente) y sea aplicable, el evaluador deberá proceder a revisar su trabajo. Guía 0. Parcial No No aplicable Principios generales 1. 2. 3. 4. 5. 6. 7. 8. 1. Total El evaluador ha asumido la responsabilidad del proceso de evaluación. El evaluador ha tenido en cuenta los posibles conflictos de intereses que hayan podido existir entre el sistema de valores del sujeto o cliente y el suyo propio. El evaluador ha tratado al cliente con imparcialidad y con respeto. El evaluador ha identificado y discutido los asuntos importantes sólo con las personas participantes en el proceso de evaluación. Durante todo el proceso, el evaluador ha valorado las posibles consecuencias positivas y negativas, así como los efectos colaterales de la evaluación para el sujeto o cliente y para su entorno social. Al solucionar las demandas planteadas, el evaluador ha seguido una aproximación científica. El proceso de evaluación ha sido lo suficientemente explícito como para que pueda ser reproducido y valorado, además de facilitar los medios para que pueda quedar constancia de él. El evaluador ha optimizado la justificación, utilidad y calidad del proceso y ha vigilado las condiciones que puedan haberlo distorsionarlo. Análisis del caso (evaluación descriptiva) 1.1. Análisis de las demandas, quejas y metas 9. El evaluador ha logrado un adecuado nivel de comprensión de las quejas, demandas y metas del cliente o sujeto. 10. El evaluador ha considerado el alcance y el nivel de detalle con los que han debido tratarse las quejas, demandas y metas del cliente o sujeto. 11. El evaluador ha averiguado cuál es la percepción del cliente o sujeto sobre la urgencia o severidad del caso. 12. El evaluador ha explorado tanto los aspectos débiles como los aspectos fuertes del sujeto. 13. El evaluador ha limitado su exploración a lo que ha considerado pertinente para el caso. 14. El evaluador ha comprobado la suficiencia y precisión de la información básica. 15. El evaluador ha comprobado si la información recogida resulta suficiente para responder a las demandas planteadas. © Ediciones Pirámide Garantías científicas y éticas de la evaluación psicológica CUADRO 4.5 (continuación) Guía 16. 17. 18. El evaluador ha averiguado cómo interactúan la persona y el contexto en el que vive. El evaluador ha informado al cliente o sujeto de las cuestiones que han sido exploradas a lo largo de la evaluación. El evaluador ha obtenido el consentimiento informado del cliente o sujeto sobre las demandas y metas que van a guiar la evaluación. 1.2. Formulación de hipótesis de evaluación contrastables: conversión de las demandas, quejas y metas en formulaciones de evaluación 19. El evaluador ha de establecer los constructos psicológicos más idóneos para formular las hipótesis de evaluación sobre el caso. 20. El evaluador se ha asegurado de que las hipótesis formuladas han cubierto el problema. 21. El evaluador ha distinguido entre hipótesis descriptivas, clasificatorias, predictivas y explicativas. 22. Cada una de las hipótesis se ha formulado con solidez lógica y teórica y con referencias empíricas claras. 23. Para cada una de las hipótesis formuladas, el evaluador ha generado al menos una hipótesis alternativa. 24. El evaluador ha jerarquizado las hipótesis de evaluación formuladas de acuerdo con criterios explícitos y apropiados para el caso. 25. El evaluador ha revisado los instrumentos de evaluación más adecuados para cada constructo y ha elegido el más apropiado. 26. El evaluador ha vigilado que la información a indagar haya sido pertinente, discriminativa y suficiente con respecto a las hipótesis formuladas. 1.3. Recogida de información: recopilación de la información pertinente 27. El evaluador ha tenido en cuenta los factores distorsionantes, reactivos y perturbadores de los procedimientos de evaluación. 28. El evaluador ha obtenido el consentimiento del sujeto para el plan de evaluación y para los procedimientos de evaluación implicados. 29. El evaluador ha preparado la situación de evaluación y ha dado las instrucciones a los sujetos y demás participantes de acuerdo con estándares técnicos y profesionales. 30. El evaluador ha aplicado los procedimientos de evaluación de acuerdo con estándares técnicos y profesionales. 31. El evaluador ha tenido en cuenta los factores que pudieran interferir en la adecuada aplicación de los procedimientos de evaluación. 32. El evaluador ha tenido en cuenta los factores que podrían interferir en la adecuada aplicación de los procedimientos de evaluación. 33. El evaluador ha vigilado que la recogida de datos se haya efectuado de acuerdo con el plan establecido. © Ediciones Pirámide / 147 Total Parcial No No aplicable 148 / Evaluación psicológica. Conceptos, métodos y estudio de casos CUADRO 4.5 (continuación) Guía 1.4. 34. 35. 36. 37. 38. 39. 2. Total Parcial No No aplicable Procesamiento de la información: relación de los datos con las hipótesis planteadas El evaluador ha revisado si todos los datos son sólidos y están libres de sesgos y errores de codificación. El evaluador ha valorado la calidad de los datos en relación con las hipótesis planteadas. El evaluador ha analizado e interpretado los datos de las pruebas y demás procedimientos de evaluación de acuerdo con las últimas normas, estándares y conocimientos disponibles. El evaluador ha valorado la información de acuerdo con su importancia para el caso. El evaluador ha justificado la relación existente entre las conclusiones y los datos. El evaluador ha especificado el nivel de confianza que deposita en cada una de las conclusiones. Organización e información de los resultados: elaboración técnica de los resultados e información al cliente o sujeto 2.1. 40. 41. 42. 43. Integración de los resultados: respuesta a las cuestiones planteadas por el cliente o sujeto de la forma más completa posible El evaluador ha comprobado cada una de las hipótesis utilizando datos de las fuentes de información apropiadas. El evaluador ha realizado una integración de los datos que resulte adecuada, suficiente y de utilidad para responder a las demandas del cliente. El evaluador ha tenido en cuenta la información contradictoria. El evaluador ha formulado conclusiones que responden a las demandas del cliente o sujeto. 2.2. Informe: presentación oral o escrita del informe 44. La forma de presentar el informe (oral, escrita o ambas) es la apropiada. 45. El informe incluye un resumen con las conclusiones más importantes. 46. El informe señala quién es el autor, el cliente y el sujeto, así como a quién se presentará o enviará. 47. Los datos se presentan de acuerdo con las fuentes de información, instrumentos y procedimientos utilizados. 48. Los datos se estructuran siguiendo criterios psicológicos y se sitúan en la parte de resultados que habrá en el informe. 49. Los asuntos que sobrepasan las demandas iniciales no se han ignorado, aunque sí se han considerado aparte. 50. El informe responde a las demandas del cliente con recomendaciones apropiadas. © Ediciones Pirámide Garantías científicas y éticas de la evaluación psicológica CUADRO 4.5 (continuación) Guía 51. 52. 53. 54. 55. 56. 57. 58. 59. 60. 61. 62. 63. El informe debe responder a las demandas del cliente con recomendaciones apropiadas. Las demandas del cliente nunca pueden quedar sin abordarse. Las fuentes de información, los instrumentos y tests utilizados han quedado reflejados con el suficiente detalle. El informe detalla los pasos y procedimientos utilizados para responder a las demandas del cliente. La sección del informe destinada a exponer los resultados refleja el peso dado a la información obtenida y la forma en que se ha integrado. En la sección del informe sobre los resultados, cada afirmación psicológica está expresamente basada en los datos recogidos y valorada en función de su importancia con respecto a las demandas del cliente. Las inconsistencias encontradas entre los datos se discuten en la sección sobre resultados. Cada una de las frases empleadas es clara y comprensible para el cliente. El apoyo científico de un enunciado se explicita siempre que exista la posibilidad de que se malinterprete. La terminología técnica utilizada debe clarificarse de la forma apropiada. Los elementos descriptivos, comparativos e interpretativos se distinguen entre sí. La interpretación de los datos no se deja en manos del lector. Las conclusiones se exponen con claridad; y las inferencias tentativas se señalan como tales. 2.3. Discusión y toma de decisiones 64. El evaluador ha discutido con el cliente o sujeto las diferenes secciones del informe. 65. El evaluador ha tratado con el cliente, sujeto u otras personas participantes las posibles recomendaciones, asegurándose de que las entienden. 66. El evaluador ha reflejado los datos surgidos durante la discusión del informe y de las recomendaciones en la versión final de éste. 67. Si se requiere intervención y el evaluador no está cualificado para llevarla a cabo, el sujeto ha sido enviado al profesional adecuado. 68. Si es pertinente, el evaluador ha enviado un informe a los profesionales oportunos. 3. Planificación de la intervención: si el evaluador considera que es necesario intervenir, hay que llevar a cabo varios actos de evaluación antes de la administración del tratamiento 69. El evaluador ha establecido los criterios y las metas de una intervención provechosa. © Ediciones Pirámide / 149 Total Parcial No No aplicable 150 / Evaluación psicológica. Conceptos, métodos y estudio de casos CUADRO 4.5 (continuación) Guía Total Parcial No No aplicable 3.1. Elección de hipótesis específicas para la intervención 70. El evaluador ha formulado las hipótesis de intervención basándose en los resultados de las evaluaciones previas. 71. En la medida de lo posible, el evaluador ha jerarquizado las hipótesis de intervención siguiendo criterios explícitos y útiles para el caso. 72. El evaluador ha definido operativamente las variables relacionadas con las hipótesis de intervención. 73. El evaluador ha inventariado y sopesado los tratamientos posibles y, finalmente, ha diseñado la intervención. 74. El evaluador ha identificado y evaluado las posibles condiciones facilitadoras e inhibidoras que puedan afectar a la intervención. 75. El evaluador ha tratado con el cliente o sujeto las alternativas de intervención y sus posibles consecuencias. 76. Si ha sido posible, el evaluador ha dispuesto los medios con los que comprobar la marcha de la intervención. 77. Si resulta necesario, el evaluador ha vigilado la intervención. 78. Si es necesario, el evaluador debe vigilar la intervención o tratamiento para evitar desviaciones. Si las desviaciones son inevitables, deben registrarse cuidadosamente. 4. Valoración y seguimiento 79. 80. El evaluador ha determinado en qué medida se puede valorar la intervención y su puesta en práctica (evaluación valorativa). El evaluador ha informado a los interesados de la importancia de realizar una valoración. 4.1. Recogida de datos sobre los efectos de la intervención 81. El evaluador ha revisado los datos previos obtenidos en las fases 2 y 3 para decidir cuáles son útiles para la valoración y ha elegido de entre ellos las mejores medidas de resultados. 82. El evaluador ha comprobado si la intervención se ha llevado a cabo tal como se había planificado. 83. El evaluador ha planificado la valoración con esmero, atendiendo tanto a los datos previamente recogidos ya disponibles como a los datos adicionales que se deben recoger. 84. El evaluador ha administrado las medidas elegidas siguiendo lo establecido en 1.3. 85. El evaluador ha recogido, según se establece en 1.3, cualquier otra información sobre cambios positivos o negativos que puedan considerarse resultados de la intervención. 86. El evaluador ha recogido información empleando distintos indicadores y de diferentes fuentes. © Ediciones Pirámide Garantías científicas y éticas de la evaluación psicológica / 151 CUADRO 4.5 (continuación) Guía Total Parcial No No aplicable 4.2. Análisis de los resultados de la intervención 87. El evaluador ha comparado los resultados con las demandas del cliente y con las metas de la intervención. 88. Antes de interpretar los efectos de la intervención, el evaluador ha comprobado si dichos efectos realmente se pueden atribuir a la intervención. 89. El evaluador ha comprobado si se han producido efectos colaterales. 90. El evaluador ha considerado las posibles explicaciones alternativas de los efectos de la intervención. 91. El evaluador ha tratado los resultados de la valoración con el cliente, sujeto u otras personas participantes. 92. El evaluador ha justificado las conclusiones en relación con las demandas del cliente, las metas de la intervención y los efectos colaterales, de tal forma que los interesados puedan valorarlas en la medida en que resultan aplicables las mismas guías que en 2.2. 4.3. Seguimiento 93. El evaluador ha planificado el seguimiento, eligiendo objetivos pertinentes y realistas. 94. El evaluador ha discutido y llegado a un acuerdo sobre el plan de seguimiento con el cliente, el sujeto y demás interesados. 95. El evaluador ha recabado información del sujeto y demás participantes sobre posibles consecuencias positivas o negativas no previstas en la medida en que resultan aplicables las mismas guías que en 4.2.1, 4.2.2, 2.2.1. La conceptualización sobre las garantías científicas que proponemos deben ofrecer nuestros datos, recogidos en el transcurso del proceso evaluador, procede de la teoría de la generalizabilidad (TG) formulada por Cronbach et al. (1972). La TG ha tenido múltiples aplicaciones; lo que nosotros proponemos es la utilización de su racional como un heurístico para indagar la bondad de los datos recogidos en nuestro caso. En este marco, una medida conductual (una medida procedente de un test o técnica de evaluación psicológica) es entendida como una muestra de la total colección de observaciones posibles; interesa obtener una puntuación sólo porque ella es representativa de alguna de las facetas o universos (Cronbach, Gleser, Nanda y Rajaratman, 1972) que se pretende generalizar. © Ediciones Pirámide Como se ha dicho, en teoría de tests se habla de una puntuación verdadera y de una puntuación observada, entre las cuales media el error de medida; esto es, la puntuación que obtenemos cuando intentamos medir un aspecto de un sujeto (Xo) es igual a la puntuación que realmente tiene el sujeto en eso que queremos medir (Xv) más una puntuación de error (Xe): Xo = Xv + Xe y en torno a esta afirmación gira la teoría de tests clásica, por lo que a ella se suelen atener los procedimientos generales de medida. Por su parte, la TG prefiere hablar, en lugar de puntuación verdadera, de puntuación universo, para enfatizar que lo que el evaluador hace es una 152 / Evaluación psicológica. Conceptos, métodos y estudio de casos inferencia desde una muestra de datos observados a un conjunto de datos de interés. Por otra parte, ese conjunto de datos de interés procede de distintos ámbitos; en otras palabras, existe más de un universo al que pretendemos generalizar nuestras observaciones sobre un sujeto (Cronbach, Gleser, Nanda y Rajaratman, 1972). Esta reconceptualización implica que, en lugar de una puntuación verdadera que hay que «descubrir» a través de las puntuaciones observadas (como hace la teoría clásica de tests), existen distintos universos a los cuales los datos obtenidos podrían ser generalizables. Es decir, lo observado sobre un sujeto mediante los tests y técnicas durante el proceso evaluador ¿hasta qué punto se puede generalizar?; ¿ocurre en los distintos ámbitos de la vida del sujeto? Estos conceptos pertenecen a otras disciplinas metodológicas y a temas referidos a población, muestra, muestreo e inferencia. Recordemos que al hablar del muestreo se dice que es el procedimiento por el cual obtenemos una parte representativa de una población (muestra) para, a través de los estadísticos obtenidos con las observaciones de la muestra, estimar los parámetros de la población (inferencia). Asimismo, un sujeto, perteneciente a una muestra representativa de una población, puede a su vez pertenecer a otra muestra, representativa de otra población; todo depende de la definición que hagamos de dicha población. Por ejemplo, entre la población de estudiantes de Letras de Madrid y la población de mujeres de Madrid hay una intersección formada por las mujeres de Madrid estudiantes de Letras, pudiendo estos sujetos servir para hacer inferencia a cualquiera de las dos poblaciones definidas. Para la TG, las medidas conductuales obtenidas de un sujeto son la muestra de las muchas que podrían obtenerse. En definitiva, interesa conseguir puntuaciones sólo porque son representativas de toda la colección o universo, es decir, de la población de conductas. Dentro de la terminología de la TG, las observaciones son descritas en términos de condiciones, esto es, la tarea o estímulos presentados al sujeto, el día y la hora en que se registra la conducta, el observador que puntúa, etc. El término general que hace referencia a la condición de una cierta clase es la faceta, siendo ésta la que sola, o en combinación, define los universos. Así como en estadística inferencial se estudia que la población, y su definición, dependen del estudio concreto que queremos realizar, también aquí los universos dependen de la teoría o de la práctica involucradas en el proceso evaluador. Pero la lógica de estos conceptos también puede ser aplicada al estudio del caso individual. Así, Cone (1977), recogiendo lo establecido por Wiggins (1973), propone seis universos a través de los cuales deben ser generalizados los datos procedentes de una evaluación conductual: el universo de generalización de las puntuaciones, el de los elementos, el temporal, el de las situaciones, el del método y el de las dimensiones (véase FernándezBallesteros, 1979). Veamos a continuación algunos problemas en torno a la fiabilidad y validez de los datos de una evaluación particular en torno a estos universos de generalizabilidad. 1. Generalizabilidad de las puntuaciones Este universo de generalizabilidad implica la siguiente pregunta: ¿en qué medida los datos procedentes de un evaluador son generabilizables a los obtenidos por otros evaluadores? Con esta pregunta estamos haciendo referencia a lo que, desde la perspectiva de la psicometría clásica, se denomina «objetividad» o «fiabilidad interjueces» y que ha sido reformulada desde la teoría de la generalizabilidad aludiendo al universo de generalización de los evaluadores u observadores. En todo caso, lo que se pretende es constatar en qué medida los datos obtenidos no dependen de la persona que los obtiene. Desde luego, existen datos procedentes de las técnicas estándares que presentan garantías de objetividad. Así, por ejemplo, el MMPI, algunos de los subtests de las Escalas de Medida de la Inteligencia de Wechsler, los registros poligráficos, etc., son procedimientos, en este sentido, objeti© Ediciones Pirámide Garantías científicas y éticas de la evaluación psicológica vos. No obstante, existen datos procedentes de otros procedimientos de evaluación que requieren el establecimiento de su objetividad para ser tenidos en cuenta. Así, por ejemplo, los procedimientos de observación requieren la utilización de más de una puntuación con el fin de contrastar el acuerdo entre jueces y, con ello —y al menos en parte—, la objetividad de los resultados observados o, al menos, su intersubjetividad. En el capítulo 5 se examinarán los distintos procedimientos de contrastación de este punto. En resumen, deberemos averiguar —en la medida de lo posible— si los datos por nosotros obtenidos son generalizables a otros evaluadores, es decir, que tenemos evidencia de objetividad. 2. Generalizabilidad de los elementos Este universo de generalización implica la siguiente pregunta: ¿hasta qué punto los elementos de un test son representativos del amplio universo de elementos implicados en el mismo ámbito de contenido y/o son generalizables a otros? Esta pregunta hace referencia a lo que, desde la perspectiva de la psicometría clásica, se denomina «validez de contenido», así como a la fiabilidad, entendida como «consistencia interna». Este punto aparece ligado a aquello en lo que hemos hecho especial hincapié a lo largo de los temas anteriores. Es decir, la necesidad de especificar el ámbito al cual se va a dirigir la evaluación. Una vez especificado éste, será más sencillo seleccionar las pruebas en las que figuren elementos representativos del conjunto de conductas que nos interesa evaluar. Así, por ejemplo, en el caso de evaluar los fallos en el rendimiento de un niño, habremos de recoger datos representativos de las distintas áreas de funcionamiento escolar, en las diferentes materias escolares. Con este fin podemos encontrar procedimientos estándar que presentan este tipo de propiedad generalizadora; existen tests de logro académico con tales garantías. Pero, en ocasiones, las muestras de conducta a evaluar habrán de ser seleccionadas mediante técnicas no contaminadas, por medio de los cuadernos escolares, por lo que éstos habrán de ser © Ediciones Pirámide / 153 recogidos en base a su representatividad sobre el conjunto posible. En definitiva, los elementos de los cuales se derivarán nuestros datos deben ser representativos del ámbito total sobre el que vamos a generalizarlos. 3. Generalizabilidad temporal Ante este universo de generalizabilidad podemos plantearnos: ¿hasta qué punto los datos obtenidos en un determinado momento son extensibles a otros momentos de la vida del sujeto? Si los datos que recogemos en un momento concreto (por ejemplo, en una sesión de observación) se repiten en otros períodos, podríamos hablar de estabilidad de nuestras mediciones o, también, de que hemos obtenido una adecuada fiabilidad test-retest (desde la psicometría clásica), o, en otras palabras, de la posibilidad de generalizar nuestros datos a un universo temporal desde la teoría de generalizabilidad. Evidentemente, no estamos sugiriendo aquí que los tests tengan que ser aplicados varias veces con el fin de comprobar su estabilidad en nuestro caso, ya que esta garantía, como hemos dicho antes, viene de antemano, generalmente, probada en el manual del test. Pero sí será necesario comprobar este extremo a la hora de considerar fiables algunos datos procedentes de la observación, la autoobservación o los registros psicofisiológicos (por poner algunos ejemplos). En todos estos casos, y en otros, suele presentarse una importante fuente de error, la reactividad, la cual puede hacer que el sujeto responda, en un primer momento, de forma no habitual y que, por tanto, los datos registrados hoy puedan no contrastarse en otros momentos. Dos son los procedimientos garantes de la generalizabilidad temporal de los datos: el establecimiento de períodos de habituación en la recogida de información y la obtención de estabilización de la medida previa al inicio de la observación (o la introducción de un tratamiento). Pero hay que tener en cuenta que existen conductas o características psicológicas más estables que otras, y este hecho habrá de ser tenido en 154 / Evaluación psicológica. Conceptos, métodos y estudio de casos cuenta a la hora de pretender aplicar el universo de generalizabilidad temporal. Así, resulta cuestión aparte la que comentábamos antes sobre el hecho de que existan técnicas muy sensibles frente a acontecimientos externos pero útiles en la medición del cambio. En estos casos, será conveniente relacionar el universo de generalizabilidad del tiempo y el de las situaciones. Así, por ejemplo, si un sujeto desea dejar de fumar y al autoobservar este tipo de conducta se comprueba que hay una gran variabilidad en ella, habrá que relacionarlo con las situaciones en las que se da un alto y bajo consumo de tabaco, comprobando entonces ambas facetas. Desde luego, existe la posibilidad de que la falta de estabilidad de la medida no se deba a la especificidad situacional, sino simplemente a lo inadecuado del procedimiento de medida, por lo que, en este caso, será rechazado éste. En resumen, antes de tomar como aptos sus datos, el evaluador ha de cerciorarse de que la conducta observada, o la atribución realizada, no se ha dado de forma aleatoria o casual, sino que, en el caso de que así sea esperable, aparece de forma estable en nuestro sujeto. 4. Universo de generalizabilidad de las situaciones El cuarto universo de generalizabilidad es el de las situaciones. La cuestión aquí planteada es: ¿hasta qué punto los datos de un test, recogidos en una situación, son generalizables a otras situaciones? Con ello estamos haciendo referencia a distintos tipos de criterios de bondad de la medida: por una parte, si el comportamiento es consistente intersituacionalmente (la generalidad del comportamiento), y, por otra, también estamos haciendo referencia a la «validez ecológica» en cuanto a la posibilidad de que los datos recogidos en situaciones artificiales de laboratorio, como son los tests y técnicas, sean generalizables a la vida real del sujeto. El evaluador deberá conocer, como garantía de sus datos, hasta qué punto la conducta (o la atribución que se hace de ella) que un sujeto presente en una situación también ocurre —o puede inferirse también— en otras. El uso del muestreo intersituacional permite la obtención de datos representativos al respecto, lo cual será tratado con un poco más de detenimiento en el capítulo 5. Respecto al problema de la generalización fuera de la situación de laboratorio, éste es común a cualquier proceso experimental. Snow (1979) nos dice: «la validez ecológica se logra en la medida en que los ambientes o situaciones de un experimento sean representativos de la población de situaciones (de la vida real) a las que el investigador desea generalizar» (p. 199). Así, Fiske (1978), en este mismo sentido pero en referencia más concreta, señala cómo «la situación de examen y los estímulos del test constituyen, juntos, una situación única que no puede ser considerada como representativa de ninguna situación con las que ordinariamente se encuentran los sujetos [...]; en consecuencia, la medida en que los resultados empíricos pueden ser generalizados está claramente restringida, y la validez externa de las mediciones hechas en tal situación es muy limitada. Todos estos problemas son bien conocidos por el investigador cuidadoso y experimentado, y, sin embargo, la costumbre es poner en ellos una mínima atención, ya que se puede hacer poco para solucionarlos» (p. 138). Salvando un poco este pesimismo de Fiske, la validez ecológica de la evaluación puede comprobarse a través de la concordancia que las medidas procedentes del laboratorio/clínica tengan con las medidas obtenidas en situaciones naturales, así como con la utilización de estas últimas de modo prioritario en evaluación. 5. Universo de generalizabilidad de los métodos El universo de generalizabilidad del método lo que nos plantea es: ¿en qué medida los datos procedentes de un método de evaluación son generalizables a otros que evalúen el mismo contenido? Ya se ha dicho en repetidas ocasiones que el evaluador debe utilizar diferentes procedimientos de recogida de información a la hora de realizar una evaluación, y se han mencionado también las © Ediciones Pirámide Garantías científicas y éticas de la evaluación psicológica razones por las que esto debe ser así. Todo ello ha de llevarnos al establecimiento de las covariaciones entre las técnicas empleadas siempre y cuando éstas evalúen un mismo conjunto de comportamientos de un sujeto. Desde una perspectiva general, la pregunta formulada hace referencia a la «validez convergente» y «concurrente» (de constructo o predictiva) de los instrumentos de evaluación. No obstante, a nosotros lo que nos interesa es hasta qué punto los datos obtenidos a través de distintos procedimientos son convergentes entre sí en el sujeto explorado. Tales concordancias dependerán, por un lado, de los sesgos especiales de los procedimientos de evaluación, así como del tipo de comportamientos evaluados y de la modalidad de respuesta a la que éstos pertenezcan. En ocasiones, la falta de concordancia entre distintos métodos puede ser imputada a la ausencia de consistencia entre modalidades de respuesta y ser, en algunos casos, objetivo de modificación. Así, pongamos el ejemplo de un sujeto con disfunción sexual que afirma no sentir ningún tipo de activación frente a estímulos sexuales mientras que puede observarse objetivamente tal activación mediante un pletismógrafo. En este caso, no podría hablarse de falta de concordancia entre métodos, sino de un probable déficit del sujeto en la apreciación de su estado emocional interno en situaciones sexuales. En todo caso, la apreciación de la consistencia intermétodos en la evaluación de un solo sujeto habrá de ser valorada de forma racional por la complejidad que dicha consistencia entraña (Fernández-Ballesteros y Maciá, 1992). No obstante, el evaluador deberá examinar minuciosamente las puntuaciones obtenidas en los distintos métodos que evalúan iguales o distintas dimensiones y llegar a conclusiones sobre la bondad de los datos que proceden del sujeto (o grupo de sujetos). 6. Universo de generalizabilidad de las dimensiones Con este universo de generalizabilidad se está planteando la siguiente cuestión: ¿en qué medida las propiedades o estimaciones de una variable © Ediciones Pirámide / 155 son generalizables a otras? Con esta pregunta se está haciendo referencia a la «validez de constructo» en la psicometría clásica. El objetivo de generalizabilidad aquí no viene dado por un afán del evaluador de hallar dimensiones básicas o atributos intrapsíquicos específicos al caso individual, aunque, en ocasiones, de lo que se trata es, precisamente, de hallar factores o dimensiones cognitivas en el sujeto. Lo que tratamos, más bien, es de conocer en qué medida una serie de conductas, que teóricamente saturan una misma variable, se dan con esta asociación en nuestro caso concreto o, también, si distintas modalidades de respuesta, que teóricamente han de verse asociadas, covarían entre sí. Ya se ha comentado la dificultad que existe en la valoración de este extremo por la complejidad de establecer separadamente la varianza debida, independientemente, a la dimensión y al método. Como en el caso anterior, este punto habrá de ser examinado con cautela, ya que la investigación básica que avala tal universo de generalización es inconsistente. En resumen, la TG nos provee de un heurístico que nos va a permitir examinar y valorar la calidad de los datos procedentes de un caso concreto en la evaluación psicológica y, junto a la aplicación de las Guías del Proceso de Evaluación, optimizará la calidad del trabajo evaluador. 6. DIrECTrICES y GUÍAS QUE AFECTAn A LA EVALUACIón PSICOLóGICA En la última década del siglo XX se ha producido una enorme actividad normalizadora en el ámbito de la evaluación psicológica, y más allá de la que concierne a la construcción de tests y el proceso de evaluación (para una revisión, véase el número especial de 2001 [3] del European Journal of Psychological Assessment). A partir de 1991 distintas organizaciones nacionales, europeas e internacionales han producido un conjunto de guías, directrices, normas o estándares que complementan lo hasta aquí tratado referido al proceso de evaluación (GAP). Las más relevantes son: 156 / Evaluación psicológica. Conceptos, métodos y estudio de casos — Los criterios sobre la revisión de tests (2000). — Las directrices para la traducción y adaptación de tests (1996). — Las directrices internacionales para el uso de los tests (2000). — Las directrices internacionales para la evaluación informatizada y tests aplicados por Internet (2003). 6.1. Criterios sobre la revisión de los tests En los últimos años han comenzado a aparecer nuevas revisiones de tests tradicionales (un buen ejemplo lo constituyen las Escalas de Medida de la Inteligencia de Wechsler). Otras veces los tests permanecen largo tiempo sin revisar porque el proceso es largo y costoso, dado que, sobre todo cuando se trata de pruebas individuales, implica a muchas personas trabajando durante mucho tiempo (Adams, 2000). ¿Cuándo debería aconsejarse someter a un test al proceso de revisión? Como Adams (2000) apunta, aún no existen estándares que señalen cuándo un test requiere una revisión, pero sí existe consenso científico. De algún modo, los estándares surgidos también lo refieren; por ejemplo la APA en 1985 dice que un test debe ser adaptado o revisado cuando existen nuevos datos de investigación que representan cambios significativos en el dominio, en las condiciones de uso o en la interpretación que pueden hacer inapropiado el uso del test. Los nuevos estándares sobre la adaptación de los tests prestan gran atención a las causas transculturales, inmigración, estudios de comparación de culturas, etc., en relación con la revisión de tests. Silverstein y Nelson (2000) se centran en consideraciones conceptuales para crear nuevas ediciones de un test. Según ellos, deberían hacerse nuevas revisiones cuando la investigación sobre el test ha mostrado nuevos conceptos subyacentes que deben ser incorporados; otros autores se centran más en las características del instrumento, por ejemplo, según Strauss, Spreen y Hunter (2000), existen seis razones como mínimo que jus- tifican la revisión de un instrumento de evaluación; éstas son: 1. La actualización de las normas (Strauss et al., 2000). Se ha comprobado que en los tests de inteligencia el CI no se mantiene constante con el tiempo, sino que aumenta unos 3 puntos cada década, lo que se conoce como efecto Flynn (Flynn, 1984; Fernández-Ballesteros y Juan-Espinosa, 2001). Esto supone el aumento de una desviación típica de CI cada 50 años, efecto muy interesante si tomamos en consideración que un gran número de los tests utilizados actualmente fueron producidos en los años cincuenta y sesenta. 2. Ese efecto de los años sobre un test no es homogéneo, o sea, no todos los subtests sufren en la misma cuantía el paso del tiempo, sino que hay unos más sensibles que otros, como se ha demostrado en los estudios sobre el WAIS o el MMPI. Esto significa que el paso del tiempo puede afectar a las relaciones entre subtests y al propio constructo medido. O sea, puede afectar a la interpretación que hagamos de las puntuaciones de un test. 3. Muchas veces interesa ampliar el uso del test a minorías de otras culturas, o a otros rangos de edad. En un mundo globalizado y en sociedades multiculturales y multirraciales este punto cobra una importancia prioritaria. 4. Existen ítems que frecuentemente quedan obsoletos con el paso de los años (por ejemplo, los problemas en pesetas de la mayoría de los tests). Así pues, existe la necesidad de una constante revisión de los ítems. 5. Los estudios acumulados sobre el test permiten aumentar su fiabilidad o su validez y, por tanto, se requiere una constante actualización. 6. Ocurre frecuentemente que se producen nuevos modos de aplicación: aparecen versiones informatizadas, o se modifiquen las alternativas de respuesta, lo cual conlleva © Ediciones Pirámide Garantías científicas y éticas de la evaluación psicológica una importante base de investigación y actualización. 6.2. Directrices para la traducción y adaptación de tests La mayor parte de los problemas derivados del uso de tests provienen de su utilización inadecuada. En la evaluación psicológica frecuentemente se utilizan instrumentos traducidos y/o adaptados de otros contextos lingüísticos y culturales. Sin embargo, excepto los principios establecidos por Brislin (1986), que hacían referencia específica a la traducción de instrumentos, no existían guías ni estándares. La International Test Comission (ITC), tratando de atender a esta necesidad, y en colaboración con diferentes sociedades internacionales, ha desarrollado unas normas para la adaptación de tests (Hambleton, 1994; Muñiz y Hambleton, 1996) formadas por 22 principios agrupados en cuatro áreas: — Contexto. Agrupa dos normas que hacen referencia a la minimización de las diferencias no relevantes entre poblaciones para el estudio que se pretende y a la significación del constructo evaluado para la población objetivo, entendiendo que muchos de los constructos evaluados en psicología son dependientes de aspectos culturales y que por tanto no son equiparables entre culturas diferentes (lo que directamente exige la demostración de equivalencia cultural del constructo antes de llevar a cabo la adaptación de un instrumento). — Desarrollo o adaptación de instrumentos. Consta de diez principios en los que se establecen las normas que deben regir en la traducción, tanto en los ítems como en las alternativas de respuesta, las exigencias que deben seguir el desarrollo de instrumentos para ser utilizados en estudios transculturales, la comprobación de la equivalencia de tests y de elementos y la validación para diferentes poblaciones. © Ediciones Pirámide / 157 — Administración. Formado por seis directrices que explicitan las normas relativas a instrucciones, relación evaluador-evaluado y condiciones contextuales que afectan a la equivalencia de los tests. — Interpretación. Comprende cuatro normas que tienen en consideración las diferencias culturales en las normas de interpretación de un test. La información sobre todo el proceso de adaptación que permita aportar datos para la interpretación de un resultado. 6.3. Directrices internacionales para el uso de los tests Han sido generadas también por la ITC, auspiciadas por un conjunto de sociedades nacionales, europeas e internacionales y lideradas por Bartram (para una versión española, véase Muñiz, 2002) con el objetivo fundamental de mejorar el uso profesional y ético de los tests psicológicos, entendiendo por tales los procedimientos de evaluación psicológica que se aplican según normas preestablecidas y se apoyan en datos empíricos sobre su calidad. Se dirigen no sólo a constructores, investigadores o usuarios, sino a todas las personas que, de un modo u otro, participan en un proceso en el que esté implicada la evaluación psicológica mediante estos procedimientos, esto es: editores, vendedores, docentes, gestores, profesionales, legisladores y sujetos evaluados. Posee un contexto de aplicación internacional, aunque deja margen de flexibilidad para tener en cuenta las peculiaridades contextuales de cada país. Según estas directrices, una persona que utilice un test debe poseer no sólo los conocimientos propios de la psicología y de la evaluación psicológica, sino también los relacionados con el proceso, la situación y el área de aplicación concreta, los sociales y políticos del contexto en que ésta se lleve a cabo y los profesionales y éticos. Poseen dos apartados: 158 / Evaluación psicológica. Conceptos, métodos y estudio de casos El primero, con 33 artículos, revisa la responsabilidad en el uso ético de los tests entendiendo por tal: — Actuar de manera ética y profesional. — Asegurarse de tener competencia en el uso de los tests. — Responsabilizarse del uso que se haga de los tests. — Asegurarse de que los materiales estén en lugar seguro. — Asegurar la confidencialidad de los datos. El segundo, con 102 artículos, se dirige a la utilización adecuada de los tests, que se refiere a: — Estimar la utilidad potencial de los tests en una situación de evaluación. — Elegir tests técnicamente correctos y adecuados a cada situación. — Prestar atención a aspectos relacionados con el sesgo cultural. — Preparar cuidadosamente las sesiones de aplicación del test. — Aplicar los tests adecuadamente. — Puntuar y analizar los resultados del test con precisión. — Interpretar los resultados adecuadamente. — Comunicar los resultados de forma clara y precisa a las personas correspondientes. — Construir adecuadamente los tests. — Revisar la adecuación del test y del uso que se le dé. A estos principios añaden tres apéndices en los que se revisan las pautas para establecer políticas sobre el uso de los tests, pautas para confeccionar contratos entre las partes implicadas en evaluación y aplicación de tests a personas con discapacidades. 6.4. Directrices internacionales para la evaluación informatizada y tests aplicados por Internet El aumento exponencial de los tests construidos para ser aplicados por ordenador o por Inter- net obliga a la ITC a plantearse la redacción de unos estándares que sean de aplicación internacional (aunque tengan en cuenta las peculiaridades nacionales) dirigidos a aumentar la conciencia de todos los grupos implicados en la necesidad de una buena práctica. Como ya han sido acotados en las guías anteriores varios temas de interés, en este caso los estándares se dirigen a detallar las peculiaridades de la evaluación informatizada. En 2005, en Granada, en el Internacional Congress of Psychology, la Internacional Test Commision llevó a cabo la aprobación de las directrices internacionales para la evaluación informatizada y los tests aplicados por Internet, redactada inicialmente por Bartram y Coiné. Estas directrices se detallan para los tres principales grupos implicados: los que diseñan los tests, los que los distribuyen y los que los usan, y, en los diferentes artículos, diferencian cuatro posibles modos de administración de tests informatizados: abierto (por Internet sin control de un evaluador), controlado (que requiere una clave de acceso conocida sólo por los evaluadores), supervisado (requiere autentificación del evaluador que confirma la aplicación del test) y dirigido (el evaluador controla toda la aplicación del test). En estos estándares se entiende que el uso fundamental de esta evaluación es la orientación y selección, fundamentalmente profesional. El primer objetivo: las directrices encaminadas a cuidar las cuestiones tecnológicas: 1. Desarrollan consideraciones de hardware y software y centran su atención en la descripción de los requisitos del sistema, la justificación del programa y las posibilidades de actualización. 2. Se dirigen a asegurar la robustez del programa y señalan la necesidad de anticipar posibles fallos y proporcionar todo el soporte técnico a los usuarios. 3. Se centran en tomar en consideración los factores humanos que pueden afectar a la presentación del material y tratan fundamentalmente del diseño, el tipo de estímulos, la distinción entre instrucciones e ítems, © Ediciones Pirámide Garantías científicas y éticas de la evaluación psicológica 4. 5. la facilidad del usuario para volver atrás, la familiaridad de los usuarios con las demandas del programa, la compatibilidad con diferentes sistemas informáticos, etc. Tratan de considerar el ajuste de las características técnicas con diferentes causas de incapacitación en los sujetos evaluados y se centran en asegurar y explicitar quiénes pueden y no pueden ser evaluados mediante ese procedimiento. Se interesan en el suministro de ayuda e información práctica para los usuarios. Si las directrices del programa son claras, completas, explícitas; si proporcionan práctica inicial con el procedimiento, etc. El segundo bloque se centra en las garantías de calidad: 1. 2. 3. 4. 5. 6. Trata de asegurar el conocimiento y la competencia para los usuarios y los sujetos evaluados. Se centra en los requisitos psicométricos del procedimiento. Se refiere a los procedimientos que son versiones de tests clásicos de papel y lápiz y se dirige a la demostración de la equivalencia de formatos. Se refiere a los análisis de fiabilidad de puntuaciones y resultados obtenidos en estas versiones. Trata sobre si la interpretación de resultados es apropiada, señalando sus limitaciones: si las especificaciones del programa suministran documentación y/o feedback adicional y en qué criterio, reglas o procedimientos basan la interpretación, etc. Pretende asegurar la igualdad de acceso para cualquier grupo, país, etnia o comunidad lingüística. El tercer apartado se dirige a asegurar los niveles de control apropiados: 1. 2. Sobre las condiciones de administración. Sobre las condiciones de supervisión. © Ediciones Pirámide 3. 4. / 159 Sobre la práctica inicial del evaluador y la exposición inicial del evaluado. Sobre las posibilidades de autentificación y estafa del acceso al sistema. El cuarto bloque toma medidas para asegurar la privacidad y seguridad de los datos recogidos entendida como: 1. 2. 3. 7. Seguridad para el material que constituye el test. Seguridad para la transferencia de datos por Internet. Confidencialidad de los resultados obtenidos. GArAnTÍAS éTICAS: EL CóDIGO DEOnTOLóGICO Reflexionar sobre cuestiones éticas debe ser un componente esencial del desarrollo y la práctica de una profesión. La integridad de ésta depende de la aceptación de un código de normas por parte de sus miembros y de la necesidad de mantener una constante crítica y reevaluación de los principios éticos y normas que la sustentan (Frank de Vertheyin, 1996). La necesidad de regular a nivel ético la profesión de psicólogo surge casi a la vez que la propia psicología científica. La Asociación Americana de Psicología fue fundada en 1882, pero, curiosamente, durante más de cuarenta años iba resolviendo los problemas éticos conforme éstos se presentaban. En 1938 nombra la primera comisión encargada de establecer normas éticas para sus miembros, tras un largo período de encuestas e incidentes. Existen dos términos, derivados del inglés, además de la denominación genérica de «código deontológico», que hacen referencia a estos conjuntos de normas: «directrices» (o estándares) y «guías». El Joint Comite on Standards for Educational Evaluation (1994) define estándar como «un principio ampliamente compartido por los expertos en la realización y utilización de valoraciones y referido a la medición del valor o la cali- 160 / Evaluación psicológica. Conceptos, métodos y estudio de casos dad de una valoración» (p. 209), y guía como una «sugerencia sobre procedimientos que ayuden a los evaluadores y a sus clientes a cumplir unos requisitos [...]; una estrategia destinada a evitar errores en la aplicación de dichos estándares» (p. 206). En este sentido, ambos términos están estrechamente relacionados y van dirigidos a proporcionar garantías y control de calidad, pero, a juicio de algunos (Fernández-Ballesteros et al., 2003), los estándares tienen mayor nivel de exigencia que las guías. Pues bien, los primeros principios éticos para psicólogos, esto es, «estándares», se hacen realidad en 1951. Seis secciones formaban este código: relaciones profesionales, relaciones con los clientes, investigación, escritura y publicación y enseñanza. Éste, con algunas modificaciones, se mantuvo en vigor hasta 1977. En él se regulaban las relaciones profesionales y los requisitos a cumplir por los instrumentos de evaluación, así como la comunicación y reserva de la información obtenida en el proceso evaluativo. A partir de los años setenta se empieza a defender que el individuo debe tener acceso a los resultados de su evaluación y a opinar acerca de los contenidos de ésta. Además, se despierta un creciente interés por el secreto profesional y la seguridad de los archivos; por ello, estos aspectos son tenidos en cuenta en las últimas correcciones que se hacen de este primer texto. En España, desde 1974, se cuenta con un texto sobre normas éticas aprobado por la Asamblea General de la Sociedad Española de Psicología y, en 1983, se distribuye entre los psicólogos profesionales la normativa publicada por la APA en 1981 (que sustituía a la anterior), para que sirva de objeto de reflexión y se formule, a partir de ella, el código deontológico del psicólogo. Por fin, éste fue elaborado en 1987 y en sus 65 artículos regula el trabajo del psicólogo evaluador en diferentes aspectos (Colegio Oficial de Psicólogos, 1987). En 1989 el Col·legi Oficial de Psicolegs de Cataluña aprobó su propio código deontológico, que, con algunas modificaciones, recoge el mismo contenido que el nacional (Muñiz, 1997). Como novedad, con respecto a los estándares americanos, que les sirvieron de base, el código deontológico español introduce un artículo (el 12) mediante el cual recomienda prudencia en la utilización de etiquetas negativas y desarrolla pormenorizadamente los artículos referidos a la propiedad de la información recogida en el acto evaluativo (artículos del 39 al 48). Podemos decir que nuestro código deontológico se dirige fundamentalmente a regular la psicología aplicada, distinguiéndose de la actual normativa americana, más interesada en la protección de los derechos de los sujetos de investigación, sean humanos y/o animales. En este sentido el código deontológico actualmente vigente en nuestro país se dirige a proteger la práctica profesional mediante la utilización de instrumentos contrastados (artículo 19), sobre los cuales se debe informar al sujeto o a sus padres o tutores (artículo 25), que den lugar a informes psicológicos claros, rigurosos e inteligibles en los que se recojan no sólo las técnicas utilizadas, sino también el grado de certidumbre de los resultados de éstas (artículo 48). Se dirige, además, a proteger el derecho a la intimidad y al secreto profesional que tiene el individuo (institucionalizado o no), dueño de la información sobre sí mismo, junto con aquellos que hayan solicitado el informe, sean allegados (artículo 42) o instituciones (artículo 43). Curiosamente, otra diferencia de nuestro código con respecto al americano es el interés de este segundo por los aspectos relacionados con la incorporación del ordenador a la psicología aplicada. La elaboración de un nuevo código que actualice el anterior y dé respuesta a nuevas situaciones es una tarea que llevan elaborando desde hace años las distintas comisiones deontológicas de nuestro país, sobre todo a raíz de las exigencias planteadas por el Metacódigo de la Federación Europea de Asociaciones de Psicólogos (EFPA), que ya desde 1995 viene planteando la actualización y el compromiso de que los distintos países europeos que componen la asociación no estén en contradicción con el citado metacódigo (Bermejo, 2007). Para ello, la EFPA aporta una serie de orientaciones con respecto al contenido que los distintos códigos éticos de los países miembros deben cubrir y en las cuales se deben fundamentar. © Ediciones Pirámide Garantías científicas y éticas de la evaluación psicológica La aparición del citado metacódigo y la necesidad de adaptarse a él han propiciado reuniones de presidentes de comisiones deontológicas y cursos de doctorado, como el de «Ética profesional», celebrado en 2006 en la Facultad de Psicología de Sevilla, que han dado lugar a la elaboración de un proyecto de un nuevo código que en la actualidad se encuentra aprobado por la Comisión Deontológica Estatal y que está pendiente de aprobación por la Junta de Gobierno del COP (Bermejo, 2007). Este proyecto del nuevo código, que resumimos en el cuadro 4.6, fue presentado por primera vez en las XIV Jornadas Profesionales 2007 celebradas en Valencia. Como señala Bermejo, una importante y radical diferencia entre el metacódigo, el código vigen- / 161 te y el proyecto de código es la introducción de los principios de beneficencia y maleficencia. Así, los principios del metacódigo EFPA se organizan como una gran síntesis de ética profesional, de modo que incluyen en ellos todo su contenido ético. Éstos, parcialmente inspirados en la ética sanitaria tradicional y la bioética, dan prioridad al respeto y autonomía de la persona y no incluyen el principio de beneficencia, que sí aparece en el proyecto. De esta manera, el proyecto opta manifiestamente por la ética sanitaria al incluir el principio de beneficencia, si bien queda matizado por el principio de autonomía de la persona. Este principio es, pues, el segundo de ellos después de establecer el respeto por la persona, seguido a continuación del de maleficencia. El proyecto también CUADRO 4.6. Estructura y apartados recogidos en el proyecto de código deontológico (ponencia de Bermejo presentada en las XIV Jornadas Profesionales celebradas en Valencia, 2007) Preámbulo 1. 2. 3. 4. 5. 6. 7. Fundamento legal de la ética profesional. Marco de referencia europeo. La ética tradicional de los psicólogos. Continuidad ética profesional y cumplimiento de la ley. Importancia del uso del razonamiento aplicado de los principios éticos. Consideraciones sobre el proceso de toma de decisiones éticas. Formación y docencia de la ética de la psicología. Ámbito de aplicación Términos y definiciones y el alcance y límites del ámbito de aplicación. Capítulo I: Principios 1. 2. 3. 4. 5. 6. 7. 8. 9. 10. Respeto y dignidad a la persona y sus derechos. Actuar conforme al principio de beneficencia. Evitar causar daño o perjuicio a las personas. Respeto a la privacidad y confidencialidad. Competencia profesional. Responsabilidad. Honestidad e integridad. Respeto a la legalidad y a la ley. Independencia y autonomía de la psicología y de su ejercicio profesional. Prudencia en la aplicación de instrumentos y técnicas y solidez del fundamento científico. © Ediciones Pirámide 162 / Evaluación psicológica. Conceptos, métodos y estudio de casos CUADRO 4.6. (continuación) Capítulo II: Normas deontológicas 1. 2. 3. 4. 5. 6. 7. 8. 9. Respeto y beneficencia. Privacidad. Confidencialidad. Consentimiento informado. Autodeterminación. Competencia [A. Conocimientos ética. B. Alcance y límites competencia profesional. C. Alcance y límites procedimientos psicológicos. D. De la salud mental del psicólogo y de la incapacidad profesional del psicólogo]. Responsabilidad [A. Responsabilidad profesional. B. Respecto a los profesionales y la profesión]. Honestidad e integridad [A. Honestidad y precisión. B. Honestidad y sinceridad. C. Conflicto de intereses. D. Honestidad e integridad frente a ambigüedad]. Prudencia. Capítulo III: Regulaciones específicas 1. 2. 3. 4. 5. 6. 7. 8. Del uso de la información profesional de los psicólogos. El informe psicológico. Normas complementarias sobre investigación en psicología. Relaciones con colegas y otros profesionales. Relaciones duales. Con Internet. Presencia en los medios de comunicación. Publicidad. Honorarios y remuneración. Anexo I: Evaluación de las quejas y conductas no éticas Se proponen tres vías tras la evaluación: • Vía primera → Mediación • Vía segunda → Ofrecimiento de ayuda profesional • Vía tercera → Procedimiento disciplinario Anexo II: Funciones de la Comisión Deontológica Estatal del consejo y de las comisiones deontológicas de los COP Principales novedades: • Ser órgano máximo asesor y de interpretación. • Asegurar la unidad de aplicación y de interpretación en todo el Estado español. • Asegurar procedimientos homologables. • Asegurar formación ética homologable en todo el Estado. reconoce la unidad científica de la psicología en cualquiera de sus áreas y desarrollos y está orientado a promover la formación ética amplia de los actuales y futuros profesionales. Promueve la aplicación práctica, enfrentando al profesional con la toma de decisiones y la resolución de los dilemas. Hace necesario el uso del razonamiento lógico deductivo frente a los principios, promueve el respe- to de los usuarios y reconoce su autonomía y su capacidad de hacer valer sus derechos (Bermejo, 2007). Igualmente, el proyecto contempla el poder de la información, la importancia de los datos personales y, sobre todo, de su protección, al igual que, específicamente en el campo de la evaluación, considera la trascendencia profesional del informe psicológico y los riesgos de su uso. © Ediciones Pirámide Garantías científicas y éticas de la evaluación psicológica / 163 COnCLUSIOnES A lo largo de este capítulo hemos tratado de precisar bajo qué garantías científicas y éticas se realiza la evaluación psicológica. Para ello hemos debido proceder a establecer diferencias entre los tests y otros instrumentos de medida, así como entre las distintas puntuaciones que arrojan dichos instrumentos. Todo ello se ha revisado con el fin de poder establecer qué garantías requieren distintos tipos de instrumentos y medidas. También, a la luz de la extensa literatura de la última década, se revisan y describen los conceptos de fiabilidad y validez teniendo en cuenta tanto la teoría clásica de los tests como la más reciente teoría de respuesta al ítem. Pero las garantías de la evaluación no sólo se centran en los índices de fiabilidad y validez de los instrumentos, sino que son la base de las inferencias realizadas. Por ello, se trata de garantizar el propio proceso de evaluación, el cual está res- paldado por los estándares suministrados por las asociaciones científicas o profesionales de psicólogos (en nuestro caso, por las Guías del Proceso de Evaluación, GAP), así como por la utilización de diseños que permitan la generalizabilidad de los resultados obtenidos. Dado que en los últimos años se han desarrollado estándares, normas o recomendaciones para la revisión de tests y su adaptación a otras lenguas y culturas y se ha extendido su uso no sólo en los sistemas tradicionales, sino también en Internet, se trata de revisar todo ello poniendo de relieve su importancia para maximizar la calidad de la evaluación. Finalmente, dado que la garantía de la evaluación no termina en planteamientos científicos sino que abarca también comportamientos éticos, se trata de revisar cuáles, de entre las normas del código deontológico del psicólogo, son aplicables a la evaluación. BIBLIOGrAFÍA BáSICA Abad, F., Olea, J., Ponsoda y García, C. (2011). Medición en ciencias sociales y de la salud, Madrid: Síntesis. Colegio Oficial de Psicólogos (1987). Código Deontológico del Psicólogo. Papeles del Colegio, 6, 32, 2447. Consejo General de Colegios Oficiales de Psicólogos (2010). Código Deontológico, Madrid: Documento aprobado. Fernández-Ballesteros, R. y Maciá, A. (1992). Garantías científicas y éticas de la evaluación psicológica. En R. Fernández-Ballesteros (dir.). Introducción a la evaluación psicológica, vol. I, Madrid: Pirámide. Fernández-Ballesteros, R., De Bruyn, E. E., Godoy, A., Hornke, L., Ter Laak, J., Vizcarro, C., Westhoff, K., Westmeyer, H. y Zacagnini, J. L. (2001). Guidelines for the Assessment Process (GAP): A proposal for Discussion. European J. of Psychological Assessment, 17, 187-200 (traducción castellana en Papeles del Colegio, 2003, 84, 58-70). Martínez-Arias, R. (1995). Psicometría: teoría de los tests psicológicos y educativos, Madrid: Síntesis. Martínez-Arias, R., Hernández, M. J. y Hernández, M. V. (2006). Psicometría, Madrid: Alianza. Muñiz, J. (1997). Aspectos éticos y deontológicos de la evaluación psicológica. En A. Cordero (ed.). La evaluación psicológica del año 2000, pp. 207-345, Madrid: TEA. Silva, F. (1989). Fundamentos psicométricos de la evaluación conductual, Madrid: Pirámide. rEFErEnCIAS BIBLIOGráFICAS Adams, K. M. (2000). Practical and Ethical Issues Pertaining to Test Revisions. Psychological Assessment, 12 (3), 281-286. © Ediciones Pirámide Allen, M. J. y Yen, W. N. (1979). Introduction to measurement theory, Monterrey, California: Brooks/ Cole. 164 / Evaluación psicológica. Conceptos, métodos y estudio de casos American Psychological Association (1954). Technical Recommendations for Psychological Tests and Diagnostic Techniques [Suplement]. Psychological Bulletin, 51 (2, Pt. 2). American Psychological Association, American Educational Research Association y National Council on Measurement in Education (1966). Standars for Educational and Psychological Tests, Washington, DC: Autor. American Psychological Association, American Educational Research Association y National Council on Measurement in Education (1974). Standars for Educational and Psychological Tests, Washington, DC: Autor. American Psychological Association, American Educational Research Association y National Council on Measurement in Education (1985). Standards for Educational and Psychological Testing, Washington, DC: Autor. American Psychological Association, American Educational Research Association y National Council on Measurement in Education (1999). Standards for Educational and Psychological Testing, Washington, DC: Autor. Angoff, W. H. (1988). Validity: an Evolving Concept. En H. Wainer y H. I. Braun (eds.). Test Validity, pp. 19-32, Hillsdale, New Jersey: Lawrence Erlbaum Associates. Bartram, D. y Coiné, I. (2003). International Guidelines on Computed-based and internet delivered testing, Draft version, ITC. Bejar, I. I. (1993). A generative apporach to psychological and educational measurement. En N. Frederiksen, R. J. Mislevy e I. I. Bejar (eds.). Test Theory for a new generations of tests, Hisdalle, New Jersey: Lawrence Erlbaum A. Bermejo, V. (2007). ¿Una evaluación psicológica sin mediar aviso? Cuesitones sobre el derecho a la información professional previa. Información Psicológica, 90, 4-11. Bleyen, K., Vertommen, H. y Van Audenhove, Ch. (1998). A Negotiation Approach to Systematic Treatment Selection: An Evaluation of its Impact on the inicial phase of Psychotherapy. European Journal of Psychological Assessment, 14 (1), 14-25. Bosch, S. y Fuqua, R. W. (2001). Behavioral Cusps: A Model for Selecting Target Behaviors. Journal of Applied Behavior Analysis, 34 (1), 123-125. Brislin, R. (1986). The Wording and Traslation of Research Instrument. En W. J. Lonner y J. W. Berry (comps.). Field Methods in Cross-Cultural Psychology, Newbury Park, CA: Sage Publisher. Cambell, D. T. y Fiske, D. W. (1959). Convergent and discriminant validation by the multitrait-multimethod matrix. Psychological Bull., 81-105. Colegio Oficial de Psicólogos (1987). Código Deontológico del psicólogo. Papeles del Colegio, 6, 32, 2447. Cone, J. D. (1977). The Relevance of Reability and Validity for Behavioral Assessment. Behavior Therapy, 8, 411-426. Cone, J. D. (1981). Psychometric considerations in Behavioral Assessment. En M. Hersen y A. S. Bellack (eds.). Behavioral Assessment: an Practical Handbook, Nueva York: Pergamon. Cone, J. D. (1987b). Consideraciones psicométricas en la Evaluación Conductual. En R. Fernández-Ballesteros y J. A. I. Carrobles (eds.). Evaluación Conductual. Metodología y Aplicaciones, 2.a ed., pp. 159-183, Madrid: Pirámide. Cone, J. D. y Foster, S. L. (1982). Direct Observation in Clinical Psychology. En J. N. Butcher y P. C. Kendall (eds.). Handbook of Research Methods in Clinical Psychology, Nueva York: Wiley. Crocker, L. y Algina, J. (1986). Introduction to classical and modern Test Theory, Nueva York: Holf Rienehart and Winston. Cronbach, L. J. (1980). Validity on Parole: How Can We Go Straight? New Directions for Testing and Measurement: Measuring Achievement over a Decade. En Proceedings of the 1979 ETS Invitational Conference, pp. 99-108, San Francisco: JosseyBass. Cronbach, L. J., Gleser, G. C., Nanda, H. y Rajaratan, N. (1972). The Dependability of Behavioral Measurements Theory of Generalizability for Scores and Profiles, Nueva York: Wiley. Cronbach, L. J. y Meehl, P. E. (1955). Construct Validity in Psychological Tests. Psychological Bulletin, 52, 281-302. De Bruyn, E. E. J. y Godoy, A. (1998). Psychological Assessment and Testing, comunicación en el XXIVI Congress of Applied Psychology, San Francisco. Dumecci, L. (2003). Multitrait-multimethod matrices. En R. Fernández-Ballesteros (ed.). Encyclopedia of Psychological Assessment, Londres: Sage. © Ediciones Pirámide Garantías científicas y éticas de la evaluación psicológica Fernández-Ballesteros, R. y Maciá, A. (1992). Introducción a la evaluación psicológica, vol. 1, Madrid: Pirámide. Fernández-Ballesteros, R. (ed.). Encyclopedia of Psychological Assessment, Londres: Sage. Ballesteros, R. y De Juan-Espinosa, M. (2001). Sociohistorical Changes and Intelligence Gains. En R. J. Sternberg y E. L. Grigorenko (eds.). Environmental Effects on Cognitive Abilities, Mahwah, NJ: Earlbaum. Fernández-Ballesteros, R., De Bruyn, E. E. J., Godoy, A., Hornke, L. F., Terlaak, J., Vizcarro, C., Westhoff, K., Westmeyer, H. y Zaccagnini, J. L. (2001). Guidelines for the Assessment Process. A proposal for discussion. European J. of Psychological Assessment, 17, 187-200. Flynn, J. R. (1984). The mean IQ of Americans: Massive gains 1932 to 1978. Psychological Bulletin, 95, 29-51. Foster, S. L. y Mash, E. J. (1999). Assessing Social Validity in Clinical Treatment Research: Sigues and Procedures. Journal of Consulting and Clinical Psychology, 67 (3), 308-319. Frank de Verthelyin, R. (1996). Ética y evaluación psicológica. Un tema para reflexionar. En M. Casullo (ed.). Evaluación Psicológica en el campo de la salud, pp. 10-23, Barcelona: Paidós. Geller, E. S. (2001). From Ecological Behaviorism to Response Generalization: Where Should We Make Discriminations? Journal of Organizational Behavior Management, 21 (4), 55-73. Glaser, R. (1963). Instructional Thechnology and the Measurement of Learning Outcomes: Some Questions. American Psychologist, 16, 510-522. Green, D. R. (1998). Consequential aspects of the validity of achievement tests: A publisher’s point of view. Educational Measurement: Issues and Practice, 17 (2), 16-20. Guion, R. M. (1980). On Trinitarian Doctrines of Validity. Professional Psychology, 11, 385-389. Hambleton, R. K. (1994). Guidelines for Adapting Educational and Psychological Tests: A Progress Report. European J. of Psychological Assessment, 10, 229-244. Hayes, S. C., Nelson, R. O. y Jarrett, R. B. (1987). The Treatment Utility of Assessment. A Functional Appoach to Evaluating Assessment Quality. American Psychologist, 42 (11), 963-974. © Ediciones Pirámide / 165 Heiby, E. y Haynes, S. N. (2003). Introduction to behavioral assessment. En S. N. Haynes y E. Heiby (eds.). Behavioral assessment, Hoboken, NJ: Wiley. Johnston, J. M. y Pennypacker, H. S. (1993). Strategies and Tactis of Behavioral Research, 2.a ed., Hillsdale, NJ: Erlbaum. Joint Committee on Standards for Educational Evaluation (1994). The program evaluation standards, Thousand Oaks, California: Sage Publications. Kazdin, A. E. (1977). Assessing the Clinical or Applied Importance of Behavior Change Trough Social Validation. Behavior Modification, 1, 427-452. Kazdin, A. E. (1980). Acceptability of Alternative Treatment for Deviant Child Behavior. Journal of Applied Behavior Analisis, 13, 259-273. Kennedy, C. H. (2002). Towards a socially valid understanding of problem behavior. Education and Treatment of Children, 25 (1), 142-153. Kleimuntz, B. (1990). Why do we still use our heds instead of formulas: towards an integrative approach. Psychological Bulletin, 107 (3), 296-310. Kubiszyn, T. W., Meyer, G. J., Finn, S. E., Eyde, L. D., Kay, G. G., Moreland, K. L., Dies, R. R. y Eisman, E. J. (2000). Empirical Support for Psychological Assessment in Clinical Health Care Settings. Professional Psychology. Research and Practice, 31 (2), 119-130. Less-Haley, P. R. (1996). Alice in validity land, or the Dangerous consequences of consecuencial validity. American Psychologist, 981-982. Markus, K. A. (1998). Science, Measurement, and Validity: Is Completion of Samuel Messick’s Synthesis Possible? Social Indicators Research, 45, 7-34. Martínez-Arias, R. (1995). Psicometría: Teoría de los tests psicológicos y educativos, Madrid: Síntesis. Martínez-Arias, R., Hernández, M. J. y Hernández, M. V. (2006). Psicometría, Madrid: Alianza. Messick, S. (1989). Validity. En R. L. Linn (ed.). Educational Measurement, Nueva York: MacMillan. Messick, S. (1994). Foundations of Validity: Meaning and consequences in Psychological Assessment. European Journal of Psychological Assessment, 10 (1), 1-10. Messick, S. (1995). Standards of Validity and the Validity of Standards in Performance Assessment. Educational Measurement: Issues and Practice, 14, 5-8. Messick, S. (1998). Test Validity: A Matter of Consequence. Social Indicators Research, 45, 35-44. 166 / Evaluación psicológica. Conceptos, métodos y estudio de casos Meyer, G. J., Finn, S. E., Eyde, L. D., Kay, G. G., Moreland, K. L., Dires, R. R., Eisman, E. J., Kubiszy Reed, M. (2001). Psychological Testing and Psychological Assessment. A Review of Evidence and Signes. Amercian Psychologist, 55 (2), 128-165. Muñiz, J. (1997). Aspectos éticos y deontológicos de la evaluación psicológica. En A. Cordero (ed.). La evaluación psicológica en el año 2000, pp. 207-345, Madrid: TEA. Muñiz, J. (1998). La medición de lo psicológico. Psicothema, 10 (1), 1-21. Muñiz, J. (coord.) (2002). Directrices internacionales para el uso de los tests. Papeles del Psicólogo, 77, 50-64. Muñiz, J. (2002). Teoría clásica de los tests, Madrid: Pirámide. Muñiz, J. y Hambleton, R. K. (1996). Directrices para la traducción y adaptación de los tests. Papeles del Psicólogo, 66, 63-70. Nelson, R. O. (1988). Relationships between Assessment and Treatment Within a Behavioral Perspective. Journal of Psychopathology and Behavioral Assessment, 10 (2), 155-170. Nevo, B. (1985). Face Validity Revisited. Journal of Educational Measurement, 22 (4), 287-293. Nielsen, G. (1991). A meta-code of ethics for European Psychologist. Dossier de Documentos de Comisión Deontológica del COP (documento no publicado). Pelechano, V. (1976). Psicodiagnóstico, Madrid: UNED. Pelechano, V. (1988). Del psicodiagnóstico clásico al análisis ecopsicológico, Valencia: Alfaplus. Shepard, L. A. (1993). Evaluating Test Validity. Review of Research in Education, 19, 405-450. Shepard, L. A. (1997). Evaluating Centrality of Test Use and Consequences for Test Validity. Educational Measurement: Issues and Practice, 6, 71-86. Silva, F. (1985). Psicodiagnóstico: Teoría y Aplicación, Valencia: Centro Editorial de Servicios Universitarios. Silva, F. (1989). Fundamentos Psicométricos de la Evaluación Conductual, Madrid: Pirámide. Silverstein, M. L. y Nelson, L. D. (2000). Clinical and Research Implications of Revising Psychological Tests. Psychological Assessment, 12 (3), 298-303. Spearman, C. E. (1927). The Abilities of Man, Londres: McMillan (en castellano Paidós). Stage, S. A. (2000). The validity of functional behavioral assessment with students of average intellectual ability. Canadian Journal of School Psychology, 15 (2), 67-84. Strauss, E., Spreen, O. y Hunter, M. (2000). Implications of Test Revisions for Research. Psychological Assessment, 12 (3), 237-244. Suen, H. K. y Rzasa, S. E. (2003). Psychometric Foundations of Behavioral Assessment. En M. Hersen (ed.). Comprehensive Handbook of Psychological Assessment, pp. 37-56, Nueva York: Willey and Son. Witt, J. C. y Martens, B. K. (1983). Assessing the Acceptability of Behavioral Intervention Used in Classrooms. Psychology in the Schools, 20, 510-517. Wolf, M. M. (1978). Social Validity: The case for subjective measurement or how applied behavior analysis is finding ists Heart. Journal of Applied Behavior Analysis, 11, 203-214. Yela, M. (1990). Evaluar qué y para qué. El problema del criterio. Papeles del Psicólogo, 46-47, 50-54. Zimiles, H. (1996). Rethinking the validity of psychological assessment. American Psychologist, 50, 980-981. © Ediciones Pirámide La entrevista 5 MARÍA OLIVA MÁRQUEZ OBJETIVOS DEL CAPÍTULO • Conocer las distintas funciones de la entrevista a lo largo del proceso de evaluación. • Diferenciar, teórica y prácticamente, los distintos tipos de entrevista (clínica, de selección u orientación, etc.), así como las preguntas o actuaciones que las integran. • Ser capaz de formular preguntas adecuadas para averiguar distintas cuestiones relevantes. • Conocer los sesgos más comunes de la entrevista y las estrategias para tratar de evitarlos. • Conocer las habilidades esenciales para llevar a cabo una entrevista. • Ser capaz de planificar, ejecutar y valorar una entrevista en un caso sencillo. • Ser capaz de llevar a cabo una entrevista de devolución en un caso sencillo. © Ediciones Pirámide 1. InTrODUCCIón La entrevista es el instrumento de evaluación que precede a cualquier modalidad de intervención o proceso de toma de decisiones, adopta un formato interactivo y está presente en el continuo evaluación-intervención (Casullo y Márquez, 2003). Es un procedimiento ampliamente utilizado con distintos objetivos o propósitos: conseguir información u ofrecer información en la evaluación e intervención psicológica; indagar sobre características de personalidad, estrategias, incidentes críticos, habilidades, competencias y datos biográficos en procesos de selección; indagar sobre los aspectos motivacionales, intereses y competencias en los procesos de orientación; investigar el conocimiento que pone en juego un experto cuando resuelve problemas de su competencia, orientar o asesorar y comunicar a clientes o pacientes los resultados de cualquier proceso evaluativo. Es un instrumento destinado a recoger datos mediante el autoinforme del sujeto evaluado, y de ahí su importancia, sus fortalezas y sus debilidades. Por esta razón, la trayectoria de este procedimiento ha ido de la mano de la consideración que el autoinforme ha recibido por parte de las teorías y modelos que se han ido sucediendo. También se utiliza para recabar información sobre un tercero, por parte de un interlocutor, para conocer opiniones, actitudes, procesos de decisión o procedimientos. En la práctica actual, sigue siendo, tal como reflejaban las encuestas de décadas anteriores (Silva, 1993), la técnica más utilizada en el ámbito clínico, como procedimiento insustituible de cara a la primera recogida de información, siempre que las condiciones del paciente lo permitan (Edelstein y Yolman, 1991), con un incremento de las entrevistas estructuradas. En el proceso, con objetivo de selección u orientación de personas, la utilización de la entrevista ha sufrido algunos cambios relacionados con los formatos y, en cierto modo, con su ubicación y frecuencia de uso (Hay Group & SAP, 2002); en cualquier caso, las predicciones que se hicieron en los años setenta sobre esta técnica, no se han visto modificadas sustantivamente. Al mismo tiempo, a partir de las últimas décadas del siglo XX, se han desarrollado procedimientos, basados en el autoinforme, que requieren ser utilizados en situación interactiva y que tienen el objetivo de indagar sobre el conocimiento de las personas que tienen una pericia demostrada, es decir, expertos en algún campo de conocimiento o dominio (Hart, 1989). Entrevistar es una clase particular de interacción verbal y no verbal entre entrevistador y entrevistado; a partir de esta generalidad, en cada entrevista se darán condiciones particulares, dependiendo del objetivo concreto que se persiga, del grado en que este último sea explícito o implícito, del estilo que emplee quien dirija la entrevista, de la utilización de preguntas sistematizadas previamente establecidas, de la especificidad de las preguntas y del formato en que se recojan. Precisamente el conjunto de características y objetivos que configuran una entrevista particular dará lugar a formatos distintos que se acomodan © Ediciones Pirámide La entrevista mejor a los propósitos y escenarios particulares y de esas características dependerá la mayor o menor calidad de la información que se obtenga. En definitiva, la utilización de este instrumento se justifica por su eficacia, bajo determinadas condiciones, tanto para indagar contenidos no observables como para orientar, como primera recogida de información, qué contenidos deben ser evaluados mediante otros procedimientos. Sin embargo, a este procedimiento le acompañan dos fuentes de problemas: por un lado, el hecho de que la información que se obtiene mediante entrevista está basada en el informe del sujeto, y, por otro, la dificultad de separar la ejecución de la técnica, de los modos habituales con los que las personas se comportan en una situación interactiva. La dependencia del autoinforme ha sido la característica que ha provocado, históricamente, el posicionamiento de los distintos paradigmas teóricos con respecto a la entrevista y el esfuerzo por dotarla de las adecuadas garantías metodológicas. Cuando los paradigmas teóricos han restringido los contenidos evaluables a los observables, como es el caso del paradigma conductista radical, la entrevista ha quedado descartada como procedimiento de evaluación, mientras que los modelos teóricos que aceptaban altos niveles de inferencia apoyaban el juicio clínico preferentemente en entrevistas. Con la inclusión de los datos procedentes del autoinforme en los modelos evaluativos derivados del marco teórico conductual (Kanfer, 1972), la entrevista fue nuevamente incluida en los procedimientos de medición con las exigencias requeridas a cualquier otra técnica. Estas exigencias han obligado a estudiar minuciosamente los múltiples aspectos que intervienen en la generación de información en situaciones interactivas con propósitos de evaluación y a controlarlos para garantizar la calidad de la información generada. No ha sido una empresa fácil distinguir los aspectos relevantes que se dan cita en la ejecución de una entrevista, formalizarlos y sistematizarlos para entrenar a los evaluadores, pero es un objetivo necesario por cuanto algunos atributos de© Ediciones Pirámide / 169 seables de la información se relacionan estrechamente con un conjunto de comportamientos del entrevistador en la situación. En este sentido, las similitudes que se perciben entre una entrevista y una conversación convencional han sido, y en cierta medida siguen siendo, la segunda fuente de problemas, posiblemente porque se tiende a pensar que utilizar este procedimiento no tiene las dificultades y exigencias de preparación que requieren los procedimientos estandarizados o los procedimientos de observación. Como consecuencia, a la hora de entrevistar, las personas tienden a comportarse espontáneamente, exhibiendo las habilidades que han desarrollado a lo largo de su historia de aprendizaje. Sin embargo, manejar los muchos aspectos que concurren en una interacción requiere el conocimiento de éstos y el entrenamiento en su manejo (Cormier y Cormier, 1994), ya que, como se ha señalado, de ellos dependen, en cierta medida, la calidad y la utilidad del producto que se obtiene. En este capítulo se expondrán el papel de este procedimiento en el proceso de evaluación y los aspectos relevantes que intervienen en el desarrollo de una entrevista, analizados en relación con sus tres componentes esenciales: el entrevistador, el entrevistado y la información obtenida. 2. LA EnTrEVISTA COmO InSTrUmEnTO BáSICO DEL PrOCESO DE EVALUACIón-InTErVEnCIón PSICOLógICA En los capítulos dedicados al proceso de evaluación se han expuesto las fases que componen el proceso de toma de decisiones, así como los objetivos y actuaciones que se producen en cada una de ellas, y, como se ha explicado, entre las actuaciones necesarias se encuentra la selección y aplicación de técnicas adecuadas a cada una de las fases del proceso. En lo que a la entrevista se refiere, pueden identificarse dos momentos en los que su frecuencia es prevalente: el inicio de la evaluación y la comunicación de resultados. En la fase de la formulación y contrastación de hipóte- 170 / Evaluación psicológica. Conceptos, métodos y estudio de casos sis, la utilización es más o menos frecuente dependiendo de la naturaleza de las hipótesis que deban someterse a comprobación. 2.1. El inicio de la evaluación En el inicio de la evaluación se lleva generalmente a cabo la primera entrevista. Los objetivos generales del proceso —evaluación de problemas susceptibles de cambio, establecimiento de un diagnóstico, orientación y selección— son una fuente de variación que tiene un evidente reflejo en los modos concretos en los que se utiliza la entrevista. Estas particularidades pueden describirse mediante la casuística siguiente: Primer caso. Cuando la evaluación está motivada por una demanda relacionada con las quejas de un cliente o paciente, planteadas por él o por sus allegados, es necesario establecer la naturaleza de la demanda y determinar los contenidos a los que se va a dirigir la evaluación. En este caso, la entrevista permite contestar tres preguntas básicas: — ¿Por qué el/los entrevistado/s pretende una evaluación psicológica? — ¿Qué espera o esperan como resultados de la evaluación psicológica? — ¿Quién es el sujeto de la evaluación y qué aspectos de él van a ser objeto de exploración? Segundo caso. En contextos específicos de la práctica clínica y forense, la demanda puede tener una procedencia distinta o unas restricciones marcadas por el contexto. En la realización de una evaluación por indicación o mandato de algunas de las partes que se personan en un proceso judicial, las preguntas referidas a las expectativas sobre la evaluación y los aspectos que van a ser objeto de evaluación suelen tener un peso predeterminado y el entrevistado puede no tener ninguna pretensión e, incluso, una actitud negativa ante la evaluación. Tanto la atención clínica, por ejemplo, en los servicios de urgencia psiquiátricos, como la práctica forense en general suelen ir acompañadas de un propósito descriptivo concreto que puede complementar las líneas generales planteadas para el primer caso o, incluso, modificarlas. Estas entrevistas persiguen, de modo parcial o preferente, la búsqueda de indicios relacionados con categorías diagnósticas o la identificación de indicios relacionados con la presunta comisión de delitos en la persona del sujeto de evaluación (abuso, malos tratos o cualquier otro tipo de daño). Tercer caso. En contextos organizativos, la entrevista tiene distintas utilidades como herramienta para el análisis de puestos de trabajo, para la determinación de perfiles de ejecución o desempeño y para diseñar programas de formación (Muchinsky, 2000). Como instrumento de primera recogida de información, se utiliza en los procesos de selección abiertos, dependiendo del número de candidatos; cuando el reclutamiento produce un gran número de aspirantes, suele introducirse una fase de preselección mediante otros procedimientos —cuestionarios, breves entrevistas telefónicas o análisis curriculares—, y sólo los candidatos que la superan son entrevistados. En este momento los objetivos generalmente evaluados son: características observables del sujeto (aspecto, discurso, comunicación), biografía personal, formativa y profesional, expectativas, disponibilidad y esfuerzo adicional. Puede decirse que las preguntas que trata de contestar esta entrevista inicial son: — ¿Cuál es el grado de adecuación que presenta el entrevistado con respecto a un conjunto de criterios? — ¿Cuáles son los puntos fuertes y los puntos débiles de un determinado candidato? Para dar respuesta a las preguntas que se planteen en cualquiera de los casos, se lleva a cabo la entrevista, y ello requiere conocer y seleccionar previamente los contenidos que van a figurar en la planificación. © Ediciones Pirámide La entrevista 2.1.1. Los contenidos Los contenidos de la entrevista inicial deben someterse a un doble ajuste, en primer lugar al tipo de demanda y, en segundo lugar, a las características del sujeto. Del primer ajuste se deriva la planificación de la entrevista, y del segundo, los recursos y formatos que el entrevistador selecciona para la realización de la misma. Vamos a ocuparnos en este punto de la planificación, siguiendo los tres casos propuestos en el apartado anterior. Primer caso. Cuando la demanda corresponde a una queja presentada por un sujeto o sus allegados, el contenido suele estar relacionado con comportamientos, situaciones, percepciones, sentimientos o inquietudes que le conciernen y que implican a otros y a alguno o varios contextos en los que se desenvuelve su vida. Las personas solicitan atención psicológica bien porque ellas mismas padecen problemas concretos de distinta naturaleza, acompañados de la expectativa de mejora o cambio, o se quejan de la relación que tienen establecida con los comportamientos o actitudes de otros (por ejemplo: pareja, padres, hermanos o personas con las que trabajan), o bien se quejan de las dificultades que les plantean las exigencias de determinados contextos, ineludibles o deseables, con la expectativa de recibir asesoramiento o consejo. En otras ocasiones, el entrevistado expone el problema de otro, en el ejercicio de su responsabilidad, como cuando unos padres se refieren a problemas de un hijo. Valgan estos tres ejemplos, entre los muchos que pueden darse en el contexto de la atención psicológica, para destacar cómo contribuye la primera entrevista al arranque del proceso de evaluación. En primer lugar, puede distinguirse la diferencia entre un entrevistado que presenta sus quejas sobre sus propios comportamientos y un entrevistado que presenta quejas sobre el comportamiento de un tercero o de terceros. Esta distinción es de interés, primero, porque la evaluación psicológica requiere la presencia del sujeto de evaluación por razones técnicas, éticas y legales; segundo, © Ediciones Pirámide / 171 porque la atribución de los problemas propios a los comportamientos de terceros requiere esclarecer si la demanda puede ser definida y aceptada como una demanda de solicitud de orientación, para enfrentarse eficazmente con los comportamientos de los otros, o si, por el contrario, se está demandando que sea otro el sujeto de evaluación e intervención; y tercero, porque metodológicamente, los allegados, presentes desde el comienzo de la evaluación, son fuentes de información alternativas para la planificación de otras entrevistas y otros procedimientos de evaluación. Por tanto, una primera estimación de las razones por las que se produce la demanda (Wolpe y Turkat, 1985), de la naturaleza de ésta (de qué tipo de problema se trata y a quién concierne) y de las expectativas del entrevistado (sea éste el soporte de la queja presentada o sean otros) permite al entrevistador dejar en suspenso o realizar la recogida de información, siguiendo la planificación que procede en este primer caso. Siguiendo las indicaciones del proceso, la planificación de contenidos obedece al propósito de recoger información sobre los aspectos generales de la vida pasada (condiciones históricas potencialmente relevantes), sobre la vida actual del sujeto de evaluación (condiciones actuales potencialmente relevantes) y sobre las características y circunstancias que conciernen a la queja. La planificación de los contenidos se deriva de las unidades de evaluación referidas a las condiciones históricas potencialmente relevantes: nacimiento y desarrollo; familia y entorno social en el que se produjeron el nacimiento y el desarrollo; contextos educativos a los que ha tenido oportunidad de acceder (colegios, institutos, formación profesional, formación universitaria); experiencias laborales, en el caso de que existan en el pasado (por ejemplo, en el caso de las personas jubiladas, en el caso de experiencias laborales distintas de la que tiene el sujeto en el momento de la evaluación o experiencias laborales en la niñez y en la adolescencia); condiciones biológicas presentadas en el pasado; acontecimientos vitales destacables que le hayan sucedido o que ha padecido, acontecimientos importantes en su vida, tanto de signo 172 / Evaluación psicológica. Conceptos, métodos y estudio de casos negativo (pérdidas de personas próximas, catástrofes naturales, actos terroristas, accidentes o divorcio) como de signo positivo (matrimonio, hijos y cambios de contexto). Del mismo modo, los contenidos de indagación correspondientes a las condiciones actuales se suelen describir como sigue: condiciones físicas del lugar donde vive (entorno rural o urbano, recursos disponibles o características de los espacios en donde se desarrolla su vida); las condiciones familiares (con quién o quiénes vive habitualmente); las relaciones sociales fuera del grupo familiar o primario (amigos, compañeros, relaciones profesionales, pertenencia a grupos de actividad política, religiosa, de cooperación social o de ocio); las condiciones económicas dependientes o independientes, suficientes, escasas o de privación; acontecimientos destacables en la vida actual; ocupación o dedicación profesional; estilo de vida, hábitos, costumbres, actividades habituales; estado de salud; intereses y motivaciones (véase la entrevista conductual presentada en el Apéndice, CD). Segundo caso. En los contextos pertenecientes a la red de salud mental o en contextos de la práctica forense, el estado del sujeto de evaluación (confusión, verbalizaciones delirantes, comportamientos de pánico, mutismo, aparente pérdida de conciencia, negativismo, etc.) es determinante para iniciar una primera entrevista o para optar por otros procedimientos o recursos (Muñoz, 2003). Por tanto, bajo estas condiciones, el análisis de la demanda y la determinación de las dimensiones del problema equivalen a una exploración inicial del estado en la que los datos de observación tienen un peso decisivo y la entrevista puede no llegar a producirse. En el caso de que sea posible mantener la interacción con el sujeto de evaluación, se trata de valorar los siguientes contenidos: atención, memoria, orientación, pensamiento, lenguaje y motricidad, mediante una entrevista no estructurada. Sólo en el caso de que las condiciones de la persona y del contexto lo hicieran factible, se puede recurrir a la entrevista inicial, de acuerdo con el guión expuesto en el caso 1.o, o bien continuar con la exploración para identificar el diagnóstico, lo que en esta sistematización se incluirá en la fase de la comprobación de hipótesis. Es destacable el interés por mejorar las garantías de la primera entrevista en el ámbito de la salud mental, en el que, con frecuencia, se trabaja en condiciones difíciles y precarias (véanse Morrison, 2008; Steele y Steele, 2008) y en el que es necesario atender a las características específicas de los pacientes, muy especialmente cuando se trata de niños y adolescentes (Cepeda, 2010). Tercer caso. En la entrevista inicial con propósitos de selección, se utiliza una planificación de contenidos que están basados en el análisis de puestos de trabajo (Furnham, 2001); el número y diversidad de contenidos es dependiente de la amplitud y precisión que dichos análisis hayan alcanzado en cada organización, pero los estudios específicos sobre este tópico han ido estableciendo contenidos generales tales como inteligencia, personalidad, aptitudes específicas, habilidades, conocimiento e intereses (Dipboye et al., 1994), al mismo tiempo que las bases de datos disponibles han ido suministrando categorías cada vez más precisamente relacionadas con distintos perfiles de desempeño (Dictionary of Occupational Titles, U. S. Department of Labor), lo que ha permitido construir entrevistas cada vez más dirigidas a la búsqueda de perfiles o características predeterminadas como, por ejemplo, la inteligencia emocional (Lynn, 2008). La entrevista inicial en este contexto suele ajustar la planificación de sus contenidos al modelo concreto definido por la organización; esta planificación suele ser alguna variedad del Occupational Information Network (O*NET) (American Psychological Association, 1999), como, por ejemplo, el siguiente listado: — Experiencia: currículum académico y datos biográficos formativos y profesionales. — Características personales: aptitudes, estilos, habilidades, valores e intereses. — Características laborales: conocimientos y destrezas. © Ediciones Pirámide La entrevista La frecuencia de uso de la entrevista viene dada fundamentalmente por tres razones: en primer lugar, por la tradición que, desde siempre, ha aconsejado tener un contacto directo con cualquier potencial candidato a ocupar un puesto de trabajo; en segundo lugar, por las ventajas que ofrece frente a otras técnicas que pueden resultar improcedentes en el ámbito de la selección, y, en tercer lugar, porque permite al entrevistador enmarcar el puesto de trabajo al que se opta para que el entrevistado conozca su valor relativo en la empresa, la política de remuneraciones, las perspectivas de promoción o movilidad, etc., así como los valores y las señas de identidad corporativas. En las últimas décadas, a estas razones tradicionales se ha unido el valor de la entrevista desde el punto de vista de la validez incremental, lo que ha llevado a importantes desarrollos de aplicaciones estructuradas y no estructuradas (véase la entrevista de selección presentada en el CD). 2.1.2. La realización de la primera entrevista Las planificaciones de los distintos contenidos que se han propuesto representan la información que se desea obtener, pero no el modo en que debe obtenerse. Los modos concretos en que la información va a ser solicitada se basan en dos decisiones que el entrevistador debe adoptar: el grado de estructuración de las preguntas y las respuestas y el estilo o grado de dirección que va asumir en la interacción. Si tomamos el contenido «estado de salud», correspondiente al primer caso; para obtener la información que indica, se podría optar por transformar el enunciado en preguntas distintas, en función del grado de estructuración, como por ejemplo: — «¿Qué tal su salud?», pregunta abierta de la que cabe esperar una respuesta igualmente abierta, cuya extensión dependerá del patrón de comunicación que tenga el entrevistado y/o de la importancia que le conceda a su estado de salud. © Ediciones Pirámide / 173 — «¿... Y cómo es su salud? ¿Diría que su salud es: muy buena, buena, regular o mala?», lo que podría abrir un conjunto de preguntas sistematizadas relativas a distintos aspectos de la salud. La mayor o menor estructuración de la entrevista tiene un efecto relevante en la calidad de la información que se obtiene; por tanto, el grado de estructuración que se adopte para el conjunto de la entrevista o para la exploración de algunos de los contenidos es una decisión que el entrevistador debe tomar, desde el conocimiento de las garantías de la entrevista (véase epígrafe 4). Los formatos no estructurados aportan un estilo distendido y escasamente directivo que favorece la fluidez de la comunicación pero no garantiza la precisión de la información. Por el contrario, los formatos estructurados incrementan la precisión, facilitan la comparación de las respuestas intersujetos y aseguran el proceso de toma de decisiones. Por estas razones se han desarrollado pautas de entrevista que tienden a la estructuración, en primer lugar de las preguntas y, en segundo lugar, de las preguntas y respuestas, pero en ningún caso se han descartado las entrevistas abiertas —sin ninguna estructuración— debido a que, en determinadas circunstancias, como la referida en el segundo caso, es la única posibilidad y también debido a la riqueza de información—autoinformada y observada— que pueden aportar. La elección de cualquiera de los formatos de preguntas y respuestas o la elección de una determinada combinación de estructuración-no estructuración dependerá de criterios relacionados con el objetivo de la entrevista, con la exigencia de precisión previamente establecida, con el tipo de interacción que se desee establecer y con el momento y contenidos que se estén indagando. En el primer caso es frecuente que la entrevista se inicie en un formato no estructurado, se utilice a continuación un formato semiestructurado, siguiendo una pauta en las preguntas, y se aplique 174 / Evaluación psicológica. Conceptos, métodos y estudio de casos un formato estructurado en cuanto a preguntas y respuestas para indagar, por ejemplo, problemas de salud o problemas de conducta aparecidos a lo largo de la vida del entrevistado. Ejemplos caso 1 Formato abierto Formato estructurado Cuénteme qué le ocurre ¿Desde cuándo se siente así? ¿Recuerda la situación en la que se encontraba cuando se sintió mal por primera vez? ¿En qué momentos se siente peor? Cuénteme qué cosas le gusta hacer ¿Tiene problemas de sueño? ¿Se alimenta bien? ¿Es fumador/a? ¿Hace ejercicio físico? ¿Consume alcohol? situación propuesta. La utilización de incidentes críticos detectados en el análisis de puestos de trabajo permite formular preguntas sobre los modos de afrontar situaciones que efectivamente se dan, con una determinada frecuencia, en puestos concretos. Adicionalmente, se pueden incluir en estas entrevistas estrategias relacionadas con las llamadas killer questions o preguntas determinantes para continuar o no el proceso de selección, ya que la repuesta afirmativa a las mismas se considera imprescindible para el puesto de trabajo. Ejemplos caso 3 Formato abierto: indagación de la experiencia Ejemplos caso 2 Formato abierto Formato semiestructurado ¿Cómo se encuentra? ¿Sabe dónde está? ¿Recuerda quién le ha traído aquí? ¿Se ha sentido decaído estos últimos días? ¿Qué cosas le gustaba hacer? ¿Cuáles ha dejado de hacer? En el tercer caso pueden darse todas las combinaciones posibles en función de la metodología empleada en cada organización. En términos generales suele iniciarse la interacción con un formato abierto de mayor o menor duración, que da paso a un formato semiestructurado, siguiendo una pauta de preguntas, bien para recabar datos biográficos, bien para indagar características laborales o personales. Para indagar estas características relevantes suelen emplearse estrategias denominadas entrevistas situacionales y entrevistas de incidentes críticos. En las entrevistas situacionales el evaluador propone «situaciones-problema» hipotéticas y pide al entrevistado que explicite las actuaciones que desplegaría en cada ¿Qué le hizo cambiar de universidad en el segundo ciclo? Tras finalizar sus estudios estuvo seis meses en una ONG en Guatemala; ¿qué motivo le hizo tomar esa decisión? ¿Qué trabajo desarrolló durante esos meses? En dos años ha cambiado tres veces de empleo; ¿cuál cree que es la razón? Según su experiencia, ¿cómo le ha ido mejor, trabajando en grupo o haciéndose responsable en solitario de un cometido? Formato semiestructurado: características personales/profesionales Test situacional:Suponga usted que, en período de vacaciones de la mayor parte de la plantilla, surge una situación crítica y tiene que cubrir más horas de trabajo con el personal que tiene disponible. ¿Cómo abordaría la situación y qué acciones emprendería para resolver el problema? Incidentes críticos: Según consta en su currículum, ha dirigido la implantación de nuevos soportes de gestión en grandes empresas. ¿Cuáles han sido los problemas más importantes con los que se ha tenido que enfrentar en estos procesos? (posteriormente se analizará cómo se ha enfrentado con esos problemas, las atribuciones de responsabilidad, estrategias utilizadas y alcance de las soluciones). Killer question: En su currículum consta que tiene un alto nivel en inglés hablado. Can you tell me about your last work? © Ediciones Pirámide La entrevista En definitiva, dentro de las muchas opciones que pueden barajarse en función de los contenidos, contextos y propósitos, existen formatos más facilitadores, utilizados con más frecuencia y con mejores garantías, de los cuales se ofrece un resumen en el cuadro 5.1. Como recomendaciones generales cabe destacar: que no se formularán preguntas sobre aquellos contenidos que, de modo evidente, no se ajusten al sujeto evaluado por razones de edad, sexo o cultura; no se formularán preguntas sobre contenidos que no sean accesibles para el entrevistado, y, por último, que los contenidos seleccionados serán desarrollados en el formato más adecuado a la edad, nivel cultural e intelectual de la persona evaluada. 2.1.3. El análisis de la información obtenida en la entrevista El objetivo último de la entrevista inicial es crear una base de información, lo más sólida posible, que permita la formulación de las hipótesis. / 175 Por esta razón el análisis de la información obtenida tiene un doble aspecto: por un lado el análisis de la cantidad de información conseguida —detectando los comportamientos-problema y delimitándolos en el tiempo y en situaciones concretas— y, por otro, la calidad de dicha información. En el primer caso, el criterio para evaluar la cantidad de información obtenida es el número de contenidos previstos en la planificación que han sido satisfechos por la entrevista y, complementariamente, el número de contenidos que permanecen sin información suficiente. En el segundo caso, se suele recomendar un análisis del que se derive la distinción entre trastornos posibles, trastornos excluidos y trastornos explorados (Othmer y Othmer, 1996). En el tercer caso, el resultado suele ser analizado en términos de puntos fuertes y débiles del candidato en relación con el criterio-perfiles buscado por la organización. La calidad de la información depende de la fiabilidad, validez y precisión de la información obtenida. Estas garantías tienen un doble anclaje: en CUADRO 5.1 Entrevistas y contenidos Caso 1 Caso 2 Caso 3 Contenidos Formato Demanda Condiciones históricas y actuales potencialmente relevantes Detección problema Semiestructurado Semiestructurado Protocolo petición de cita Pauta Cautela y Upper (1977) Semiestructurado Clasificación de Goldfried y Davidson (1976) Clasificaciones de Adams et al. (1977) y McReynolds (1979) Exploración inicial Abierto Semiestructurado Estructurado Biográficos Conocimientos/experiencia Abierto Estructurado Características personales Características laborales Semiestructurado Estructurado © Ediciones Pirámide Instrumentos Entrevista clínica (Muñoz, 2001) Mini mental (Folstein et al., 1995; Lobo et al., 2002) Listados de requerimientos Killer questions Entrevistas situacionales Listados de competencias 176 / Evaluación psicológica. Conceptos, métodos y estudio de casos primer lugar se relacionan con estrategias que deben desplegarse en la propia realización de la entrevista y, en segundo lugar, con los procedimientos que aseguran las garantías metodológicas de cualquier técnica. Entre las estrategias relacionadas con la propia realización de la entrevista destacan el diseño de entrevistas estructuradas, dirigidas a contenidos específicos, y el desarrollo de entrevistas en soporte informático (Adarraga y Zaccagnini, 1992; Garb, 2001; Márquez y Moruno, 2004). Los procedimientos convencionales generalmente utilizados para asegurar la fiabilidad y la validez consisten en la utilización de dos entrevistadores, para estimar la objetividad o fiabilidad interjueces, y en el uso de distintas fuentes y/o distintas técnicas para estimar la validez concurrente. Hasta aquí la exposición se ha referido a la entrevista como técnica de primer nivel, orientada a recabar el más amplio rango de la información que permita el planteamiento de hipótesis; en el epígrafe siguiente se expondrá el papel de la entrevista en la fase de la generación y comprobación de dichas hipótesis. 2.2. La entrevista en la comprobación de hipótesis A la hora de la comprobación de las hipótesis se puede recurrir a la entrevista, que, en este momento, como técnica de segundo nivel, debe contemplar contenidos específicos relacionados con las hipótesis que se pretenden comprobar. Para esta finalidad suelen adoptarse formatos semiestructurados y estructurados. El conjunto de hipótesis que se generan en el proceso de evaluación y que han sido objeto de explicación en el capítulo correspondiente se basa en los supuestos de cuantificación, semejanza y asociación predictiva. La entrevista se utiliza preferentemente para la comprobación de las hipótesis basadas en el supuesto de cuantificación y en el supuesto de semejanza y, en menor medida, para la comprobación de las hipótesis funcionales, si bien existen algunas aplicaciones, como las categorías funcionales de análisis (Hayes y Follete, 1992). En la comprobación de hipótesis basadas en el supuesto de asociación predictiva, la utilización de otras técnicas específicas para la medición de variables concretas es muy superior a la utilización de la entrevista. 2.2.1. Comprobación de hipótesis basadas en el supuesto de cuantificación El supuesto de cuantificación, tal como se ha expuesto en los capítulos 2 y 3, es el soporte de cualquier estrategia encaminada a probar si se produce un determinado fenómeno y a establecer la medida en la que se produce. Los desarrollos conductuales pueden considerarse preferentemente centrados en el supuesto de cuantificación, en tanto que ayudan a identificar la presencia o ausencia de comportamientos concretos en un sujeto determinado, por ejemplo comportamientos deficitarios o excesivos. Para contribuir a la comprobación de estas hipótesis se suelen utilizar propuestas conductuales estructuradas, de entre las que destacan las siguientes aportaciones: — La Clasificación de Goldfried y Davidson (1976). — El Sistema funcional de Bijou (1976). — La Clasificación de déficit y excesos conductuales de Kanfer y Grimm (1977). — El Sistema de clasificación de McReynolds (1979). Adicionalmente se utilizan entrevistas específicas para recoger la presencia, la cantidad, la duración, la frecuencia, la intensidad e incluso aspectos cualitativos de comportamientos, contextos, estímulos o conjuntos de estímulo. Generalmente se trata de entrevistas semiestructuradas, que intentan contrastar la hipótesis de ocurrencia de determinados comportamientosproblema, es decir, de acuerdo con la lógica de descubrimiento del momento de la generación de © Ediciones Pirámide La entrevista hipótesis, se hace la suposición de que un determinado fenómeno —problema— existe y mediante una entrevista se trata de detectar su presencia o ausencia, en un determinado sujeto, así como su cuantificación, gravedad o severidad. De este tipo de instrumentos es un buen ejemplo la entrevista conductual de Fernández-Ballesteros que se incluye en el CD. 2.2.2. Comprobación de hipótesis basadas en el supuesto de semejanza En la comprobación de las hipótesis formuladas sobre el cumplimiento, en un fenómeno, de características semejantes a otro fenómeno, previamente descrito e incluido en categorizaciones o descripciones más o menos operativizadas, la entrevista ocupa un papel predominante. La contrastación, en estos casos, consiste en falsar o probar que las características que definen un perfil o una categoría se cumplen suficientemente en un sujeto concreto, operación básica que rige tanto para las hipótesis diagnósticas como en la hipótesis de ajuste a un perfil basado en el análisis de puestos de trabajo. La exploración de las características relacionadas con trastornos Las entrevistas semiestructuradas y estructuradas que responden a esta estrategia son desarrollos o aplicaciones que se han derivado de investigaciones categoriales y están basadas bien en las clasificaciones de la Americam Psychiatric Association (APA), bien en las clasificaciones generadas por la Organización Mundial de la Salud (OMS) o en ambas. La evolución de la Clasificación Diagnóstica y Estadística de los Trastornos Mentales impulsada por la APA a partir de los años cincuenta (DSM-I y DSM-II) y, con efectos especialmente importantes, a partir de los ochenta —DSM-III (1980), DSM-III R (1987), DSM-IV (1995), DSM-IV TR(2000)— ha ido acompañada de ins© Ediciones Pirámide / 177 trumentos extensos, máximamente estructurados y sistematizados, orientados a la investigación epidemiológica, cuyos resultados contribuyeron a la depuración de las clasificaciones y de instrumentos más breves y flexibles orientados a la práctica clínica. Especialmente el avance sustantivo del DSM-III, consistente en la clarificación de los criterios diagnósticos, la postposición de criterios de clasificación etiológicos y la introducción de la evaluación de los ejes o áreas de información, permitió diseñar una entrevista estructurada Diagnostic Interview Schedule (DIS) con una utilidad epidemiológica sin precedentes que, a su vez, da lugar a sucesivas versiones adaptadas a la clínica entre las que destaca The structures clinical interview (SCID) (Spitzer et al., 1992). Paralelamente, la OMS, en la sexta edición de la Clasificación Internacional de Enfermedades (CIE), incluyó los trastornos mentales (CIE-6, CIE-7, CIE-8, CIE-9, CIE-9 MC y CIE-10) y también dio lugar al desarrollo de entrevistas, más o menos estructuradas, a partir de la Composite International Diagnostic Interview (CIDI) (OMS, 1992), orientada a la investigación epidemiológica, en la que se añadían a los contenidos contemplados en la DIS los trastornos relacionados con el consumo de sustancias psicoactivas y los trastornos cognitivos, para los que se aportaba el Minimental como instrumento de evaluación específico. Ambas líneas han ido produciendo entrevistas generales y específicas, estructuradas y semiestructuradas, cada vez más coincidentes e inclusivas, que permiten detectar la existencia de uno o varios trastornos o comprobar una hipótesis restringida a un tipo concreto de trastorno (cognitivo, de personalidad, psicóticos, somatomorfos, de ansiedad, etc.) que, en cualquiera de los dos casos, son actuaciones dirigidas por hipótesis basadas en el supuesto de semejanza. Adicionalmente se han desarrollado entrevistas para poblaciones específicas, especialmente para niños y adolescentes (Eldelbrock y Costello, 1990). Las entrevistas más utilizadas se resumen en el cuadro 5.2. 178 / Evaluación psicológica. Conceptos, métodos y estudio de casos CUADRO 5.2 Contenidos Entrevista clínica estructurada Entrevista clínica semiestructurada SCID, Spitzer et al. (1992) CIDI, OMS (1992) Trastornos DSM-IV (Eje I) CIE-10 (Eje I) Trastornos de personalidad First, Gibbon, Spitzer, Williams y Benjamin (1999) SCID II IPDE DSM-IV (Eje I) Entrevista clínica estructurada (1997) (trad. castellana: 1999) SADS DSM-IV Othmer y Othmer (1995) Zimmerman (1994) DSM-IV TR CIE-10 Lahey y Holland (2002) Vázquez y Muñoz (2002) Muñoz (2001) Esquizofrenia Endicott y Spitzer (1979) K-SADS, Kaufman et al. (1996) Niños y adolescentes CHIPS, Weler et al. (1999) DICA, Reich et al. (1997) DICA-R, Ezpeleta (1995) La comprobación del ajuste al criterio Los datos obtenidos, mediante entrevista inicial y otros procedimientos o mediante assessment center (diseños múltiples que incluyen distintas técnicas para evaluar diferentes competencias, características de personalidad, conocimientos y múltiples evaluadores, frecuentemente administradas y analizadas en soporte informático), permiten una preselección de candidatos que, mediante la aplicación de un algoritmo, pueden ser jerarquizados en función del ajuste al puesto de trabajo (McCormick et al., 1972). En este punto, el objetivo de la entrevista, en un proceso de selección, es contribuir a garantizar ese ajuste entre una persona y un proyecto, una línea de actuación o un puesto de trabajo. Esto significa que la entrevista debe añadir a los resultados previos seguridad en la selección, confirmando las caracte- ISC, Kovacs (1997) CAS, Hodges (1990) rísticas deseadas y comprobando que no existen otras características no deseadas asociadas al perfil. Algunos de los contenidos más frecuentemente presentes en estas entrevistas son: 1. Los puntos débiles de los candidatos preseleccionados. Puede ocurrir que los candidatos obtengan un resultado adecuado en términos generales pero muestren puntuaciones insuficientes en aspectos concretos; aspectos que son disonantes con los resultados globales o que, de confirmarse tal debilidad, neutralizarían la adecuación general. 2. La capacidad de interacción social. En la mayoría de las situaciones, los aspectos facilitadores de la interacción son relevantes para las condiciones de trabajo y existen pocos procedimientos comparables a la © Ediciones Pirámide La entrevista 3. 4. 2.3. entrevista para aquilatarlos y para hacer una comparación intersujetos en una muestra seleccionada. Entre estos aspectos se enfatizan la empatía, las habilidades de comunicación y la capacidad de liderazgo o dirección. El esfuerzo adicional que un candidato está dispuesto a hacer en términos de disponibilidad o movilidad. La observación general del comportamiento. Las pruebas estandarizadas, de papel y lápiz o en soporte informático, sólo permiten (por el momento) un registro muy limitado del comportamiento del sujeto, especialmente en aplicaciones colectivas, por lo que es fundamental que la entrevista proporcione datos observacionales sobre el comportamiento de cada candidato. La generalización de las observaciones realizadas depende de las características de la entrevista: si se ha realizado una entrevista abierta, relajada e informal, las observaciones serán una muestra de los comportamientos espontáneos del candidato en situaciones de interacción informal, presumiblemente con alta motivación, con una persona desconocida, no carente de tensión o ansiedad. Si se realiza una entrevista directiva, introduciendo tensión y cierto grado de inquietud o malestar, el comportamiento del candidato puede ser tomado como una muestra de su capacidad para enfrentarse a situaciones similares. La entrevista en la comunicación de resultados Al concluir el proceso de evaluación es preceptiva la comunicación de los resultados a la persona o personas (clientes o pacientes) que han solicitado atención psicológica (Fernández-Ballesteros et al., 2001). Los resultados deben quedar recogidos en el informe, cuyos requisitos se han descrito en el capítulo 2. © Ediciones Pirámide / 179 El informe se suele presentar al cliente en situación interactiva, y esto requiere una planificación preferentemente dirigida por el orden y la claridad en la que es recomendable, en primer lugar, recordar los motivos de la consulta, en segundo lugar exponer las alternativas evaluativas que se han elegido y, por último, plasmar los resultados. Al final de la exposición se atienden las preguntas del cliente y, con frecuencia, se le deja tiempo suficiente para la lectura del informe de manera que pueda plantear las aclaraciones que considere oportunas. Posiblemente la mayor dificultad de esta entrevista sea la de comunicar con claridad los resultados de la evaluación y la justificación de éstos. Para ello es indispensable que las explicaciones y el vocabulario se ajusten al nivel educativo y a la capacidad de comprensión de cada persona. 3. AnáLISIS DE LA InTErACCIón La respuesta que se obtiene de una persona, ante una pregunta formulada por otra, es dependiente del comportamiento de ambas o, lo que es lo mismo, es dependiente de la interacción de ambas personas (Cannell y Khahn, 1968). La consideración de la información como producto de la interacción ha llevado a revisar asunciones tradicionales que inducen expectativas tales como que cualquier persona, por el hecho de ser preguntada, va a poner de manifiesto la información que se desea o se necesita, con independencia de la motivación de quien es interrogado, del formato de la pregunta, del comportamiento verbal y no verbal o del rol de quien pregunta. En este proceso interactivo la información es un fenómeno emergente (Neimeyer y Gemignani, 2002) que, como toda adquisición de conocimiento mediante métodos cualitativos, transcurre a través de una estructura compleja y dinámica. Desde este punto de vista se justifica que, en la configuración de la información, intervienen tanto el entrevistador como el entrevistado, enunciado que puede resultar obvio pero no fácilmente analizable. 180 / 3.1. Evaluación psicológica. Conceptos, métodos y estudio de casos El entrevistador El entrevistador es el responsable de dirigir y controlar los aspectos que forman parte de las secuencias complejas del comportamiento interactivo, es decir, de conocer y controlar los comportamientos verbales y no verbales, de manejar la información procedente de estos dos canales y controlar la distribución de roles, además de asegurar su conocimiento sobre la naturaleza de los contenidos sobre los que se va a producir la interacción. El conocimiento de los modelos teóricos y las derivaciones evaluativas de éstos son imprescindibles para llevar adelante una entrevista, sean cuales sean sus objetivos específicos. Sólo este conocimiento permite una coherente planificación y dota de significación psicológica al conjunto de información recabada. En el caso de la selección, además del conocimiento psicológico se requiere un dominio importante de los puestos de trabajo y del contexto laboral en el que se insertan (véanse Hay Group, 2000; Bonaché y Cabrera, 2002). La posición relativa de las personas —simetría o disimetría social, profesional o psicológica— tiene un importante efecto en cualquier situación interactiva, como ha sido recogido por los estudios sobre los roles en psicología social (Zebrowitz, 1990). En este sentido el entrevistador debe asumir y cuidar el papel que le corresponde: definir y mantener el objetivo de la entrevista, ejecutar la planificación predeterminada, no cediendo a la confrontación de opiniones o valores y controlando el cómputo de tiempo empleado por ambos. Asimismo, otros aspectos, como la apariencia física y la coincidencia o no de sexo entre el entrevistador y el entrevistado, han sido objeto de atención. Se han aislado un conjunto de habilidades que se relacionan muy directamente con la pericia concreta en la interacción (Kanfer y Grima, 1977; Goss, Rossi y Moretti, 2011) y que pueden resumirse como la habilidad de reconocer la aparición de las características relevantes de la comunicación verbal y no verbal y manejarlas adecuada- mente. Entre las características relevantes han sido tradicionalmente considerados los patrones temporales observables en las verbalizaciones del entrevistado, es decir, el tiempo de reacción o latencia interverbalizaciones y la latencia intraverbalizaciones (Matarazzo y Wiens, 1972); de la observación de ambas se derivan datos útiles, tanto para el procesamiento de la información en la misma entrevista como para el entrenamiento de las habilidades que debe conseguir el entrevistador (Márquez, Rubio y Hernández, 1987; Márquez, 2004). La latencia puede identificarse con el tiempo de silencio que transcurre entre la finalización de las verbalizaciones del entrevistador y el comienzo de las verbalizaciones del entrevistado —latencia interverbalizaciones— o con las pausas que el entrevistado introduce en su alocución —latencia intraverbalizaciones—. Puede decirse que son parámetros básicos que identifican el ritmo del habla de cada persona, lo que convierte a estos parámetros, en primer lugar, en un indicador del comportamiento consistente del interlocutor y, en segundo lugar, en un indicador que permite observar la alteración del modo habitual de comportamiento. Si el entrevistador no altera con su propio comportamiento la tendencia del entrevistado (interrumpiéndole, forzando su ritmo, etc.), obtiene las siguientes ventajas: al detectar el patrón habitual puede establecer el criterio que a su vez le permitirá detectar cualquier cambio o alteración en el caso de que se produzca, y respetando las latencias intraverbalizaciones aumenta la posibilidad de que el sujeto explicite toda la información disponible o clarifique su respuesta, lo que incrementa la cantidad y, potencialmente, la precisión de la información. Adicionalmente estaría impidiendo que sus interrupciones actúen con valor de castigo en relación con los comportamientos pausados del entrevistado, lo que podría reducir sus pausas, con el coste añadido de que aprendiera a contestar con rapidez y pocas palabras en perjuicio de la cantidad y precisión de la información. A estos dos parámetros se suele añadir el cómputo total de las verbalizaciones, que es un exce© Ediciones Pirámide La entrevista lente indicador de la distribución del tiempo total de una entrevista, cómputo que, en principio y si no se han tomado decisiones en contrario, debe resultar favorable para el entrevistado. Los comportamientos no verbales del entrevistador, el contacto ocular, la sonrisa y los movimientos de cabeza que indican comprensión o afirmación y los comportamientos verbales que indican afirmación, comprensión o simpatía afectan a la naturaleza de los contenidos, a la cantidad de información obtenida y a la precisión de ésta. Esto quiere decir que el entrevistador debe entrenarse para emitir refuerzos en relación con los comportamientos que desea incrementar en el entrevistado y no en función de sus propios patrones espontáneos (Matarazzo et al., 1965). Por último, algunas de las características mencionadas, el contacto ocular y las muestras de entendimiento —verbales y no verbales—, se relacionan con la capacidad para establecer una relación empática. La empatía, concepto de larga tradición (Rogers, 1957), entrenable en algunos de sus componentes objetivables pero difícil de aislar y estudiar en su conjunto, parece ser claramente apreciable por los entrevistados. Ha sido entendida como la capacidad de un interlocutor (entrevistador, terapeuta, consejero o negociador) para ponerse en el lugar de la persona con la que habla y para inducir un clima cálido y favorable a la comunicación. Además de las características mencionadas, intervienen otros aspectos tales / 181 como los cambios en la proxemia, o cambio en la distancia física que se mantiene con el entrevistado —acercamiento, contacto físico momentáneo, etc. En el cuadro 5.3 se presenta un resumen de las habilidades más importantes y ejemplos de las conductas que las representan. En resumen, el conocimiento teórico y práctico de la naturaleza de los contenidos que se van a evaluar, la distribución del tiempo, el control de roles diferenciados y predeterminados, la observación de las latencias de respuesta del entrevistado, el procesamiento y manejo de la información en tiempo real, el suministro y retirada de refuerzos y el establecimiento de una relación empática, si procede, son responsabilidad del entrevistador y requieren entrenamiento (Kurpius et al., 1980; Keane et al., 1982; Lwatauta et al., 1982). 3.2. El entrevistado En relación con el entrevistado es especialmente relevante su disposición a facilitar la información requerida y el tipo de elaboración que, previsiblemente, requieren las respuestas. La disposición de las personas a facilitar la información que se requiere de ellas depende en primer lugar de la motivación con la que asisten o se ven implicadas en la evaluación y, en segundo lugar, de la eficacia con la que el entrevistador ponga en marcha recursos facilitadores, mediante un CUADRO 5.3 Resumen de habilidades Variables Conductas Tiempo de reacción (TR) — Observación del TR habitual. — Observación del cambio. Latencia intraverbalizaciones — Silencio (no interrupciones). Latencia interverbalizaciones — Pausa antes de iniciar la pregunta siguiente. Información relevante — Suministro de refuerzos verbales y no verbales. Empatía — Contacto ocular, sonrisa, asentimiento, proximidad física, contenidos que evidencian comprensión. © Ediciones Pirámide 182 / Evaluación psicológica. Conceptos, métodos y estudio de casos comportamiento empático y mediante el manejo de refuerzos. Esto quiere decir que la disposición del entrevistado para suministrar información no debe darse nunca por supuesta en términos absolutos; ni siquiera cuando se presupone una alta motivación para colaborar en la entrevista —como es el caso de los candidatos a un puesto de trabajo— puede entenderse que la información obtenida es exactamente la que se trata de indagar. A grandes rasgos, las potenciales fuentes de error, de cara a la información suministrada, son similares a las que se identifican en el autoinforme (Fernández-Ballesteros y Márquez, 2003; Fernández-Ballesteros, 2003) y pueden describirse en los siguientes términos: a) bajo condiciones en las que el entrevistado tiene una alta motivación, suele producirse una gran cantidad de información y un aumento de la probabilidad de sesgos, voluntarios o involuntarios. Los sesgos más comunes consisten bien en falsear voluntariamente la información para proteger datos, circunstancias o cualquier otro aspecto que las personas consideran negativos, contraproducentes o poco adecuados, bien en ir sesgando involuntariamente las respuestas, guiados por el efecto de la deseabilidad social; b) en condiciones de baja motivación o, incluso, de rechazo de la situación de evaluación, el sesgo más frecuente es el negativismo, que, en grado extremo, puede llegar al mutismo absoluto. Por último, la tendencia a la aquiescencia o a contestar positivamente, en el caso de la entrevista, puede explicarse mejor por efecto de las exigencias de elaboración que por aspectos motivacionales. La complejidad de la elaboración depende del tipo de lenguaje y de la naturaleza de los contenidos por los se pregunta. El desconocimiento o falta de familiaridad con un lenguaje especializado puede conducir a que el entrevistado no tenga ninguna posibilidad de responder, a que las respuestas sean vagas o imprecisas o a asentir o negar fortuitamente. Por otra parte, la naturaleza de los contenidos influye en las respuestas en un doble sentido: primero en cuanto a la accesibilidad de los mismos y segundo en función de la recuperación en la memoria. Cuando un contenido no es accesible para el entrevistado, a menos que, previamente, se haya llamado su atención para que lo observe, posiblemente dicho contenido debe ser objeto de autoobservación pero no de autoinforme en situación de entrevista e, igualmente, los contenidos situados en el pasado requieren una recuperación más o menos compleja (Newel y Simon,1979; Simon, 1979; Ericsson y Simon, 1984) y, por tanto, el entrevistador debe estimar, en función de los aspectos que le interesa evaluar, qué tipo de datos quiere obtener. Todas las preguntas pueden ser planteadas, pero las respuestas deben ser discriminadas en función del producto que representan en cuanto a la complejidad de su elaboración y ajuste. 4. gArAnTÍAS DE LA InFOrmACIón La utilidad de la entrevista ha sido indiscutible por ser el primer contacto con una persona, por facilitar la observación y por ser un medio adecuado para concitar confianza, credibilidad y colaboración. Más discutibles han sido sus propiedades como instrumento de evaluación. Existen dos opciones para afrontar esta cuestión: de un lado, se puede conceptualizar la entrevista como un método cualitativo, desde una perspectiva constructivista (Fontana y Frey, 2000), y, de otro, se puede entender como cualquier otro instrumento estandarizado de evaluación; en esta segunda opción es exigible demostrar que los datos sobre fiabilidad y validez apoyan su utilización. Desde este punto de vista, es necesario saber contestar las siguientes preguntas: a) ¿cómo podemos garantizar que la información obtenida en una entrevista es fiable?, es decir, ¿cómo podemos garantizar que los contenidos verbales manifestados se correspondan con lo que se pretendía conocer?; b) ¿cómo podemos garantizar que es válida?, es decir, ¿cómo podemos estar seguros de que la información obtenida representa, lo mejor posible, lo que es preciso evaluar?; y, por último, c) ¿cómo podemos garantizar que lo representa con precisión? © Ediciones Pirámide La entrevista En conjunto, la fiabilidad, la validez y la precisión dan cuenta de la calidad de los datos obtenidos mediante entrevista de modo similar a lo que ocurre con cualquier otro instrumento de evaluación (véanse Green y Rosenfeld, 2011; Lawrence et al., 2011). Como se ha señalado, la suposición de que, por el solo hecho de ser preguntadas, las personas van a poner de manifiesto la información solicitada o la información de interés o la mejor información posible (la de más calidad, la más completa y la más útil) resulta injustificada toda vez que, en una situación interactiva, el conocimiento previo relacionado con las preguntas, el formato, los comportamientos de quien formula las preguntas y el tiempo es determinante del resultado. La información que se obtiene en una entrevista psicológica requiere ser elaborada en la misma situación, lo que impone la necesidad de entrenar a los entrevistadores en el manejo de la información que van recibiendo en relación con una planificación previa (Matarazzo et al., 1964), preservándola de los errores o sesgos que la misma elaboración puede introducir (al menos de los errores o sesgos más comunes), integrando la información verbal y no verbal y haciendo el mejor aprovechamiento posible de ellas. La planificación debe ser ajustada a cada propósito de evaluación, con un conocimiento adecuado de las teorías explicativas y también de los contextos en los que se produce la demanda. En cualquier caso, el modo en que se plantean los contenidos en las preguntas tiene un indudable efecto o impacto sobre el modo en que se va a producir la respuesta, al menos en tres aspectos: en el reconocimiento más o menos claro y más o menos inmediato del contenido preguntado, en la precisión y en el tiempo de reacción. Esto significa que el aspecto concreto de la información que se requiere garantiza, en cierta medida, la fiabilidad de la información que se produce. Igualmente, aunque en menor medida, contribuye positivamente a que la información recibida sea válida. Si estamos interesados en conocer la intensidad del latido cardíaco de una persona, no podemos dejar de considerar el estado en el que el sujeto tiene © Ediciones Pirámide / 183 esa información. Dicha consideración nos impedirá preguntar, por ejemplo: «¿Cuántas pulsaciones tiene usted en este momento?», simplemente porque el sujeto carece de la información en esos términos y con esa precisión (a menos que le indiquemos que se tome el pulso a sí mismo, lo que no es el caso). La pregunta correcta será: «¿Siente su corazón acelerado?» o «¿tiene palpitaciones?». En el segundo caso el sujeto puede contestar «sí» o «no», mientras que es bastante probable que, en el primer caso, no obtengamos ninguna información. En definitiva, para que un contenido sea susceptible de indagación mediante entrevista, primero debe tener la garantía de que el entrevistado tiene conocimiento sobre él y, segundo, las preguntas deben seleccionar los aspectos de ese contenido que son estrictamente autoinformables. 4.1. garantizar la relevancia de la información Anteriormente se ha insistido en el objetivo de conseguir la máxima información posible, pero este objetivo puede ser insuficiente si la información recabada no satisface adecuadamente los elementos de indagación previstos. La relevancia de la información representa el grado de ajuste entre la información que se requería y la información conseguida. Dos aspectos inciden especialmente en la consecución de esta garantía: el conocimiento del campo o conocimiento del dominio al que se refieran los contenidos de la entrevista y el manejo de refuerzos. Las desviaciones de las unidades de evaluación deben ser vigiladas de modo que no se resienta el resultado de la entrevista, si bien hay que advertir que ciertas desviaciones de los temas centrales pueden operar como recursos para iniciar el contacto, facilitar la comunicación o establecer una relación más empática. Salvo cuando existan razones que aconsejen otra cosa, la regla de actuación general consiste en incentivar la elicitación de información que se relaciona directamente con los contenidos del guión y neutralizar la tenden- 184 / Evaluación psicológica. Conceptos, métodos y estudio de casos cia a generar información no relacionada con ellos. La utilización de los refuerzos que se han descrito (verbales y no verbales), junto con la utilización de retirada de refuerzo (retirada de atención), configuran la estrategia más frecuente. La distribución de este tipo de comportamientos diferenciales por parte del entrevistador requiere dos condiciones: la discriminación de contenidos y la consistencia del comportamiento del entrevistador. En lo que respecta a la discriminación de contenidos, la existencia del guión previo es la referencia fundamental; una vez que se han prefijado las unidades de indagación, la tarea del entrevistador consiste en reconocer la adecuación o inadecuación de la respuesta en términos de ajuste a dichas unidades. Habitualmente suele ser suficiente reforzar los contenidos sustantivos con preguntas específicamente dirigidas a ellos y retirar progresivamente los refuerzos positivos del resto de la exposición. En la práctica clínica puede ser necesario permitir que aparezcan las muestras de comportamiento anómalo, infrecuente o extraño tal como espontáneamente se produzcan, retomar los contenidos de las exposiciones y explorarlos sistemáticamente para poder discriminar la información relevante. Una vez conocido el patrón de comportamiento específico del entrevistado, el entrevistador debe ajustar su propio patrón de comportamiento en cuanto a aquello que va a reforzar y aquello que va a castigar, evitando a partir de ese momento sonreír, asentir o animar aleatoriamente, manteniendo la máxima consistencia posible. 4.2. Asegurar la fiabilidad y validez de la información obtenida Una vez que se ha elicitado la información y que se ha conseguido dirigirla para que sea preferentemente relevante al caso o pertinente al conjunto de preguntas que se han formulado, hay que asegurar que la información obtenida se ajusta a lo que se pretendía indagar y se ajusta bien. Ésta es una cuestión difícil en lo que se refiere a la entrevista en sí misma en la medida en la que no exista información o criterio alguno con los que se puedan comparar los datos. Las preguntas concretas y las preguntas abiertas generan respuestas diferenciadas en cuanto a su utilidad y garantías. En relación con el objetivo de conseguir respuestas concretas, los datos procedentes de la investigación apoyan dos estrategias a seguir en la realización de la entrevista: las estrategias de muestreo y de reconocimiento. Estrategias de muestreo Estas estrategias consisten en recabar un número representativo de descripciones sobre el comportamiento de la persona evaluada. Por ejemplo, suponiendo que estemos interesados en averiguar el tipo de actividades que realiza una persona y qué define su perfil de actividad, una opción es preguntar directamente: ¿Qué actividades realiza normalmente?, pregunta con la que dejamos en manos del sujeto la selección y rememoración de los datos. Otra opción es formular el siguiente conjunto de preguntas: — ¿En qué ocupó el fin de semana pasado? Empecemos por ayer domingo. — ¿Y el día anterior, sábado? — ¿Recuerda el fin de semana anterior al que hemos estado hablando? Bien, veamos qué hizo ese sábado y domingo. — Ahora veamos a qué se ha dedicado hoy lunes antes de venir aquí. — ¿Cuáles son sus actividades en un día cualquiera a lo largo de la semana? — ¿Algún día de la semana realiza actividades distintas? Este conjunto de preguntas responde al objetivo de encontrar un listado de actividades que representen ajustadamente las que definen la vida ordinaria del sujeto, tanto en días laborables como en días festivos, y cumple dos objetivos: por un lado, asegura la exhaustividad, es decir, aporta datos más completos que una rememoración en vacío, en la que no se haya sugerido ningún tiem© Ediciones Pirámide La entrevista po concreto, y con ello, la evocación de unos escenarios igualmente concretos. En segundo lugar, contrarresta el posible sesgo o tendencia que pueda tener una persona, en un momento determinado, a minimizar o exagerar su actividad. Por ejemplo, una persona que se viene sintiendo decaída y que ha bajado de un tiempo a esta parte la cantidad y la calidad de sus actividades y las ganas de hacerlas, al comparar cómo se comportaba y cómo se sentía antes y cómo se comporta y se siente ahora, tenderá a contestar ante una pregunta abierta que «ahora no tiene ganas de nada y que apenas hace nada». Por supuesto esta percepción subjetiva es también un dato importante para el evaluador, pero además necesita saber objetivamente hasta qué punto hay actividades en su vida ordinaria y, adicionalmente, si éstas son placenteras y saludables o no. Las estrategias de reconocimiento Estas estrategias están encaminadas a facilitar la identificación de los datos por parte de la persona entrevistada y requieren que se conozcan previamente el conjunto de las posibilidades para mostrárselas al entrevistado (Pope, 1979). Es fácil disponer de listados, probadamente exhaustivos, sobre comportamientos relacionados con determinados hábitos —por ejemplo, hábitos alimenticios o hábitos de estudio—. Si utilizamos estos listados para que el entrevistado identifique cuáles de los contenidos corresponden a su conducta habitual, estaremos introduciendo una estrategia de reconocimiento, lo que, con una alta probabilidad, permite conocer los comportamientos habituales, al mismo tiempo que se controla la tendencia a generalizar, minimizar o exagerar los datos en función de la importancia que les concede el paciente, de la distancia temporal o del estado de ánimo del entrevistado. Un ejemplo de estrategia de reconocimiento pueden ser los siguientes listados basados en la información que los padres de niños hiperactivos suelen aportar sobre sus hijos y en la información que generalmente observan los profesores de estos mismos niños. © Ediciones Pirámide / 185 Listado para padres Listado para profesores • Abandono de las tareas que empieza • No parece que pueda estarse quieto • Habla casi continuamente • Sentado, se mueve continuamente • Interrupciones constantes • No termina las tareas • En clase se levanta continuamente • Grandes dificultades para concentrarse • Habla continuamente • Interrupciones constantes Igualmente pueden utilizarse listados específicos en relación con situaciones igualmente específicas para obtener una descripción de los comportamientos de una persona, por ejemplo, en la evaluación de los hábitos de alimentación, mediante los ítems para la exploración clínica de la obesidad propuestos por Santacreu y Scigliani (1986): — Contexto laboral. • Se lleva de casa algo de comer. • Utiliza las máquinas disponibles de comida y bebidas. • Suele ir a la cafetería. • Frecuentes descansos breves para tomar café. Por descontado, no siempre se dispone de listados suficientemente amplios que hayan probado su utilidad. Con frecuencia, los entrevistadores tienen que llegar a un listado específico utilizando una estrategia de muestreo y posteriormente, si se considera necesario, una estrategia de reconocimiento. En los distintos ámbitos de aplicación, la práctica descrita consiste en: — Muestrear los comportamientos del entrevistado a través del tiempo. — Muestrear los comportamientos a través de situaciones distintas. — Muestrear los comportamientos del sujeto en los distintos contextos en los que se desenvuelven su vida y sus actividades. 186 / Evaluación psicológica. Conceptos, métodos y estudio de casos Si en la evaluación de un caso una paciente informara de que está teniendo ocasionales consumos excesivos de alcohol que le producen trastornos del sueño, disminución de su rendimiento laboral y disminución de actividades para cumplir con sus obligaciones, se indagaría la evolución y distribución de la ingesta de bebidas alcohólicas, tratando de determinar: — Desde cuándo se están produciendo las alteraciones que describe. — Cuál es el consumo, por término medio, que corresponde a ese período. — Cuánto consumía antes de notar ese tipo de malestar. — Determinar la presencia o ausencia de consumo en días laborables. — Determinar la presencia o ausencia de consumo en fines de semana. — Identificar el patrón temporal de consumo. — Identificar las situaciones en las que se produce: dentro o fuera de casa; en solitario o en compañía; en compañía de las mismas personas o de personas distintas; en situaciones de ocio o en situaciones de trabajo, etc. Aislar la precisión de la información obtenida de las otras dos características de la información que representan las garantías de la misma —fiabilidad y validez— no es fácil; más bien parece desprenderse de cualquier publicación especializada que si se consiguen los objetivos de fiabilidad y validez queda automáticamente garantizada la precisión. Sin contradecir la opinión general, puede distinguirse que la precisión de la información se ve afectada por la accesibilidad de los contenidos implicados en las preguntas. Dicho de otro modo, los efectos de la mayor o menor accesibilidad de la información son fácilmente apreciables en el resultado de una entrevista. Como ya se ha expuesto, un contenido es accesible en la medida en que el entrevistado y el entrevistador comparten inequívocamente los términos empleados para formular las preguntas. Ejemplifiquemos sobre este particular. Supongamos que un entrevistador está interesado en conocer las observaciones que un entre- vistado ha podido realizar sobre una tercera persona sospechosa de abuso de consumo de sustancias tóxicas (sustancias psicoactivas). En este caso su pregunta podría ser formulada en los siguientes términos: — ¿Ha observado, cuando llega a casa, síntomas de consumo de sustancias psicoactivas? Ante esta pregunta, la respuesta dependerá del conocimiento previo del sujeto entrevistado sobre la relación entre el consumo de sustancias psicoactivas y los efectos observables de éstas; es más, para poder contestar necesita conocer a qué se refieren los términos «sustancias psicoactivas». Es más difícil asegurar la existencia del conocimiento previo que se requiere para contestar a una pregunta que garantizar la accesibilidad del contenido de ésta. Si la pregunta anterior es convertida en preguntas que hacen referencia directa a los comportamientos que cualquiera puede haber observado, si se han manifestado en su presencia, se habrá garantizado la accesibilidad de la información que se le requiere. Con este propósito, la pregunta anterior puede diversificarse del siguiente modo: — ¿Tropieza con los muebles? — ¿Tiene problemas para coordinar sus movimientos? — ¿Le cuesta fijar la mirada? — ¿Parece alterado? — ¿Tiene la pupila dilatada? Como puede apreciarse, la estrategia que ha incrementado la accesibilidad y que, por tanto, presumiblemente, incrementará la precisión de las respuestas ha consistido en desagregar en observaciones puntuales la pregunta general que incluye todas las observaciones posibles. 4.3. El nivel de estructuración La estructuración de la entrevista contribuye a las garantías de la información obtenida (Wright © Ediciones Pirámide La entrevista et al., 1989), si bien el entrevistador debe decidir siempre el grado de estructuración que va a adoptar para según qué contenidos (Wiens, 1990). Una buena parte de los trabajos relacionados con la estructuración y sus efectos proceden de la consideración de las garantías de la información obtenida mediante entrevista en relación con el proceso de evaluación (De Bruyn, 1992) y sus resultados concluyen con la recomendación de realizar entrevistas sistemáticas y comprensivas (Snyder, 2000), conclusión que se deriva de la comparación entre aplicaciones de entrevistas con distinto formato y aplicadas por expertos clínicos, mediante soportes informáticos o por clínicos, utilizando una herramienta informática. La sistematicidad y la oportunidad de hacer comparaciones se vieron favorecidas por las modificaciones introducidas por el DSM-III; la utilización de las clasificaciones diagnósticas que contenía esta edición permitió comparar los datos procedentes de distintos especialistas que utilizaban entrevistas no estructuradas para determinar el diagnóstico y los que se obtenían mediante la utilización de entrevistas estructuradas como la DIS (Wyndowe, 1987) o entre entrevistas con distintos formatos y CIDI (Peter y Andrews, 1995). De los datos aportados por estas comparaciones se pueden extraer las siguientes conclusiones: 1. Los contenidos tienen un peso fundamental en la obtención del índice de acuerdo kappa; cuando los contenidos responden a un conocimiento poco compartido y de difícil concreción, por ejemplo en la fobia simple, el índice de acuerdo entre los entrevistadores es de .47, mientras que en la determinación del diagnóstico de abuso de alcohol, que cuenta con criterios mejor sistematizados y más objetivables, el índice de acuerdo es de .87 (véase Butcher, Perry y Atlis, 2000). Este dato se ve apoyado también cuando se comparan los resultados de entrevistas administradas por entrevistadores entrenados que utilizan preguntas generadas a partir de árboles lógicos de decisión; en esta comparación © Ediciones Pirámide 2. 3. / 187 los índices de acuerdo oscilan entre .31 para el desorden bipolar atípico y .92 para el abuso de alcohol. En cuanto a la estructuración, cuando se comparan los resultados de formatos no estructurados, más o menos sistematizados, el índice de acuerdo es favorable a la máxima estructuración, si bien el peso de los contenidos modula el grado de acuerdo. Así el índice de acuerdo entre entrevistadores y una entrevista administrada mediante ordenador alcanza una media de .68, oscilando entre .38 para la detección de disfunciones psicosexuales y .94 para el abuso o dependencia de drogas. Estos y otros muchos resultados procedentes de meta-análisis (Grove et al., 2000) señalan la absoluta superioridad en términos de fiabilidad, validez y precisión de las entrevistas, cuando los contenidos de la planificación están máximamente especificados, sistematizados y estructurados, como en el caso de los sistemas desarrollados a partir de árboles de decisión. Las conclusiones más destacables en relación con este procedimiento general están relacionadas con su utilidad. Sigue siendo un procedimiento extraordinariamente útil en el proceso de evaluación con propósitos distintos, si bien las exigencias se han incrementado en orden a conseguir la máxima eficacia y replicabilidad de los resultados que se obtienen mediante su utilización. Dado el carácter interactivo del procedimiento, la atención ha sido dirigida a las habilidades entrenables de los entrevistadores, especialmente durante la década de los setenta y ochenta y, cada vez más, a la construcción de entrevistas estructuradas y semiestructuradas (Lawrence, 2011) cuyas cualidades probadas aseguren las garantías de la información obtenida, sea cual sea el nivel de entrenamiento de los entrevistadores. En la actualidad los esfuerzos se dirigen preferentemente al diseño de entrevistas basadas en árboles de decisión que garantizan los máximos contenidos pertinentes y la óptima dimensionalización de éstos, 188 / Evaluación psicológica. Conceptos, métodos y estudio de casos estructurando el formato en orden a la mejor identificación de los síntomas (Kocsis, 2011) o con el fin de realizar un screening con respecto a un problema específico (por ejemplo, Seo, Lee, Dong et al., 2011). No obstante, como se ha expuesto a lo largo del capítulo, no siempre es posible la utilización de entrevistas sistematizadas y no siempre son aconsejables, por lo que es necesario contemplar la preparación del entrevistador tanto en los aspectos de conocimiento —modelos teóricos y metodológicos— como en las habilidades de manejo de la información y de las características interactivas. COnCLUSIOnES Para llevar adelante cualquier entrevista es necesario atender tanto a sus contenidos (lo que se va a evaluar) como al formato en el que se va a desarrollar, es decir, se requiere la preparación necesaria para: — Situarse en el dominio al que se refiere el contenido general de la entrevista (revisiones bibliográficas, consultas a expertos, modelos teóricos vinculados al tipo de conocimiento relacionado con lo que se va a evaluar, etc.). — Planificación de los contenidos que van a ser objeto de indagación. — Revisión de las entrevistas diseñadas para dichos contenidos. — Determinación del grado de estructuración que va a emplearse en cada una de las partes de la entrevista y la utilización parcial o total de listados complementarios o de entrevistas estructuradas revisadas. — Determinación del estilo que se va adoptar, dentro del continuo directivo-no directivo. — Determinación del/los procedimientos de observación y registro durante el desarrollo de la entrevista. — Procedimiento de análisis para los datos extraídos. En el desarrollo de la entrevista, el entrevistador podrá cambiar algunas decisiones tomadas con anterioridad, por ejemplo, en relación con el estilo o con la estructuración que había predeterminado, si encuentra razones para hacerlo, pero serán decisiones fundamentadas y no decisiones arbitrarias, producto de la falta de planificación o de la improvisación. BIBLIOgrAFÍA BáSICA Casullo, E. y Márquez, M. O. (2003). The Interview. Encyclopedia of Psychological Assessment, Londres: Sage. Márquez, M. O. (2004). ¿Qué es la entrevista?, Madrid: Biblioteca Nueva. Márquez, M. O., Rubio, V. J. y Hernández, J. M. (1987). Propuesta de entrenamiento sistemático en la entrevista: Selección de variables modificables. Psychological Assessment, 3, 211-232. Vázquez, C. y Muñoz, M. (2002). Entrevista diagnóstica en salud mental, Madrid: Síntesis. rEFErEnCIAS BIBLIOgráFICAS Adarraga, P. y Zaccagnini, J. L. (1992). DAI: A knowledge-based system for diagnosing autism: a case study on the application of artificial intelligence to psychology. European Journal of Psychological Assessment, 8, 1, 25-46. Adarraga, P. y Zaccagnini, J. L. (1994). Psicología e Inteligencia Artificial, Madrid: Trotta. Bonaché, J. y Cabrera, A. (2002). Dirección estratégica de personas. Evidencias y perspectivas para el siglo XXI, Prentice Hall. © Ediciones Pirámide La entrevista Brown, D. K., Kratochwill, T. R. y Bergan, J. R. (1982). Teaching interview skills for problem identification: an analogue study. Behavioral Assessment, 4, 63-73. Butcher, J. N., Perry, J. N. y Atlis, M. M. (2000). Validity and utility of computer-based test interpretation. Psychological Assessment, 12, 1, 6-18. Cannell, C. F. y Kahn, R. L. (1968). Interviewing. En G. Lindzey y E. Aronson (eds.). The handbook of Social Psychology, Addison Wesley. Casullo, E. y Márquez, M. O. (2003). The Interview. Encyclopedia of Psychological Assessment, Londres: Sage. Cepeda, C. (2010). Clinical Manual for the psychiatric interview of children and adolescent, Arlington: American Psychiatric Publishing. Chandler, M. H. H. (1989). Teaching interview techniques utilizing an instructional video-tape. Educational Gerontology, 15, 377-383. Cohen, J. (1960). A coefficient of agreement for nominal scales. Educational and Psychological Meassurement, 20, 37-46. De Bruyn, E. E. J. (1992). A normative- prescriptive view on clinical psychodiagnosis decision making. European Journal of Psychological Assessment, 8, 63-171. Diagnostic and Statistical Manual of Mental Disorders: DSM-IV TR (2000). Washington, American Psychiatric Association (traducción castellana: Manual Diagnóstico y Estadístico de los trastornos Mentales: DSM-IV-TR. Barcelona: Masson, 2002). Dipboye, R., Smith, C. y Howell, W. (1994). Understanding industrial and organizational psychology, Fort Worth: Harcourt Brace. Endicott, J. y Spitzer, R. L. (1979). A diagnostic interview: The schedule for affective disorders and schizofrenia. Archives of General Psychiatry, 35, 837-844. Ezpeleta, L. (2002). Entrevista diagnóstica infantil, Madrid: Síntesis. Fernández-Ballesteros, R. (1995). Introducción a la Evaluación Psicológica, Madrid: Pirámide. Fernández-Ballesteros, R. y Márquez, M. O. (2003). Self-Report. En R. Fernández-Ballesteros (ed.). Encyclopedia of Psychological Assesment, vol. II, Londres: Sage. Fernández-Ballesteros, R. (2003). Self-report questionnaires. En M. Hersen (ed.). Behavioral Assessment, vol. III, Nueva York: Wiley. Fine, S. (1989). Funtional Job Analysis: A Desk Aid, Orlando: Dryden. © Ediciones Pirámide / 189 First, M. B., Gibbon, M., Spitzer, R. L., Williams, J. B. W. y Benjamin, L. S. (1999). Guía del usuario para la entrevista estructurada para los trastornos de personalidad del Eje II del DSM-IV, Barcelona: Masson. Fontana, A. y Frey, J. H. (2000). The interview: from structured questions to negociated text. En N. K. Denzin y Y. S. Lincoln. Handboock of qualitative research, Thousand Oaks: Sage. Frances, A., First, M. B. y Pincus, H. A. (1995). DSMIV Guidebook, Washington: Americam Psychyatric Press. Goss, C., Rossi, A. y Moretti, F. (2011). Assessment stage: Data gathering and structuring the interview. En M. Rimondini. Communication in cognitive behavioraltherapy, pp. 25-51, Nueva York: Springer Science + Business. Green, D. y Rosenfeld, B. (2011). Evaluating the gold standard: A review and meta-analysis of the Structured Interview of Reported Symptoms. Psychological Assessment, 23 (1), 95-107. Grove, W. M., Zald, D. H., Lebow, B. S., Snitz, B. E. y Nelson, C. (2000). Clinical versus mechanical prediction: a meta-analysis. Psychological Assessment, 12, 1, 19-30. Hart, A. (1989). Interviewing The experts. En A. Hart. Knowledge acquisition for expert systems, Worcester: Billing and Sons. Hay Group y SAP (2002). Factbook Recursos Humanos, Madrid: Aranzadi. Hopskins, B. y Hermann, J. (1977). Evaluating interobserver reliability of interval data. Journal of Applied Behavior Analysis, 10, 121-126. Kanfer, F. H. (1968). Verbal conditioning: a review of its current status. En T. R. Dixon y D. C. Horton (eds.). Verbal behavior and general behavior theory, Nueva York: Prentice Hall. Kanfer, F. H. (1972). Assessment for behavior modification. Journal of Personality Assessment, 36, 418423. Kanfer, F. H. y Grimm, L. G. (1977). Behavioral analysis: selecting target behaviors in the interview. Behavior Modification, 1, 7-28. Keane, T. M., Black, J. L., Collins, F. L. y Vinson, M. C. (1982). A skills training program for teching the behavioral interview. Behavioral Assessment, 4, 53-62. Kocsis, R. (2011). The Structured Interview of Reported Symptoms 2nd Edition (SIRS-2): The new benchmark towards the assessment of malinge- 190 / Evaluación psicológica. Conceptos, métodos y estudio de casos ring. Journal of Forensic Psychology Practice, 11 (1), 73-81. Kurpius, D. J., Froehle, T. C. y Robinson, S. E. (1980). The effects of single and multiple models when teaching counseling interviewing behaviors. Counselor Education and Supervision, 20, 29-36. Lynn, A. B. (2008). The EQ Interview: Finding employees with high emotional intelligence, Nueva York: AMACOM. Lwatauta, B. A., Wong, S. E., Riordan, M. M. y Lau, M. M. (1982). Assessment and training of clinical interviewing skills: analogue analysis and field replication. Journal of Applied Behavior Analysis, 15, 191-203. Márquez, M. O., Rubio, V. J. y Hernández, J. M. (1987). Propuesta de entrenamiento sistemático en la entrevista: Selección de variables mobificables. Psychological Assessment, 3, 211-232. Márquez, M. O. y Moruno, P. (2003). La formalización del conocimiento clínico en la terapia ocupacional. Revista Sonorense de psicología, 17, 1, 23-34. Matarazzo, J. D. (1965). The interview. En B. B. Wolman (ed.). Handboock of clinical psychology, Nueva York: McGraw-Hill. Matarazzo, J. D. (1978). The interview: its reliability and validity in psichiatric diagnosis. En B. B. Wolman (ed.). Clinical diagnosis of mental disorders: A Handbook, Nueva York: Plenum Press. Matarazzo, J. D. y Wiens, A. N. (1972). The Interview: Research on its Anatomy and Structure, Chicago: Aldine-Atherton. Matarazzo, J. D., Wiens, A. N. y Saslow, G. (1965). Fase studies in interviewer speech behavior. En L. Kresner y V. P. Ullman (eds.). Research in behavioral modification, Nueva York: Holt, Rinehart & Winston. McCormick, E., Jeanneret y Mechan (1972). A study of job characteristics and job dimensions as based on the position analysis questionnaire. Journal of Applied Psychology, 56, 347-368. Morrison, J. (2008). The firts Interview, Nueva York: Guildford Press. Muchinsky, P. M. (2000). Psychology Applied to Work. Stanford: Thomson Learning (traducción castellana en Psicología aplicada al trabajo. Madrid: Paraninfo). Muñoz, M. (2003). Manual práctico de evaluación psicológica clínica, Madrid: Síntesis. Othmer, E. y Othmer, S. (1995). The clinical interview using DSM-IV, vol. 2: The dificult patient, Washington: Americam Psychiatric Press. Peter, S. L. y Andrews, G. (1995). Procedural validity of the computerized version of the Composite International Diagnostic Interview (CIDI-Auto) in the anxiety disorders. Psychological Medicine, 25, 1269-1280. Pope, B. (1979). The mental health interview. Research and application, Nueva York: Pergamon. Rogers, C. R. (1957). The necessary and sufficient conditions of therapeutic personality chnge. Journal of Consulting Psychology, 21, 95-103. Salgado, J. F. y Anderson, N. (2001). Cognitive and G M A testing in the European Community: Issues and Evidence. Human Performance, 14. Santacreu y Scigliano, R. (1986). Programas de autocontrol de la obesidad: datos de un año de seguimiento. Estudios de Psicología, 25, 123-138. Silva, F. (1993). La entrevista. En R. Fernádez-Ballesteros (ed.). Introducción a la evaluación Psicológica, Madrid: Pirámide. Snyder, D. K. (2000). Computer-assisted judgment: defining strengths and liabilities. Psychological Assessment, 12, 1, 52-60. Steele, H. y Steele, M (2008). Clinical applications of the Adult Attachment Interview, Nueva York: Guilford Press. Wanous, J. P. (1992). Organizacional entry, Nueva York: Addison-Wesley. Wiens, A. N. (1990). Structured clinical interviews for adults. En G. Goldstein y M. Hersen (eds.). Handbook of Psychological Assessment, Nueva York: Pergamon. Wright, P. M., Lichtenfels, P. A. y Pursell, E. D. (1989). The structured interview: additional studies and a meta-analysis. Journal of Occupational Psichology, 62, 191-199. Wyndowe, J. (1987). The micro-computerized Diagnostic Interview Schedule: Clinical use in an outpatien setting. Canadian Journal of Psychiatry, 32, 93-99. Zebrowitz, L. A. (1990). Social perception, Open University Press. Zimmerman, M. (1994). Interview Guide for evaluating DSM-IV psychiatric disorders and the mental status examination, Filadelfia, PA: Psychiatric Press. © Ediciones Pirámide La entrevista / 191 APÉnDICES ENTREVISTA CLíNICA ESTRUCTURADA Preevaluación Preguntas Observaciones ¿Puede decirme su nombre? ¿Qué edad tiene? ¿Cuál es la fecha de su nacimiento? (o en su defecto: ¿en qué año/mes/día nació?) ¿En qué se ocupa? o ¿cuál es su profesión? ¿Sabe qué día es hoy? ¿Cómo se llama este sitio en el que nos encontramos? ¿Cómo ha llegado hasta aquí? ¿Le ha traído alguien? ¿Sabe la dirección de este sitio? ¿Dónde estaba antes de venir aquí? ¿Cuál es la razón de que esté aquí? Aseo y cuidado personal Orientación Coordinación motora Articulación del lenguaje Control de la mirada Dilatación pupilar Temblores Tics Movimientos estereotipados Agitación/enlentecimiento Habla subvocálica GUíA PARA LA EVALUACIóN DE CONDUCTAS1 R. Fernández-Ballesteros 1. Descripción de los comportamientos problema. 2. Especificación de conductas: — Motoras. — Fisiológicas. — Cognitivas. 3. Dimensiones de conductas: — — — — — 4. 5. 6. 7. Frecuencia. Duración. Intensidad. Apropiación. Otras. Atribuciones sobre el problema. Expectativas sobre el problema. Otros comportamientos problemáticos. Condiciones estimulares antecedentes: — Parámetros del estímulo. 8. Condiciones internas antecedentes: — Características. 1 9. Condiciones ambientales: — Características. 10. Consecuencias internas: — Características. 11. Otras condiciones ambientales actuales relevantes. 12. Especificación de las condiciones históricas. — Parámetros de las situaciones relevantes. — Recurrencia temporal. 13. RBC potencialmente relevantes: — Emocionales-motivacionales. — Cognitivo-lingüísticos. — Sensomotores. 14. Exceso o defecto. 15. Variables biológicas potencialmente relevantes: — Condiciones O1. — Condiciones O2. — Condiciones O3. Véase en Apéndice la «Entrevista conductual» de Fernández-Ballesteros. © Ediciones Pirámide La observación ROCÍO FERNÁNDEZ-BALLESTEROS 6 OBJETIVOS DEL CAPÍTULO • Aplicar los conocimientos ya adquiridos sobre observación a la práctica de la evaluación psicológica. • Ubicar la observación en el contexto del proceso de evaluación. • Ser capaz de identificar cuándo utilizar la observación como método de recogida de información. • Ser capaz de seleccionar las unidades de análisis y los parámetros de medida en un caso concreto, así como el protocolo más indicado para su observación. • Ser capaz de planificar una observación. • Ser capaz de identificar las garantías requeridas en una observación y conocer los tipos de análisis pertinentes. • Conocer los principales sesgos de la observación y las estrategias para tratar de evitarlos. • Dados los resultados de un protocolo, matriz de interacción o un código de observación, ser capaz de interpretarlos. © Ediciones Pirámide 1. InTrODUCCIón La observación es la estrategia fundamental del método científico, y, por tanto, cualquier técnica de recogida de información en evaluación psicológica conlleva, de una u otra forma, observación. La observación es, además, una conducta humana universal que ocurre, también, en la situación de evaluación entre el sujeto y el evaluador y que se produce sea cual fuere el modelo teórico de éste. Sin embargo, no sería correcto decir que todas las técnicas de recogida de información en evaluación psicológica son técnicas observacionales; existen una serie de características delimitadoras de lo que es un método observacional: — Quien observa es un experto (participante o no participante en la situación pero nunca el propio sujeto) o ha sido entrenado para observar deliberadamente, aunque sea brevemente. Así, hay que resaltar que estamos incluyendo como método observacional la observación deliberada realizada por personas allegadas al sujeto. Por ejemplo, cuando le pedimos a los padres que registren en una hoja de observación conductas de su hijo1. — Lo que se observa, generalmente, es un hecho que ocurre en la situación de observación, preferentemente una situación natural o una situación análoga o artificial, prepa- rada para reproducir el comportamiento que ocurre en la situación natural. Por supuesto, el «hecho» que se observa puede variar en su nivel de molaridad-molecularidad o la traducción que realiza el observador puede tener distintos niveles de inferencia. Por ejemplo, se pueden observar conductas (por ejemplo, si el niño moja la cama), se pueden inferir de las conductas atributos (por ejemplo, si el niño está nervioso) o se puede observar un hecho presente que representa la expresión de un conjunto de conductas pasadas (por ejemplo, cuando observamos la existencia o no de desechos). También, conviene mencionar que algunos autores no incluyen como método observacional el que se expresa mediante atributos, sino sólo aquel referido a conductas motoras externas. — Se observa de forma sistemática, por lo que la observación conlleva un protocolo u hoja de registro preparada al efecto que puede tener distintos niveles de estructuración, admitiéndose desde un protocolo simple que permite la anotación narrativa (llamada por algunos autores observación ad líbitum) hasta los más sofisticados códigos de observación. En definitiva, es observación aquello que se hace con cualquiera de los procedimientos y téc- 1 Algunos autores no consideran este tipo de procedimiento de recogida de información una técnica observacional. © Ediciones Pirámide La observación nicas de recogida de información que requiere la percepción deliberada de comportamientos emitidos por un/os sujeto/s (a distintos niveles de complejidad e inferencia), realizada por un observador entrenado (participante o no participante) mediante protocolos preparados al efecto (de mayor o menor estructuración) que permitan una anotación sistemática, en una situación natural o análoga en la que no se elicitan respuestas2. En el cuadro 6.1 se presentan todas las dimensiones consideradas relevantes para el amplio método de la observación. CUADRO 6.1 Dimensiones relevantes de la observación Unidad de análisis Molecular Nivel de inferencia Bajo Tiempo del evento Actual Protocolo Estructurado Observador Experto Participación Situación No participante Natural Molar Alto Pasado o continuo Poco estructurado Escaso entrenamiento Participante Análoga Las dimensiones definitorias de la observación permiten, también, polarizar en un continuo la calidad y el rigor de la observación desde máximamente rigurosa hasta mínimamente rigurosa. Así, la observación de unidades de análisis moleculares, de bajo nivel de inferencia, registradas en el momento de producirse, mediante un protocolo estructurado, por un observador experto, no participante, en la situación natural maximizará el rigor del método observacional frente a sus correspondientes opuestos. Hechas estas necesarias precisiones, vamos a pasar ahora a tratar las cuestiones más importantes sobre las técnicas de lo que propiamente se considera observación sistemática y que se refieren a las unidades seleccionadas, las técnicas de registro más comunes, el muestreo, el lugar donde se 2 La no elicitación de respuestas es considerada por muchos autores como una de las características centrales de la © Ediciones Pirámide / 195 realiza la observación y las garantías científicas y, finalmente, presentaremos una guía para la planificación que ha de efectuarse en toda observación. 2. UnIDADES DE AnáLISIS (¿qUé OBSErVAr?) Como señala Fiske (1978), existen distintas formas de enfocar el concepto de «unidad» de observación. Por unidad puede entenderse el objeto que se pretende estudiar; es decir, en nuestro caso, una persona, grupo, institución, etc. No obstante, ya se ha dicho que no se pretende evaluar a personas como objetos, sino sus manifestaciones conductuales, por lo que el objeto observado será un evento conductual. En segundo lugar, tales eventos se producen en un continuo temporal; en este caso nuestra unidad también podría referirse a un concreto segmento en el tiempo —más o menos amplio— del continuo de conducta. Por otra parte, sobre las unidades de hecho observadas, el observador suele realizar muy distintos niveles de inferencia: descripción, clasificación, explicación; todo ello es dependiente del marco referencial teórico de base. Por último, pueden ser consideradas como unidad de análisis las interacciones habidas entre las actividades de la/s persona/s y los elementos ambientales (estímulos físicos y sociales). En este apartado vamos a considerar por unidad de análisis u observación aquel conjunto de eventos conductuales que pueden presentar distintos grados de molaridad-molecularidad (véase cuadro 6.1) en función de los objetivos de la evaluación. 2.1. Continuo del comportamiento Desde una perspectiva ecológico-naturalista, el objetivo es observar todo el continuo de conducta tratando de registrar de forma descriptiva la mayor parte de eventos que ocurren en un contexto observación (frente a la elicitación de respuestas propia de todas las demás técnicas de evaluación). 196 / Evaluación psicológica. Conceptos, métodos y estudio de casos natural en amplias unidades de tiempo (véanse, por ejemplo, Medinnus, 1979; Wright, 1960). Las características fundamentales de este tipo de observación son las siguientes: 1. No se realiza una previa especificación de las conductas o atributos a observar. 2. Se observa en tiempo real y de forma continua, en muchos casos sin que la duración de la sesión sea especificada previamente. 3. Las descripciones se realizan sobre aspectos verbales, no verbales y/o espaciales de la conducta, pudiendo ser compaginados éstos con impresiones del observador sobre lo observado. Finalmente, conviene señalar que cuando se van a elaborar categorías conductuales y/o a decidir sobre cuáles son las «unidades» que van a ser observadas, siempre se requerirá realizar una observación asistemática que implica una observación ab libitum del continuo del comportamiento (Anguera, 2003a, b). 2.2. Atributos Los psicólogos del rasgo, psicodinámicos y constructivistas han utilizado la observación como base bien para la obtención de atributos, bien para el examen de otras construcciones teóricas. Así, de la observación de la conducta manifiesta —verbal, no verbal o espacial— se infieren determinadas características que se supone están siendo expresadas por dicha conducta. Así, por ejemplo: Conducta observada Inferencia Preocupación Frunce el ceño Le tiemblan las manos Nerviosismo Sale de la habitación Evita la situación Rasgo Ansiedad Las características de este tipo de unidad de análisis son las siguientes: 1. La actividad manifiesta observada es descrita en términos de un determinado atributo. 2. La conversión de los datos de conducta puede realizarse durante el transcurso de la observación o posteriormente; es decir, puede efectuarse una observación no estructurada y asistemática y convertirla simultánea o posteriormente en una descripción o clasificación de acuerdo con los atributos elegidos. 3. En la observación de estas unidades suelen utilizarse amplios intervalos temporales. Dado que la utilización de atributos como unidades de análisis estan en relación con concretos marcos teóricos, algunos autores (procedentes del enfoque conductual) no consideran estas como apropiadas unidades de análisis de la observación sistemática. 2.3. Conductas La prescripción desde una perspectiva conductual es la utilización como unidades de análisis de la conducta manifiesta —motora o verbal— definida bien en términos simples, bien agrupada en clases o categorías. Como señalan Cone y Foster (1982), la definición de tales unidades de observación varía en un continuo de molaridad-molecularidad, ya que cualquier conducta puede ser descrita en una serie de aspectos de mayor o menor especificidad. Así, si, por ejemplo, observamos a un escolar que presenta conductas «perturbadoras» en clase, podemos registrar éstas según unidades muy concretas, como «gira el cuerpo 90° y más grados», o bien describir la unidad de observación en términos más amplios, como sería «volverse en el asiento». Además, estas conductas más o menos especificadas podrán formar parte de categorías conductuales como «desatención», «conducta disruptiva», etc. Las características fundamentales de estas unidades de análisis son las siguientes (véase, entre otros, Anguera y Blanco, 2003): 1. Existe una previa especificación de la conducta o clases de conducta a observar en el © Ediciones Pirámide La observación sentido de diferenciarse o distinguirse de la conducta anterior y la siguiente, poder ser denominada y definida operacionalmente: denominación, delimitación y definición son las tres características de una unidad de análisis comportamental. 2. La formulación de estas unidades de análisis puede ser teórica o empírica. Desde el primer punto de vista, el evaluador selecciona aquellas conductas objeto de interés por su relevancia en el caso. No obstante, en ocasiones —fundamentalmente cuando se trata de crear, cara a la investigación, códigos estándar de observación— se obtienen las conductas o categorías que han de ser observadas partiendo de los múltiples criterios empíricos y observaciones previas en estudios piloto (con un registro narrativo o ad líbitum de lo observado) o aquellas que forman parte de otros códigos de observación. 3. La observación de tales unidades debe requerir mínimas inferencias por parte del observador. 4. Se requiere la selección de los intervalos de tiempo en los que se va a realizar la observación (duración total, número de sesiones, tiempo de cada sesión), el/os sujeto/s que va/n a ser observado/s, así como la duración final del todo el proceso observacional. 2.4. Interacciones En ocasiones la unidad a observar no está formada, tan sólo, por una/s conducta/s previamente descrita/s, sino por la relación secuencial entre dos eventos procedentes de dos o más personas o entre una persona y una dimensión ambiental. Estas unidades de análisis son fundamentalmente utilizadas por los evaluadores que persiguen la indagación de las relaciones funcionales entre eventos. Así, por ejemplo, pueden interesarnos no sólo las 3 En lengua inglesa llamadas unobtrusive measures. © Ediciones Pirámide / 197 conductas «desobedientes» de un niño en su hogar, sino la relación que existe entre éstas y otros eventos contingentes a ellas ejecutadas por el padre/ madre/hermanos del sujeto. O también nuestro interés puede recaer en las relaciones que mantiene una pareja, ya que ello es nuestro objeto de estudio. Las características de este tipo de unidades de análisis son las siguientes: 1. En el mismo sentido que las del apartado anterior, existe una especificación previa de las conductas o clases de conductas que interesa observar. 2. Estas unidades están constituidas por influencias recíprocas existentes entre individuos o entre un individuo y un grupo o un determinado ambiente. 3. La observación de interacciones suele realizarse en unidades de tiempo previamente establecidas, adecuadas (temporalmente) a estas unidades de observación. 2.5. Productos de conducta Como se puso de relieve en la introducción a este capítulo, gran parte de la observación en evaluación se realiza sobre productos de conducta. Es decir, se observa el resultado de un conjunto de actividades internas o externas que el/los sujeto/s ha/n ya realizado en situaciones tanto naturales como artificiales. Dos tipos fundamentales de observaciones pueden incluirse en este apartado: los productos de conducta procedentes de las ejecuciones del sujeto en el pasado, también denominados por los autores «medidas no reactivas»3, y los productos de ejecuciones que el sujeto realiza a partir de determinadas tareas que el evaluador le presenta. Webb et al. (1966; véanse también Sechrest, 1979; Secherest y Hill, 2003) precisaron las siguientes posibilidades de datos de observación no reactivos y que pueden ser considerados como productos de conducta. En primer lugar, las me- 198 / Evaluación psicológica. Conceptos, métodos y estudio de casos didas de erosión, que se refieren a destrucciones, daños u otros cambios físicos que existen en el ambiente habitual del sujeto y que se han originado como producto de su conducta (por ejemplo, las marcas sobre el césped por el paso de los habitantes). En segundo lugar, las medidas de huella son aquellos productos de la conducta del sujeto al utilizar objetos o al consumirlos (por ejemplo, las botellas consumidas por un alcohólico). Por último, las medidas de archivo, las más interesantes en evaluación de las descritas hasta aquí, son aquellas que han sido registradas en documentos o informes, generalmente de forma escrita. En este último apartado pueden incluirse datos tan importantes como los procedentes de cuadernos escolares, pinturas o dibujos, las notas del currículo académico y otros muchos documentos personales que, procedentes del pasado, son el resultado de la realización de determinadas actividades por parte del sujeto en su vida cotidiana pasada y que pueden resultar de gran interés en evaluación psicológica. Por otro lado, tanto las situaciones artificiales como las naturales suponen escenarios para recoger productos de conducta. Así, tras una sesión de juego pueden ser observados productos de la conducta lúdica y/o escolar de un niño o, también, redacciones, dibujos, rompecabezas, etc. Por otra parte, también es posible registrar productos de conducta en situaciones naturales, como, por ejemplo, cuando se trata de evaluar el número de piezas producidas por un operario o el número y la calidad de trabajo despachado por una secretaria. Incluso podríamos decir que las puntuaciones en los clásicos tests de ejecución serían ni más ni menos que observaciones sobre productos de conducta recogidos en situaciones artificiales con un material tipificado. Las características de estas unidades de observación son las siguientes: 1. Las observaciones no reactivas son excelentes procedimientos tanto de evaluación como de valoración de tratamientos, ya que no se ven afectadas por los sesgos propios de la observación como es la reactividad del/los sujeto/s. 2. Sin embargo, las observaciones no reactivas tienen el inconveniente de que el/los sujeto/s agentes del/los producto/s de conducta puedan no ser identificables. 3. La observación de los resultados de la ejecución en tareas estándar (tanto naturales como artificiales) optimiza la comparabilidad de los resultados. 4. El mayor problema de estas unidades de análisis está en que sean utilizadas como expresión de supuestos atributos intrapsíquicos de los sujetos observados. Es decir, de los productos de conducta se suelen realizar inferencias de alto nivel o bien relaciones causales sobre su origen. 2.6. Unidades de medida (¿qué medir de la unidad?) Como señalan Johnston y Pennypacker (1980), no deben confundirse las unidades de observación con su especificación cuantitativa, ya que «las unidades de análisis y las unidades de medida están relacionadas en base a que la existencia de unas permite la designación de las otras y, desde luego, no son equivalentes» (p. 120). Así, independientemente de observar conductas, interacciones, atributos, etc., a la hora de dar una versión cuantificada de ellas habremos de proceder a la selección de las unidades de medida que van a ser adoptadas. Partimos de que el fenómeno observado se da en alguna medida; es decir, según una cierta cantidad en alguna de las propiedades o dimensiones de la unidad de análisis observada (véase Carreras, 1991). En definitiva, este punto trata de responder a la pregunta que formulan Sackett et al. (1978): ¿cuál es la mejor medida para la descripción cuantitativa de la unidad observada? Esta cuestión debe ser planteada incluso antes de la elección del procedimiento o sistema que va a ser utilizado a la hora de recoger las unidades de observación. Hay que dejar constancia inicial de que, en general, el tipo de medida, o la propiedad elegida tendrá siempre que depender de la unidad de observación, lo cual se pondrá de relieve a continuación. © Ediciones Pirámide La observación Ocurrencia En ocasiones, lo que interesa es la ocurrencia de un evento; es decir, la constatación de si un fenómeno se da o no. Así, por ejemplo, sucede cuando pretendemos saber si un niño se sienta o no se sienta a una determinada edad o si moja o no moja la cama. En este caso, el todo o nada en la aparición de la unidad de análisis en cuestión no se relaciona con ningún otro sistema de medida, como, por ejemplo, el tiempo. La ocurrencia es la dimensión más simple de lo observado. Orden En ocasiones, aparte de la ocurrencia, resulta imprescindible consignar el orden en el que aparecen unas conductas o unas categorías conductuales. Así, sabemos que en psicología existen relaciones estímulo-respuesta (E-R) o respuestaconsecuencias (R-C) y conducta-conducta (R-R) y, por tanto, puede ser necesario examinar la secuencia en que las conductas aparecen. Como señala Anguera (2003), el orden consiste en la explicitación de la secuencia de las distintas ocurrencias de conducta. Aporta un matiz importante a la ocurrencia dado que, en ocasiones, dos sesiones de observación podrían no diferir en la ocurrencia de aparición de conductas pero sí en el orden en que éstas aparecen. Frecuencia Fundamentalmente utilizada en el registro de conductas, clases de conducta e interacciones, la frecuencia hace referencia a la extensión en la cual un determinado evento ocurre en una unidad de tiempo. Por ejemplo, el número de veces que un escolar golpea a otro durante la jornada escolar, el número de botellas de vino que un alcohólico ingiere al día, el número de desobediencias de 4 A menudo, la frecuencia o tasa de aparición de una unidad de análisis es registrada a través de escalas adverbiales a las cuales se les asignan números (nunca = 0, rara vez = 1, a veces = 2, a menudo = 3, siempre = 4) con el fin de facilitar a los observadores —generalmente personas allegadas al sujeto, no expertas— la labor cuando se trata de tener informa- © Ediciones Pirámide / 199 un niño seguidas de atención de la madre. La frecuencia de un evento puede presentarse en números absolutos o según una tasa o porcentaje final. Es decir, podemos decir que una persona ha llegado tarde a su oficina 20 veces en un mes o decir que es impuntual el 90 por 100 de los días4. Este tipo de propiedad de las unidades de análisis presenta, como señala Kazdin (1981), una serie de características: en primer lugar, la frecuencia o tasa de aparición de un evento es una medida fácil de obtener cuando se trata de unidades bien definidas. En segundo lugar, la frecuencia suele reflejar, mejor que ningún otro parámetro, cambios a través del tiempo. Por último, la frecuencia expresa el montante total de eventos de un determinado tipo que han sucedido durante todo el tiempo que ha durado la observación. Duración En ocasiones, la frecuencia puede no ser suficiente o relevante a la hora de expresar, en toda su extensión, un determinado evento. El comportamiento humano se produce de forma temporalmente extensa y, a menudo, no es reducible a actos discretos. Es decir, frecuentemente no sólo interesa recabar datos sobre la frecuencia o el orden de una determinada conducta, sino también sobre su duración. Así, por ejemplo, con el fin de conocer cuán estudioso es un escolar, podemos registrar cuántas veces se dedica al estudio a la semana, o al día (frecuencia), pero tal vez sea más importante, en base a nuestro objetivo, conocer la duración de sus períodos de estudio. Como señalan Cone y Foster (1982), las propiedades temporales de un determinado evento pueden ser tres: 1. El intervalo entre el comienzo y el final de una determinada actividad. ción sobre eventos ya ocurridos de análisis bien definidos. En segundo lugar, la frecuencia suele reflejar, mejor que ningún otro parámetro, cambios a través del tiempo. Por último, la frecuencia expresa el montante total de eventos de un determinado tipo que han sucedido durante todo el tiempo que ha durado la observación. 200 / Evaluación psicológica. Conceptos, métodos y estudio de casos 2. El intervalo entre la presentación de un estímulo y el comienzo de una respuesta. 3. El intervalo entre las manifestaciones sucesivas observadas. La primera de estas posibilidades es la llamada propiamente duración, la segunda se refiere a la latencia de la respuesta y la tercera hace mención al intervalo interrespuesta. Cada una de estas propiedades temporales puede estar indicada preferentemente en relación con el tipo de unidad de observación elegido siempre y cuando el tiempo sea una propiedad importante en su investigación y cambio. Dimensiones cualitativas A veces, lo que puede interesarnos prioritariamente son los aspectos cualitativos de una determinada unidad de observación. Así, por ejemplo, puede ser necesario conocer no sólo la frecuencia con que un escolar estudia o el tiempo total que dedica a esta actividad, sino cómo ha rendido en el tiempo dedicado al estudio; este aspecto fundamentalmente cualitativo está en relación con la intensidad o magnitud con la que el sujeto se esfuerce en esas unidades temporales y con la adecuación de las actividades que realice durante los intervalos de tiempo dedicados al estudio. La medición de la intensidad, magnitud o adecuación de una unidad de observación puede realizarse de muy distintas formas. Así, la intensidad o magnitud de la agresión física puede estimarse mediante la magnitud del daño infligido al agredido. Así también, un profesor puede considerar que uno de sus escolares participa en mayor o menor medida del rasgo «extraversión» o le es más o menos aplicable el adjetivo «estudioso». En definitiva, como señala Carreras (1991), la intensidad es medida mediante categorías ordinales (escalas), las cuales evalúan el grado en el que se manifiesta una conducta. Con la medición de la adecuación de una conducta estamos haciendo referencia a su apropiación social o bien a su grado de funcionalidad, es decir, hasta qué punto una actividad consigue los objetivos propuestos. Este tipo de propiedad es frecuentemente medido a través de los aciertos o errores que el sujeto obtiene al ejecutar una tarea y, por tanto, son las características principales con que son valorados los tests de ejecución. En ocasiones el montante de adecuación asignado a una determinada respuesta depende de una dimensión tanto temporal (por ejemplo, tiempo empleado en resolver un problema) como cualitativa (por ejemplo, haber resuelto convenientemente la tarea), por lo que pueden, a veces, ser consideradas como dimensiones derivadas o secundarias. Pero esta forma de considerar las respuestas de un sujeto tan sólo es aplicable cuando se trata de observaciones sobre tareas que han de ejecutarse de una manera precisa y cuyo producto final es claramente correcto o incorrecto. No obstante, en muchas ocasiones la adecuación ha de ser considerada, como sucede en evaluación conductual, como un punto intermedio entre un continuo de exceso-defecto en el que se sitúa la conducta a examen. La valoración de lo que es excesivo o defectuoso plantea también distinciones cualitativas difíciles de dirimir, por lo que al establecerlas hay que tener en cuenta lo siguiente: la clase de conducta, las comparaciones intersujetos, las características del contexto social de referencia, así como la propia opinión del sujeto en evaluación y de las personas allegadas a él. También esta dimensión cualitativa es evaluada mediante escalas ordinales previamente construidas y por medio de comparaciones normativas. En resumen, hemos examinado las distintas unidades de observación que pueden ser utilizadas en evaluación: el continuo del comportamiento, los atributos que pueden inferirse de las conductas observadas, las conductas y categorías de conductas manifiestas, las interacciones que se producen entre el sujeto y el medio ambiente y los productos de conducta derivados de ejecuciones pasadas o presentes. Asimismo, hemos precisado cuáles son las propiedades de tales unidades de observación que permiten realizar una descripción cuantitativa de ellas. Conviene resaltar una vez más que de todas estas unidades de análisis © Ediciones Pirámide La observación las más características de la observación sistemática son las unidades conductuales e interactivas. No obstante, las restantes unidades de análisis (el continuo de conducta, los atributos y los productos de conducta) pueden ser importantes dependiendo del enfoque teórico del evaluador y de sus objetivos de evaluación. 3. TéCnICAS DE rEGISTrO (¿COn qUé OBSErVAr?) La estructuración del protocolo o del sistema de observación es una de las condiciones de la observación sistemática por cuanto permite la replicabilidad y el control de los resultados. Pero, hasta cierto punto, la sistematización de la observación depende del marco referencial teórico del observador. Evaluadores partidarios de los enfoques psicodinámico y constructivista suelen utilizar protocolos muy poco sistemáticos que permiten la descripción del continuo de conducta o la descripción mediante atributos de lo observado. Por el contrario, los observadores conductuales y los que desde una perspectiva diferencialista o médica utilizan productos de conducta emplean sistemas estructurados y estándar de observación en forma de códigos de categorías de conducta o de protocolos tipificados de recogida de datos. Por otra parte, el nivel de estructuración puede depender también de la fase en la que se efectúa la observación. Como señala Anguera (1981, 1990), la observación ha de realizarse mediante un plan en el que en un primer momento se efectúa una observación escasamente sistematizada, con el fin de estudiar la forma de operativizar el evento a observar, fundamentalmente cuando no existen códigos tipificados sobre el fenómeno objeto de examen. En estos casos suele comenzarse con una observación no sistemática con la que se trata de observar el continuo de la conducta con una observación prácticamente ad libitum. Una vez realizada esa observación, se procederá a seleccionar los eventos relevantes al objeto de la evaluación, que, en un segundo mo© Ediciones Pirámide / 201 mento, pasarán a ser observados de forma sistemática. En la misma línea que en el apartado anterior, en el que ordenábamos las unidades de observación en un continuo de molaridad-molecularidad, cabe ahora graduar los códigos o instrumentos de observación en un continuo de estructuración (véase cuadro 6.1). No obstante, cualquier clasificación que realicemos en base a esto será, hasta cierto punto al menos, arbitraria. La que proponemos es la siguiente: 1) registros narrativos; 2) escalas de apreciación; 3) protocolos observacionales de conducta; 4) códigos o sistemas de categorías; 5) valoración de productos de conducta, y 6) recogida de datos mediante dispositivos mecánicos. Veamos con cierto detenimiento cada uno de estos procedimientos de recogida de datos observacionales. 3.1. registros narrativos Etólogos, psicólogos sociales constructivistas, ecólogos y fenomenólogos suelen efectuar minuciosos registros narrativos de lo observado. Los evaluadores que realizan descripciones sobre lo observado suelen dejar constancia de sus observaciones mediante registros narrativos o descriptivos, de la misma manera que otros investigadores naturalistas. Tales registros presentan un formato flexible para permitir recoger muy diferentes características y modalidades de las actividades de los sujetos, y, por tanto, el protocolo que los sustenta no presenta especificidad más allá de la fecha de registro y las circunstancias generales de la sesión (tiempo, lugar, personas presentes y otras circunstancias potencialmente relevantes). En el cuadro 6.2 se presenta un buen ejemplo de un registro narrativo. Como en él puede apreciarse, no existe estructuración previa que dirija o articule la recogida de datos siguiendo un estilo textual. El observador se limita a tomar nota escrita u oral (a través de un magnetófono) de lo que va ocurriendo en la situación de observación. 202 / Evaluación psicológica. Conceptos, métodos y estudio de casos CUADRO 6.2 Ejemplo de un registro narrativo (modificado de Medinnus, 1979, p. 11) René dice repetidamente: «quiero un vaso de leche». Se da la vuelta al ver a su madre mientras le pide el vaso de leche. La madre va al frigorífico. Parece que va a abrir éste, pero no lo hace. Se dirige al lugar donde está Pedro. Se inclina cariñosamente hacia él y le da un beso en el cuello. Pedro le responde con una sonrisa, como si estuviera satisfecho de atraer la atención de su madre. Cone y Foster (1982) citan dos fuentes fundamentales de error que afectan a la fiabilidad de estos registros: 1. Los observadores pueden utilizar distintas descripciones verbales para una misma conducta o patrón de conductas. 2. De acuerdo con ello, puede llegar a categorizarse o a dar distinta significación a los mismos eventos. Estos tipos de error pueden controlarse en tanto en cuanto los observadores sean previamente entrenados en el uso de un mismo lenguaje descriptivo de las posibles actividades que vayan a producirse en el campo de observación. Como ya se ha señalado repetidamente, los registros narrativos se utilizan frecuentemente como paso previo a la elaboración de códigos estructurados tanto de catálogos de conducta como de sistemas de categorías o de interacciones. Por último, tales registros pueden ser también útiles cuando las conductas a examen presentan una baja frecuencia de aparición y han de ser, por tanto, registradas por observadores participantes. 3.2. Escalas de apreciación Basadas en técnicas escalares (rating scales), las escalas de apreciación, o estimación, son utili- zadas cuando se pretende la cuantificación, calificación o clasificación de las actividades de un sujeto según específicas definiciones conductuales, dimensiones o atributos de personalidad previamente establecidos. Existen distintos tipos de escalas de apreciación, aunque a través de todas ellas se pretende que el observador valore en una serie de unidades de medida (frecuencia, intensidad, apropiación) la unidad de análisis seleccionada. En definitiva, se trata de valorar en qué medida una determinada descripción es aplicable a un sujeto. Un ejemplo aparece en el cuadro 6.3. Las características comunes a todos estos tipos de escalas son las siguientes: 1. El observador realiza, o ha realizado, la observación en períodos amplios de tiempo y, generalmente, es un observador participante. Así, por ejemplo, una madre, tras la primera entrevista con el evaluador y una vez que éste le ha entregado y explicado las conductas presentes en un determinado protocolo, observa durante un tiempo especificado la conducta habitual de su hijo y, finalmente, valora la frecuencia de aparición de esas conductas problemáticas. 2. La información que se da sobre el sujeto se produce, generalmente, de forma diferida a la observación realizada aunque puede ser replicada en la actualidad. 3. Las descripciones conductuales que se utilizan pueden ser de muy variado tipo, dependen del marco referencial teórico del evaluador y oscilan en un continuo molaridad-molecularidad, en el nivel de inferencia que requieren y en los objetivos que se persiguen en la exploración. 4. Por último, conviene señalar que pueden utilizarse muy distintos descriptores o categorías. Así, pueden emplearse minuciosas descripciones de conducta, así como, también, los descriptores pueden ser atributos. Las escalas de apreciación son útiles a la hora de tener una primera aproximación cuantificada de la/s conducta/s problemática/s y adaptativa/s © Ediciones Pirámide La observación / 203 CUADRO 6.3 Ejemplo de Escala de apreciación Inventario Eyberg de conducta en niños para padres * Eyberg y Ross (1978) (diez primeros elementos) INSTRUCCIONES: éstas son frases que describen posibles conductas en niños. Por favor, rodee el número que describe cuán a menudo la conducta ocurre habitualmente en su hijo («nunca», «rara vez», «a veces», «a menudo», «siempre»). ¿A su hijo le sucede que...? 1. 2. 3. 4. 5. 6. 7. 8. 9. 10. Nunca Pierde tiempo en vestirse Pierde tiempo al comer Tiene malos modos en la mesa Rehúsa hacer lo que se le pide Rehúsa comer lo que se le pone Tarda en prepararse para ir a la cama Da guerra para ir a la cama a su hora No obedece las reglas de la casa Rehúsa obedecer hasta que se le castiga Se rebela cuando se le manda hacer algo Rara vez 1 1 1 1 1 1 1 1 1 1 2 2 2 2 2 2 2 2 2 2 3 3 3 3 3 3 3 3 3 3 A veces 4 4 4 4 4 4 4 4 4 4 A menudo 5 5 5 5 5 5 5 5 5 5 6 6 6 6 6 6 6 6 6 6 Siempre 7 7 7 7 7 7 7 7 7 7 * Adaptación experimental: Cátedra de Evaluación Psicológica. Universidad Autónoma de Madrid. de un sujeto, como también lo son otras opiniones que personas allegadas o jueces tengan sobre él. También son útiles a la hora de tener datos sobre la validación social de un determinado tratamiento; es decir, cuando se trata de conocer si una intervención psicológica ha surtido efectos según los agentes sociales (véase Kazdin, 1977, 1979). No obstante, el riesgo máximo de este tipo de registro observacional es que el evaluador se contamine con opiniones externas y se provoque un efecto halo que encauce, indebidamente, futuras observaciones. 3.3. Protocolos observacionales de conducta Los protocolos observacionales de conducta —también llamados listas de rasgos (Anguera, 1991)— contienen una serie bien especificada de conductas, encuadradas o no en clases y con o sin indicación de antecedentes o consecuentes ambientales de las mismas. En resumen, a través de © Ediciones Pirámide estos protocolos observacionales se tienen en cuenta conductas, clases de conductas y relaciones funcionales entre éstas y otros eventos ambientales. Dos son los más frecuentes protocolos observacionales: los registros de conductas, las matrices de interacción y los mapas de conducta. Veamos con cierto detenimiento estos dos tipos de instrumentos. 3.3.1. Registros de conductas Se trata de la agrupación de una serie de eventos conductuales bien definidos que se supone son relevantes al caso que se está estudiando, sin pretender ser exhaustivo en la observación. A la hora de desarrollar un registro de conductas, el procedimiento a seguir es el siguiente: 1. Selección de las unidades de análisis o conductas a observar y definición operativa de ellas. La selección y definición de las conductas objeto de observación se realiza en 204 / Evaluación psicológica. Conceptos, métodos y estudio de casos función de la demanda y los objetivos de la evaluación, tras una primera recogida de información (véase capítulo 2), en estrecha relación con el sujeto o cliente y allegados, pudiéndose complementar con una observación asistemática en la situación natural. 2. Decisión sobre unidades de medida o dimensiones o parámetros relevantes a las conductas eligidas. En general, lo que se pretende es constatar con qué ocurrencia o frecuencia aparecen las conductas (previamente especificadas). 3. Diseño del formato o protocolo de observación, que podrá conllevar especificación situacional y desde luego anotación de la fecha, lugar, intervalo de observación y cualquier otro particular relevante para esa observación. 4. Entrenamiento del/los observador/es, que, en algunos casos, podría/n ser no experto/s allegado/s al sujeto. En resumen, en este tipo de técnica se observan unas cuantas conductas previamente definidas como «conductas objetivo» que han sido escogidas y descritas por el evaluador en función del caso específico que se está explorando. Generalmente este tipo de registros se emplea en diseños de caso único y son construidos ad hoc para él, permitiendo la indicación situacional. En el cuadro 6.4 se presenta un Registro de conductas en el que se han inventariado una serie de conductas inadecuadas y adecuadas en el hogar junto con las situaciones de ocurrencia probable. La elección de unas y otras se ha realizado de acuerdo con las informaciones recogidas inicialmente de las entrevistas habidas con las personas allegadas a un niño de seis años sobre el que se consultaba por problemas de adaptación familiar. Estos protocolos tienen una serie de inconvenientes: 1. No puede tenerse constancia del exacto momento en el que la conducta se da, y ello influye en la dificultad de determinar la fiabilidad interjueces. 2. Resultan inviables cuando la/s conducta/s a examen presenta/n una alta frecuencia o cuando existen multitud de conductas a observar. 3. Cuando lo que ha de ser observado presenta muy baja frecuencia, existe el riesgo contrario, que el observador disminuya su atención (véanse Cone y Foster, 1982; Nay, 1979). A pesar de todos esos inconvenientes, en multitud de ocasiones la observación mediante estos protocolos puede resultar la única posibilidad que le queda al observador, que, tras un minucioso entrenamiento a allegados o con la utilización de expertos, puede lograr datos observacionales. 3.3.2. Matrices de interacción Tales procedimientos observacionales están dirigidos, exclusivamente, a la constatación de las interacciones que se producen entre el ambiente social y la conducta; es decir, de las relaciones funcionales antecedente-respuesta o respuesta-consecuente que se producen en la interacción de dos o más sujetos humanos. En el cuadro 6.5 presentamos un ejemplo de una matriz de interacción. En múltiples ocasiones se requiere no sólo la evaluación de un sujeto, sino la de las interacciones que se producen entre individuos o entre un individuo y un grupo. Así, por ejemplo, puede ser necesario el análisis de las interacciones que mantiene una pareja que consulta por problemas familiares o bien las relaciones que se dan entre un esquizofrénico y su familia o entre un niño y su maestra. Así también, es posible que nuestro objetivo resida en las interacciones sociales que se producen en un determinado ambiente (por ejemplo, en una institución). Es decir, dos son los objetivos de este tipo de códigos: 1) el de la constatación de las relaciones funcionales entre una/s conducta/s y sus contingencias, y 2) el estudio de las relaciones interpersonales que se mantienen en un determinado grupo social o ambiente. Haynes (1978) enumera las características fundamentales de este tipo de registro: © Ediciones Pirámide La observación / 205 CUADRO 6.4 Ejemplo de Registro de conductas* INSTRUCCIONES: como ha sido previamente explicado, cada día, a lo largo de una semana, se anotará una marca en la casilla correspondiente a las conductas que aparecen en la columna de la izquierda, tantas veces como ocurran por la mañana, al mediodía y por la tarde-noche, en las situaciones que figuran en la fila primera. Día: .................................................... Observador:.................................................................................................... Otras Al acostarse Viendo TV Al bañarse Cenando Deberes Jugando Otras Tarde-noche Deberes Juego Aseo Comiendo Otras Mediodía Va al colegio Desayunar Conductas Arreglarse Situaciones Levantarse Mañana No presta atención Discute No obedece Llora Pega Rompe algo Miente Se queja Parece triste Da órdenes Colabora Obedece Contesta bien Parece alegre Juega Otras positivas Otras negativas * Cátedra de Evaluación Psicológica. Universidad Autónoma de Madrid. 1. Requieren un menor esfuerzo por parte del observador que los códigos de categorías, ya que no se tienen que memorizar las abreviaturas correspondientes a cada categoría, y su descripción y las conductas a examen suelen ser más simples. © Ediciones Pirámide 2. Suponen un tipo de registro multiuso aplicable a distintas situaciones con sólo variar las conductas a examen. 3. El número de categorías de conducta que generalmente se incluyen es reducido. 4. Son fundamentalmente aplicables en el re- 206 / Evaluación psicológica. Conceptos, métodos y estudio de casos CUADRO 6.5 Ejemplo de Matriz de interacción de pareja (Haynes, 1978, p. 114) Día: .................................................... Observador:.................................................................................................... Mujer Verbalización positiva Verbalización negativa No respuesta Total Marido Alabanza Crítica Comentario neutro Total gistro de interacciones diádicas o triádicas; así, por ejemplo, son útiles en el análisis de las interacciones madre-hijo, marido-mujer, padre-madre-hijo. 5. La mayor dificultad estriba en la definición operacional de las conductas que se integran en cada una de las conductas listadas. En resumen, las ventajas que este tipo de matrices presentan decrecen en la medida en la que han de utilizarse muchas categorías de conducta o bien es necesario tener en cuenta largas cadenas de respuesta que impliquen a más de dos o tres personas. 3.3.3. Mapas de conducta Como señala Anguera (1987), un mapa de conducta (también llamado en algunos textos «formato de campo») consiste en un procedimiento de observación sistemática de conductas específicas que se sitúan en unas coordenadas espacio-temporales con el fin de someterlas a un análisis de las relaciones entre la conducta y variables ambientales. Como en el caso de las matrices de interacción, los mapas de conducta suponen una técnica observacional muy flexible que habrá de ajustarse a los objetivos de la evaluación. El procedimiento a seguir es el siguiente: 1) selección de las unidades de análisis u observación (qué tipo de comportamientos o categorías comportamentales van a ser observadas) según determinados parámetros o unidades de medida (por ejemplo, frecuencia), 2) selección de los lugares donde se va a observar (por ejemplo, el cuarto de estar y el comedor) y reproducción esquemática del lugar con las distintas condiciones físicas presentes en ellos; en definitiva se trata de establecer el «plano» del lugar de observación (como el que realizaría un arquitecto, que incluye el mobiliario), 3) diseño de protocolos: protocolo de observación y registro y hoja de resultados y representación gráfica, 4) muestreo de lugares y tiempos en la misma línea que veremos más adelante, y 5) entrenamiento de los observadores. Con el fin de evaluar las relaciones entre el ambiente y la conducta, Fernández-Ballesteros et al. (1995) han desarrollado el MICA (Mapa de interacción conducta ambiente), que es un procedimiento de observación en residencias de ancianos. En la figura 6.1 se presenta un mapa de conducta en el que aparecen el número de individuos promedio de un concreto lugar (una sala de estar de una residencia), áreas existentes en ese lugar (configuradas por los grupos de sofás y sillones) y las categorías comportamentales observadas: «nivel de ocupación», «interacción», «actividad a solas», «no actividad» en su aparición en porcentajes. © Ediciones Pirámide 26 a 50 más de 50 0 hasta 25 Signos % La observación Nivel ocupación Interacción Actividad indiv. No actividad Nivel ocupación Interacción Actividad indiv. No actividad Nivel ocupación Interacción Nivel ocupación Actividad indiv. Interacción No actividad Actividad indiv. No actividad Nivel ocupación Nivel ocupación Interacción Interacción Actividad indiv. Actividad indiv. No actividad No actividad Figura 6.1.—Ejemplo de un mapa de conducta prodecente del MICA (Fernández-Ballesteros, 1996). © Ediciones Pirámide / 207 208 / 3.4. Evaluación psicológica. Conceptos, métodos y estudio de casos Códigos o sistemas de categorías Los procedimientos observacionales más sofisticados son los llamados códigos o sistemas de categorías o esquemas de codificación (Bakeman y Gottman, 1986; Anguera, 1991), cuyo «andamiaje proporciona soporte y cobertura a aquellas conductas que, mediante la correspondiente operación de filtrado, son consideradas relevantes de acuerdo con los objetivos de la investigación» (Anguera, 1991, p. 116). En definitiva, los códigos de categorías conllevan la denominación, delimitación y definición de categorías de los eventos conductuales y/o contextuales que se pretende observar y articulan y regulan cómo se va a llevar a cabo la observación. Así, estos procedimientos de observación comportan un largo proceso y sofisticadas elaboraciones para su construcción. El evaluador no suele plantearse construir un sistema de categorías para la observación de un solo sujeto (su cliente). Por ello, nuestro objetivo aquí no es el de suministrar información sobre cómo construir un código de categorías (para una revisión, véase Anguera, 1990, 1991), sino, simplemente, describirlo; es decir, existen códigos de categorías de conducta o interacciones que son estándar y están tipificados y que, por tanto, presentan las garantías de rigor necesarias para su utilización. A título de ejemplo en el cuadro 6.6 presentamos un extracto del Código observación estandarizado (SOC) para la evaluación de problemas de conducta en niños de Whaler, House y CUADRO 6.6 Ejemplo de Código de categorías. Código de observación estandarizado (SOC-III) para la evaluación de problemas de conducta en niños (extracto) (Whaler, House y Stambaugh, 1976) Definición de categorías Categorías del estímulo I+ I– S S– Instrucción positiva: órdenes directas o indirectas (fórmulas de cortesía). La orden debe ser específica y tener un referente concreto. Debe poder ser cumplida inmediatamente. Sólo puede ser registrada una orden. La instrucción se considera negativa, ya sea por el contenido (amenazas), el tono de voz (gritos) o la conducta del que habla (golpear, gestos amenazantes, etc.). Atención social positiva: cualquier intento de contacto físico con el sujeto, verbalizaciones o contacto visual que implique aceptación y reconocimiento (sonrisas, etc.). La atención social se considera negativa en razón del tono de voz, contenido o conducta del que habla. La atención social puede proceder de adultos (Sa) o niños (Sn). Categorías de conducta Cumplimiento C O O– Q Cumplimiento de una orden específica dirigida al sujeto. Oposición: no cumplimiento de reglas o instrucciones de adultos, sean permanentes o temporales. La oposición se considera negativa por el tono de voz, contenido o conducta del sujeto. Quejas, lloros, lloriqueos, protestas audibles, muestras de genio (tirar objetos, rabietas, etc.). Trabajo ES TS AS Trabajo sostenido en tareas escolares. Otras formas de atención (excepto leer) se consideran AS. Puede combinarse con IS (discusión académica). Trabajo sostenido en tareas no académicas (ayudar en tareas de la casa, actividades de aseo, etc.). Atención sostenida: el sujeto mira objetos, gente o actividades de modo activo, no autista (NI). © Ediciones Pirámide La observación CUADRO 6.6 / 209 (continuación) Definición de categorías Conducta social A M IS Aproximación social: cualquier contacto físico o verbal espontáneo iniciado por el sujeto. Si se prolonga durante más de un intervalo se considera IS. No se computa si el contacto es iniciado por otro. Puede referirse a adultos (A) o a niños (An). El sujeto da órdenes a otro u otros. Puede referirse a adultos (Ma) o a niños (Mn). Interacción social: interacción del sujeto con otra persona, ya sea adulto (ISa) o niño (ISn). Se computa junto con una categoría de estímulo (I o S). Si es iniciada por el sujeto, se computa AS en el primer intervalo e IS en los siguientes. Juego JS Juego sostenido con juguetes utilizados de modo apropiado. Conductas autistas S JO NI H IN OBS Autoestimulación: el sujeto manipula su cuerpo o lleva a cabo movimientos repetitivos (tres o más veces de modo idéntico en un intervalo de 10”). Es incompatible con JS, A o IS. Juegos con objetos: simple manipulación repetitiva de un objeto que no es parte de una actividad más compleja (por ejemplo, JS). Se entiende por repetitiva que se dé tres o más veces de idéntico modo en un intervalo de 10”. No interacción: el sujeto no interactúa con otras personas u objetos durante un intervalo completo de 10”. Es compatible con JO, S, O, C y H. Hablar a sí mismo: verbalizaciones inteligibles no dirigidas a otras personas. Incompatible: la respuesta del sujeto no puede incluirse en ninguna de las categorías anteriormente señaladas (por ejemplo, comer, beber...). Hablar a sí mismo: verbalizaciones inteligibles no dirigidas a otras personas. Incompatible: la respuesta del sujeto no puede incluirse en ninguna de las categorías anteriormente señaladas (por ejemplo: comer, beber...). Obstrucción: el observador no puede registrar la conducta del sujeto por haber perdido el contacto visual con él. Es incompatible con todas las demás categorías. Stambaugh (1976), del cual existe una tercera generación (SOC-III) en castellano desarrollada por Cerezo (1991, 20015). En este cuadro se presenta la definición inicial de categorías utilizadas, tanto comportamentales como estimulares, así como la hoja de registro, en la que aparecen los intervalos temporales de observación. En todo caso, la utilización de este u otro código requiere la consulta del correspondiente manual. Resulta imposible referirse a todos los códigos de categorías disponibles, por lo que el lector in- teresado deberá consultar los catálogos de instrumentos de evaluación del ETS (1991) (Hersen y Bellack, 1988, 2002). Según Haynes (1979), las ventajas de los códigos de categorías de conducta son las siguientes: 5 Este código se encuentra en Internet y en CD: M. A. Cerezo (2001). Interacción familiar: Un sistema de evaluación observa- cional SOC III, Valencia: Publicacions de la Universitat de Valencia, www.uv.es/publications. © Ediciones Pirámide 1. Permiten un limitado pero amplio número de actividades a observar. 2. Proveen de información sobre conductas y/o interacciones complejas. 210 / Evaluación psicológica. Conceptos, métodos y estudio de casos CUADRO 6.7 Protocolo de registro* Día: .................................................... Observador:.................................................................................................... Categorías conductuales Estímulo Intervalo C O O– Q ES TS AS A M Ma Mn IS JS S JO NI H IN OBS I+ I– Sa+ Sa– Sn+ Sn– 1 2 3 4 5 . . N * Se presenta en un formato que deberá ser completado con el número de intervalos de observación (véase epígrafe 4.1). 3. Permiten la comparabilidad entre sujetos e investigaciones. 4. Simplifican el trabajo de observación, ya que el entrenamiento en el código puede servir a más de un caso. 5. Al ser un procedimiento estándar, suelen presentar garantías científicas. 3.5. registro de productos de conducta Ya se ha dicho, al describir las unidades de análisis utilizadas en los métodos observacionales, que los dos grandes grupos son los datos observacionales no reactivos y los resultados de ejecuciones en situaciones naturales o artificiales. Ambos tipos de observaciones conllevan, en su mayor parte, el registro de medidas físicas tales como: metros cuadrados de césped destruido, kilos de desecho recogidos, número de botellas de alcohol consumidas por un alcohólico, número de cartas escritas por una mecanógrafa, etc. Parece obvio que estos datos no requieren protocolos especiales sino tan sólo preparar al efecto una hoja de reco- gida de información en la que aparezcan las condiciones generales bajo las cuales se registran esos productos: día, hora, lugar, situación, etc. Sin embargo, otros productos humanos requieren no sólo medidas físicas sino de la valoración de la calidad del producto resultado de la actividad humana. Ello conlleva conocimientos que superan la pura observación y se refieren al conocimiento del objeto producido, lo cual sobrepasa, también, los límites de esta obra. 3.6. Procedimientos automáticos de registro En el intento de convertir la observación en un método de máximas garantías de rigor científico se han construido dispositivos automáticos de registro que facilitan la tarea del observador, descontaminando la actividad de los sesgos que ocasionan las anotaciones del propio observador, así como tratando de paliar los efectos de la reactividad de los sujetos observados. Tales procedimientos pueden dividirse en tres grandes grupos: © Ediciones Pirámide La observación 1. Medios técnicos de registro auxiliares del observador. 2. Aparatos de registro a distancia que disminuyen la reactividad de los sujetos observados. 3. Técnicas de amplificación de la respuesta que permiten la medición de comportamientos encubiertos, privados o poco accesibles. 3.6.1. Medios técnicos de registro Existen múltiples métodos mecánicos y electrónicos de registro que han sido descritos por Anguera (1981, 1991). En los últimos años se han incrementado las posibilidades de registro de eventos (comportamientos, categorías de conducta, etc.), e, incluso, las modernas agendas electrónicas, relojes electrónicos de función y teléfonos móviles permiten el registro de cualquier observación. Aparte de estos medios generales existen procedimientos desarrollados para la observación (que, además, se ven complementados con otras utilidades como la autoobservación y autorregistro, así como el registro de respuestas fisiológicas) en situaciones naturales como el AMBU (Fahrenberg, 2003). Todos estos medios técnicos permiten registrar automáticamente eventos de conducta a través de categorías previamente establecidas cuyos datos, también, pueden ser cargados en una computadora de modo que se realicen fácilmente análisis de los parámetros introducidos (ocurrencia, duración, frecuencia, secuencia, simultaneidad, etc.) de las conductas a examen. La ventaja de tales procedimientos es la de minimizar, como es lógico, algunos de los sesgos procedentes del observador entrenado en su manejo incrementando la exactitud de lo observado. 3.6.2. Aparatos de registro a distancia u ocultos En los últimos años, y con el fin de maximizar la validez externa de los datos obtenidos en el © Ediciones Pirámide / 211 laboratorio, han sido elaborados procedimientos de telemetría que abarcan el registro de respuestas fisiológicas, así como ciertas conductas motoras. Los dispositivos telemétricos constan de un transductor y un radiotransmisor que lleva el sujeto y que permite el registro de determinadas respuestas a distancia. En el capítulo siguiente, dedicado a las técnicas objetivas, nos detendremos en estos procedimientos. Por otra parte, con vistas a disminuir la reactividad de los sujetos producida por la presencia del observador, se utilizan, cada vez con mayor frecuencia, procedimientos tales como el magnetófono, el videotape o los espejos unidireccionales. Parece que estos dispositivos de registro u observación son una excelente opción para minimizar este sesgo y los datos recogidos por su mediación no difieren significativamente de lo anotado por el observador presente (Kent, O’Leary, Dietz y Diarnent, 1979), además de que favorecen la naturalidad de la conducta. Sin embargo, razones éticas desaconsejan la utilización de tales procedimientos sin la debida autorización del sujeto observado; por tanto, para su empleo se requiere el consentimiento informado del sujeto en examen o bien de sus representates legales. 3.6.3. Observación mediante aparatos La conducta también puede ser registrada a través de procedimientos mecánicos, eléctricos o electrónicos de forma que el observador humano es sustituido, casi totalmente, por un aparato. Estas técnicas de observación van a ser tratadas en el capítulo 8 («Otras técnicas: objetivas y proyectivas»). Tan sólo decir que tanto los registros psicofisiológicos como los dispositivos de registro de la conducta motora y los aparatos de medida de productos de conducta suponen técnicas objetivas de registro. En definitiva, todos estos procedimientos amplifican las respuestas fisiológicas, esqueléticas, motoras o cognitivas y permiten su registro. Su importancia exige dedicar a ellos todo un capítulo. Para terminar este apartado, parece conveniente resaltar que a la hora de elegir una técnica 212 / Evaluación psicológica. Conceptos, métodos y estudio de casos de registro observacional ha de tenerse en cuenta lo siguiente: 1. 2. 3. 4. 5. La complejidad y especificidad del problema a examen. Cuanto más compleja y menos especificada sea la unidad a observar, menos estructuración inicial deberá tener la técnica de observación seleccionada y, por tanto, mayor grado de planificación se exigirá al evaluador. En el caso de tratarse de eventos bien definidos y en escaso número, conviene utilizar catálogos de conducta construidos al efecto. Cuando el problema se defina como primariamente interactivo (de pareja, de familia), deberán ser elegidas matrices o códigos de interacción. Cuando se trata de examinar complejos problemas, bien especificados, sobre los que existan códigos de categorías conductuales —en los que estén presentes todas las manifestaciones del caso—, deberán ser elegidas estas técnicas prioritariamente. Siempre que sea posible, deberán ser utilizados dispositivos automáticos, objetivos y/u ocultos de registro, salvaguardando las cuestiones éticas antes mencionadas. En una primera aproximación al caso, amén de cuando no sean posibles otros tipos de observación, deben utilizarse registros narrativos o escalas de apreciación cumplimentadas por personas allegadas al sujeto. 4. MUESTrEO (¿CUánDO Y/O A qUIén OBSErVAr?) Los eventos conductuales ocurren en un tiempo y una situación determinados; de ahí que una de las tareas que ha de emprender el observador sea establecer no sólo qué observar, sino cuándo y cómo ha de hacerlo. Además, los agentes de esos eventos pueden ser más de uno, por lo que en esos casos deberemos planificar a quién observar. Lo que tratamos con todo ello es de obtener muestras significativas y representativas de los eventos observados, según las unidades de medida (ocurrencia, frecuencia, duración, etc.) previamente seleccionadas. Hemos dicho que los registros narrativos recogen el continuo de la conducta tal y como se produce en su ambiente natural. En estos casos, el observador registra todo lo que es capaz de observar, de lo que ocurre, en tiempo real. Tales registros, a pesar de presentar una serie de ventajas ya comentadas, resultan en muchas ocasiones inviables. Por otra parte, en las escalas de apreciación y protocolos de conducta tan sólo se tiene en cuenta si la/s conducta/s a examen previamente especificada/s ocurre/n o han ocurrido, o no, en un período total de tiempo establecido de antemano. Ya se han comentado las dificultades de ese tipo de técnica junto con su utilidad. En resumen, es muy difícil para un observador humano prolongar una observación atenta durante períodos extensos de tiempo, y esto por la fatiga que ello acarrea. Es aún más difícil anotar la conducta que aparece y, al mismo tiempo, seguir observando la aparición de esa u otra conducta presente en el protocolo. Además, la privacidad de ciertos eventos impide el seguimiento temporalmente extenso del continuo del comportamiento. Y eso no es todo: en ocasiones el objetivo de la observación se centra en actividades realizadas por un grupo de sujetos, resultando más difícil aún recoger las actividades de todos los sujetos presentes a los que se desea observar. Por último, la observación conlleva costes importantes, por lo que limitar el tiempo de observación repercute de inmediato en la disminución de tales costes. Todas estas limitaciones y dificultades de la observación continua han llevado a la necesidad de utilizar procedimientos de muestreo. Como hemos dicho, el objetivo de tales procedimientos es el de obtener muestras representativas de los eventos objeto de estudio. Veamos la cuestión (véase también Quera, 1991). Cuando un evaluador decide utilizar la observación y no es factible u operativo realizar regis© Ediciones Pirámide La observación tros continuos, ha de tomar decisiones importantes que implican el tiempo de la observación. Así, debe plantearse: 1. 2. 3. 4. 5. 6. Durante cuánto tiempo se va a prolongar la observación. Por ejemplo, durante un día, una semana, un mes, etc. Con qué frecuencia va a observarse. Por ejemplo, durante una hora diaria o durante x períodos de 15 minutos diarios. En qué momentos se van a iniciar y terminar los períodos de observación y si éstos van a ser constantes o van a variar en cada unidad de observación. Por ejemplo, si cada día se va a elegir un período constante, por ejemplo de 10 a 10.30 h de la mañana, o si se va a variar éste, observando el primer día de 10 a 10.30, el segundo de 10.30 a 11, y así sucesivamente según una razón fija o variable. Si se van a utilizar intervalos de tiempo para la observación y el registro dividiendo así los períodos de observación. Así, por ejemplo, se va a observar durante 10 segundos y se va a registrar lo observado durante los 5 segundos siguientes. Si se pretende tener constancia de lo que ocurre en distintas situaciones, habrá que decidir en cuál/es de ella/s se va a realizar la observación; estos aspectos situacionales de la observación se entremezclan con los temporales. Por ejemplo, puede desearse conocer las desobediencias de un niño en la casa, en el aula, en el recreo, etc. Por último, ya se ha dicho que a veces el sujeto en evaluación puede ser uno o varios. Por tanto, si se trata de observar a un sujeto o a varios presentes en un grupo habrá de seleccionarse a qué sujeto y en qué momento el observador registrará la conducta objeto de estudio. Por ejemplo, en un grupo de escolares sentados en sus pupitres podría elegirse para observar a uno de cada cinco niños siguiendo el orden de fila, y éstos ser observados en intervalos temporales correlativos. © Ediciones Pirámide / 213 Todas estas decisiones implican diferentes clases de muestreo clasificables en tres tipos fundamentales: 1) muestreo de tiempo, 2) muestreo de situaciones y 3) muestreo de sujetos. 4.1. Muestreo de tiempo La observación comprende una serie de tiempos: 1. Durante cuánto tiempo va a observarse. 2. Cuántas sesiones van a realizarse. 3. Con qué periodicidad. 4. Con qué intervalos observación/registro (en su caso). Estas cuatro decisiones suelen adoptarse según criterios racionales en función de los objetivos de la observación y de la disponibilidad del/los sujeto/s. Así, para adoptar decisiones al respecto habrá de tenerse en cuenta lo siguiente: el tipo de eventos a registrar, su complejidad y número, la frecuencia y duración con que se supone ocurren y el tipo de unidad de medida o dimensiones de la/s respuesta/s elegida/s. Hemos de tener en cuenta que los eventos finalmente observados en un sujeto, en los períodos de tiempo establecidos, se supone van a ser representativos de lo que le ocurre a ese sujeto durante el tiempo total en el que se realiza la observación. En el caso de que no tengamos suficientes datos para fijar tentativamente la duración y frecuencia de la observación, es aconsejable realizar unos períodos de pre-observación asistemática que nos permitan recoger datos para llegar a la delimitación, con conocimiento de causa, de los períodos de observación y la extensión en la que se va a realizar ésta. En todo caso, como señala Haynes (1978), hay que partir del supuesto de que la relación entre el total de la observación efectuada y la información obtenida es una función positivamente decreciente. Así, por ejemplo, si nos consultan sobre un niño de siete años, JM, que presenta muy diversas y frecuentes conductas perturbadoras en la clase, 214 / Evaluación psicológica. Conceptos, métodos y estudio de casos podemos decidir observarle durante dos semanas. En segundo lugar, y dado que la maestra no es capaz de diferenciar si tales conductas se incrementan o decrecen en distintos períodos de tiempo, podemos tomar la decisión de observar al niño durante dos períodos diarios de 20 minutos. En tercer lugar, debemos decidir si esos intervalos van a distribuirse aleatoriamente o con cierta regularidad; decidimos observar al comienzo de cada hora alternando los períodos mañana y tarde y variando sistemáticamente, cada día, el momento de la observación. Así, el primer día observaremos de 10 a 10.20 h y de 3 a 3.20 h, el segundo día de 11 a 11.20 h y de 4 a 4.20 h, y así sucesivamente amoldándonos al horario escolar y retornando cuantas veces fueran necesarias a los períodos iniciales de observación en función de la extensión en la que se realiza ésta. Todo ello se plantea con el fin de obtener muestras de conducta a todo lo largo de la jornada escolar. En base a otros objetivos podrían seleccionarse otros horarios de observación. Hasta aquí nos hemos referido a los períodos de observación, pero, en ocasiones, cuando estamos observando con complejos sistemas de observación, nos encontramos con un cuarto tipo de tiempo: observación/registro. En otras palabras, si el comportamiento objeto de estudio es muy frecuente, teniendo en cuenta que no se puede observar y registrar al mismo tiempo, habrá que dividir en dos el tiempo; durante el primer intervalo el evaluador observa los eventos objeto de estudio y durante el segundo los registra. Asimismo, en ocasiones, cuando los períodos de observación son especialmente largos, pueden establecerse intervalos de descanso. En definitiva, habremos de programar una secuencia que podría ser como sigue: Obs. 1 Reg. 1 10,1 5” Comienzo 10 h Obs. 2 10,1 Reg. 2 5” Obs. n 10,1 Reg. n 5” Fin 10,20 h En un período de observación de 20 minutos y con períodos de 10 segundos de observación y 5 segundos de registro, contabilizaremos 80 intervalos de observación-registro. Lo registrado, en el total de períodos de observación, será generalizado al total del tiempo observado. Powell, Martindale y Kulp (1975) han establecido tres estrategias a la hora de realizar muestreos de intervalos: de intervalo total, de intervalo parcial y momentáneo. Muestrear un intervalo total implica que la conducta no se registra si no se produce en el total del intervalo fijado. Por lo que se refiere al registro en intervalo parcial, el observador debe anotar toda conducta que ocurre en una fracción del intervalo de observación. Por último, utilizar muestras momentáneas quiere decir que tan sólo se registran conductas que aparecen en un momento predeterminado del intervalo de observación (al comienzo o al final de éste). Existen procedimientos mecánicos que auxilian en la observación de intervalos, desde un reloj provisto de un avisador programable en intervalos regulares hasta complicados dispositivos electrónicos. La mayor parte de estos dispositivos perturba, por su sonido audible, no sólo a los observadores, sino también a los sujetos observados. Por esta razón, aconsejamos la utilización bien de dispositivos que tengan avisadores no audibles, bien de un magnetófono provisto de auricular que avise al observador, discretamente, de los períodos de observación y de registro. Al utilizar estos dispositivos, y con el fin de comprobar la fiabilidad interjueces, debe recurrirse bien a un aparato que permita dos auriculares, bien a dos que permitan una simultaneidad perfecta en la emisión. Existen múltiples estudios (véase, por ejemplo, Quera, 1991) en los que se discute y aporta evidencia empírica sobre las distintas alternativas de muestreo del tiempo. Como señalan Johnston y Pennypacker (1980), no existen prescripciones o fórmulas a la hora de fijar el tiempo de observación, «la decisión de cuán frecuentemente o durante cuánto tiempo ha de observarse debe ser tomada sólo por estrategias racionales y no por reglas de procedimiento» (p. 151). Ha de tenerse en cuenta que cuanto más tiempo se observe, más posibilidades existen de tener observación generalizable; no obstante, este ideal habrá de ser compatible con el incremento de costo que un mayor tiempo de observación implica. © Ediciones Pirámide La observación CUADRO 6.8 Hoja de planificación de tiempos de observación Tiempos Duración Sesiones Períodos Intervalos Ejemplos Una semana (siete días). Tres sesiones diarias de diez minutos (mañana, mediodía, tarde/noche). 10.00, 14.00, 21.00 horas variando cada día media hora Diez s de observación, 5 de registro, 5 de descanso. Tratando de hacer una brevísima y simplista síntesis que oriente al alumno, a un nivel elemental, podemos resumir lo siguiente: La duración de la observación deberá ser inversamente proporcional a la frecuencia del evento observado. Una extensión de una a dos semanas de observación parece ser adecuada en el caso de que los eventos objeto de estudio sean de media ocurrencia. Por lo que se refiere a las sesiones de observación, éstas deben depender no sólo del tipo de eventos a registrar, sino también de la complejidad del instrumento de registro utilizado. Parece que con instrumentos en los que figuren de 20 a 30 categorías pueden obtenerse datos fiables y válidos con tres o cuatro sesiones diarias de 10 a 30 minutos de duración (Haynes, 1978). La cuestión sobre en qué períodos observar depende, totalmente, del caso de evaluación y, concretamente, de las situaciones en las que la/s conducta/s objeto de estudio aparece/n. En el cuadro 5.8 hemos hipotetizado, para tres sesiones diarias de 10 minutos, comenzar a las 10.00, 14.00 y 21.00 el primer día e ir variando en 30 minutos cada día hasta la semana programada. En relación con la utilización de intervalos de observación y registro, con muestras de intervalo parcial, éstos no deben exceder de 10 segundos de observación. Con estrategias de intervalo total, un tiempo de 5 segundos puede considerarse adecuado. Con respecto a las muestras momentáneas, los tiempos de observación pueden ser mu© Ediciones Pirámide / 215 cho mayores, hasta llegar a un minuto (Powell, Martindale, Kulp, Martindale y Bauman, 1977). Green et al. (1982) han llegado a establecer empíricamente que esta última estrategia permite recoger muestras de mayor representatividad y provoca menores errores por parte de los observadores que el procedimiento de intervalo total y parcial. 4.2. Muestreo de situaciones Con el fin de comprobar la generalidad de las conductas objeto de estudio o su especificidad y, en definitiva, el universo de generalización de las situaciones (véase capítulo 4), en ocasiones, han de utilizarse procedimientos de muestreo de situaciones. Esto ocurre fundamentalmente cuando se asume que el comportamiento varía en función de los estímulos externos y de sus propiedades funcionales. Pero también, desde otras perspectivas, será útil comprobar en qué medida determinados comportamientos son estables a través de distintas situaciones o, por el contrario, dependientes de ellas. Vamos a suponer que en el caso propuesto en el capítulo 2 las conductas desajustadas de JM no se limitan a la situación escolar (el aula), sino que también presenta conductas perturbadoras en la casa, en situaciones de recreo y en el comedor escolar. Parece que en este caso las conductas problema, por las que se consulta, se extienden a muy distintas situaciones. En este caso, se trataría de obtener muestras de tales conductas que fueran representativas no sólo de tales eventos objeto de estudio, sino también de lo que ocurre en las situaciones en que éstos se producen. En el caso de observar a JM tan sólo en el colegio, no podremos obtener datos de las condiciones que mantienen y controlan tales conductas en otras situaciones ni tampoco con qué intensidad, duración o frecuencia se presentan éstas diferencialmente y, por tanto, no podríamos realizar las orientaciones o tratamientos pertinentes. En este caso, deberemos establecer un listado de todas las situaciones posibles, muestreando éstas —además del tiempo— con el fin de obtener muestras de conducta representativas de todas ellas. 216 / Evaluación psicológica. Conceptos, métodos y estudio de casos Todas estas decisiones tomadas con el objetivo de evaluar a un sujeto son también necesarias en otros múltiples casos. Así puede resultar de interés el análisis de las relaciones ambiente-conducta. Por ejemplo, Fernández-Ballesteros et al. (1982, 1987) muestrearon todos los ambientes de una residencia de ancianos en base a los objetivos funcionales de los locales (salas de recreo, corredores, comedores, etc.) y su localización espacial con el fin de obtener la frecuencia de conductas pasivas, activas e interactivas que sus habitantes mostraban en cada ambiente-tipo. En definitiva, el muestreo de situaciones ha de realizarse en función de los objetivos de la investigación de que se trate y, por tanto, basándonos en criterios racionales. 4.3. Muestreo de sujetos Supongamos que nuestro objetivo de observación no está relacionado con las actividades de un solo sujeto (o sus interacciones) sino de un grupo de individuos. Evidentemente, el muestreo de los sujetos estará en íntima relación con los restantes tipos de muestreo. Así, será difícilmente compatible utilizar el registro de eventos cuando se trata de observar a más de dos sujetos a no ser que el número de conductas a observar sea muy escaso y permita dedicar atención a todos los sujetos presentes y anotar si las conductas o interacciones a examen se dan o no. Las dificultades que obviamente se producen en estos casos hacen aconsejable y preferible utilizar muestreo de intervalos y de sujetos simultáneamente; es decir, que en el primer intervalo se observa al primer sujeto, en el segundo al segundo, y así sucesivamente. Cuatro son las posibilidades propuestas por los autores (véanse Anguera, 1981; Haynes, 1978): 1. gidos en función de los intervalos establecidos. Así, por ejemplo, el sujeto número uno será observado en el primer intervalo, el dos en el segundo, y así sucesivamente. 2. Selección de intervalos de observación en función del número de sujetos a observar. Ello puede estar indicando en el caso de que no sea necesario muestrear por tratarse de pocos sujetos, procediéndose entonces por rotación, asignando cada intervalo a cada uno de los sujetos de observación. 3. Elegir un criterio de razón fija o variable ordenando así a los sujetos que serán observados tantas veces como sea posible en función del número de intervalos y del período total de observación. Así, por ejemplo, se observa al sujeto 1, 5, 10, 15, 20, 25, 30, 35, ..., n, en los intervalos 1, 2, 3, ..., n. 4. Rotar el criterio de elección de los sujetos a observar de forma que después del período de observación se haya recogido información de todos ellos. Así, por ejemplo, en la primera ronda pueden ser observados los sujetos pares y en la segunda ronda los impares, y así sucesivamente. Selección localizada de individuos. Es decir, elección de los sujetos a observar al azar o de forma aleatoria estratificada (en función de su sexo, edad o cualquier otro criterio conductual). Observación de los sujetos ele- Todas estas posibilidades de muestreo de sujetos son aplicables tanto si se pretende observar conductas de sujetos como si las unidades de observación son interacciones entre parejas de sujetos. En resumen, será necesario muestrear los sujetos en tanto en cuanto se desee observar a un menor número del total de individuos de los que se quiera tener información. El evaluador deberá tratar de realizar un muestreo suficiente con el fin de poder garantizar la generalizabilidad de los resultados procedentes de los sujetos observados al conjunto de sujetos que componen la población objeto de interés. 5. LUGAr DE LA OBSErVACIón (¿DónDE OBSErVAr?) En líneas generales, cuando se habla de observación sistemática se está haciendo referencia a © Ediciones Pirámide La observación aquella que se produce en la situación natural. No cabe duda de que el objeto prioritario del método observacional es el de recoger datos sobre la conducta en el lugar habitual donde ésta ocurre (Anguera, 1978, 1991, 2003b). No obstante, la observación natural resulta en ocasiones imposible (por razones que luego veremos); en estos casos, en lugar de renunciar a ella, puede optarse por utilizar técnicas observacionales (muchas veces pueden ser incluso las mismas) en situaciones controladas de laboratorio también llamadas situaciones análogas. Conviene resaltar de entrada que existe un continuo de naturalidad (Cairns, 1979) en el que podría situarse cualquier tipo de observación, por lo cual resulta hasta cierto punto artificial establecer una clasificación dicotómica natural-artificial. Como señala Nay (1979), la «verdadera» observación natural, consonante con el concepto de validez ecológica sería aquella en que el fenómeno observado ocurre en el contexto natural sin que el observador esté presente. Y es que la observación en ambiente natural se artificializa desde el mismo momento en el que el observador se introduce —con conocimiento por parte de los sujetos observados— en el contexto de observación, produciendo una importante fuente de error, la reactividad, presente en casi todo tipo de observación, si eliminamos las llamadas «medidas no reactivas» a las que nos hemos referido en distintas ocasiones. A pesar de todos estos problemas que impiden conceptualizar inequívocamente «lo natural», en este apartado va a seguirse la clásica distinción entre la observación en situaciones naturales y artificiales. 5.1. Observación en situaciones naturales Como se sabe, en psicología se han criticado ampliamente las posibilidades de generalización de los datos procedentes del laboratorio propios de la investigación experimental. No vamos a extendernos en ello porque corresponde a otras disciplinas metodológicas. Sí conviene recordar que hoy en día se está haciendo especial hincapié © Ediciones Pirámide / 217 en la validez ecológica de los hallazgos psicológicos, por lo cual prima la validez externa (generalización de resultados) sobre la interna (control experimental). Todo esto es importante por cuanto justifica la importancia que, en los últimos años, está teniendo la observación en situaciones naturales en evaluación. La observación natural puede definirse como aquella que se realiza en el ambiente ordinario en el que se desenvuelve el sujeto sin que se produzca ningún tipo de mediación del evaluador en provocar las actividades objeto de estudio; en definitiva, como señalábamos en la introducción a este capítulo, una de las características esenciales de la observación es que no se elicitan las respuestas que se observan. Así, cualquier manipulación provocada por el observador que ocurre en la situación de observación debería ser considerada como una intromisión por parte de éste, por lo que la observación sería ya «artificial». Haynes y Wilson (1979) se refieren a los contextos naturales en los que más frecuentemente se utiliza la observación. Así, para situaciones familiares se han creado los más variados procedimientos de observación sistemática. Por ejemplo, se han evaluado conductas maternas o/y paternas (enseñanza en los hábitos de higiene u otras conductas adaptativas, conductas de cuidado, afectivas, etc.), manifestaciones adecuadas o inadecuadas en los hijos (conductas agresivas, de desobediencia, relacionadas con trastornos, etc.) e interacciones padre/s-hijo/s. De entre todos ellos conviene destacar dos códigos observacionales. El primero de ellos, el Sistema de codificación de conducta (Behavior Coding System BCS) de Patterson et al. (1975). Este código da cuenta de una serie de interacciones (categorizadas) que ocurren frecuentemente en la familia, siendo un instrumento ejemplar por cuanto presenta toda serie de garantías científicas (véanse Patterson, 1977; Reid, 1977). Asimismo, el Código de observación (SOC) para el comportamiento perturbado de Whaler, House y Stambaugh (1976), además de posibilitar la observación en situaciones escolares, es aplicable también en ámbitos familiares (véase Cerezo, 1991). 218 / Evaluación psicológica. Conceptos, métodos y estudio de casos Un buen ejemplo de este tipo de instrumentos es el que presentamos también en el cuadro 6.6. En el código de observación de Whaler et al. (1976) se incluyen una serie de categorías de conducta perturbadoras e interactivas del buen funcionamiento escolar y familiar y de cuyo valor existen amplias pruebas (véanse Kent y Foster, 1977, y versión castellana del mismo: Cerezo, 1991, 2001). Determinados contextos institucionales han recabado también el interés de los evaluadores. Así, han sido desarrollados procedimientos de observación para ser aplicados en instituciones psiquiátricas, pabellones hospitalarios del más variado tipo, centros de cuidados especiales (de retraso mental, autismo, etc.), prisiones, campamentos, residencias de ancianos, etc. (véanse, por ejemplo, el Sistema de evaluación de residencias de ancianos, SERA; Fernández-Ballesteros, 1996). Por último, restaurantes, supermercados, jardines, despachos profesionales, etc., han constituido ámbitos comunitarios para los que se han construido procedimientos, más o menos sofisticados, de observación sistemática (véanse Haynes y Wilson, 1979; Fernández-Ballesteros, 1987). Como ya hemos dicho, todos estos contextos de observación natural conllevan una serie de sesgos que serán comentados en el siguiente apartado. Pero no sólo problemas metodológicos pueden desaconsejar el uso de la observación natural, sino sus posibilidades de aplicabilidad en la práctica. En efecto, en múltiples ocasiones la observación natural conlleva dificultades porque: 1. Los sujetos implicados pueden negarse a ser observados en su vida real. 2. Las conductas a observar sean de carácter privado, éticamente inobservables. 3. Pueden existir inconvenientes para que el psicólogo se desplace al ámbito natural correspondiente. 4. El costo de la observación natural sea extremadamente alto; recuérdese lo dicho en orden al número de horas invertidas en sesiones de observación y el número de observadores necesarios con el fin de obtener datos con mínimas garantías de estabilidad y objetividad. A todas estas cuestiones se ha referido Nelson (1983) al hablar de las «desilusiones» de los evaluadores conductuales sobre la observación en situación natural como método básico de ese modelo. Así, la observación natural parece ser más aconsejable bien cuando puede ser realizada por personas allegadas al sujeto (reduciéndose entonces la objetividad), bien cuando el evaluador forma parte del medio natural, como suele ocurrir en situaciones escolares, institucionales y comunitarias, bien cuando se dispone de medios de transcripción (filmaciones, reproducciones, espejos unidireccionales, etc.). En este último caso se requiere consentimiento informado. Finalmente, existen procedimientos electrónicos de evaluación ambulatoria (para una revisión véase Fahrenberg, 2003) con los que pueden observarse conductas previamente catalogadas o productos de conducta mediante la administración de tests de ejecución y registro de respuestas en situaciones naturales. Por último, una vía para realizar observación natural salvando las dificultades anteriores es a través de rastros de conducta (diarios, cartas, etc.), lo cual no suele requerir especiales costes (en tiempo y energía) ya que tales productos suelen ser facilitados bien por el propio sujeto, bien por personas allegadas a él, o incluso (como ya explicamos cuando tratamos de este tipo de unidades de análisis) son independientes de la voluntad del sujeto o sujetos implicados en la observación. 5.2. Observación en situaciones artificiales Cuando no es posible (por las razones más arriba mencionadas) realizar la observación en situaciones naturales, podemos replicar artificialmente tales ámbitos —concretamente aquellos seleccionados como objetos de estudio— y observar las actividades del sujeto en ellos. A este tipo de observación se le ha llamado «artificial», con métodos «análogos» o de «laboratorio». © Ediciones Pirámide La observación Siguiendo la distinción de Campbell y Stanley (1963), los resultados procedentes de la observación en situaciones artificiales tienden a presentar mayor validez interna, dado el control experimental a que tales situaciones pueden ser sometidas, a la vez que se pierde validez externa y, por tanto, posibilidades de generalización. Este balance entre validez externa e interna dependerá, a su vez, del grado de «artificialidad» de la situación de observación utilizada (Fernández-Ballesteros, 1979, en prensa). En efecto, existen múltiples variantes posibles: ¿en qué medida una sala de espera es artificial si en ella se replica un cuarto de estar, al máximo, con el objetivo de analizar las interacciones que se producen entre los miembros de una familia?, o ¿hasta qué punto lo es un grupo de discusión en el que se pretende analizar los patrones de relación interpersonal o las habilidades sociales de los sujetos implicados? En realidad, al hacernos estas preguntas estamos cuestionando hasta qué punto las conductas de los sujetos en estas situaciones ocurren en la misma medida que en contextos semejantes de la vida real del sujeto. La respuesta a tal cuestión dependerá de muy diferentes aspectos, como veremos más tarde. Por otra parte, lo que sí está claro es que existen distintas vías de replicar artificialmente una situación natural, y a ello nos vamos a referir a continuación. En primer lugar, podemos construir pruebas más o menos estándar y estructuradas a través de las cuales se presente al/los sujeto/s los estímulos o situaciones complejas en las que interesa observar su/s conducta/s con el mayor realismo posible. A estos procedimientos se les suele denominar tests situacionales. Los dispositivos de observación (códigos, catálogos, etc.) y los medios mecánicos de auxilio (espejo unidireccional, circuito cerrado de televisión, magnetófonos, etc.) pueden ser los mismos que los utilizados en ambientes naturales; la diferencia —en lo fundamental— estriba en que la situación no se presenta espontáneamente, sino que es provocada por el evaluador en la consulta o la clínica. Como se dijo en el primer capítulo, uno de los hitos históricos de la evaluación psicológica son los tests situacionales para la selección de candi© Ediciones Pirámide / 219 datos para determinados puestos de trabajo denominados Assessment Center. En ellos se hace asumir al sujeto situaciones semejanes a las que conlleva la situación y se anota su ejecución según la apropiación de su conducta en una serie de atributos. También se han construido réplicas de salas de estar, de juego, escolares, etc., con el fin de analizar interacciones entre parejas, familias, grupos, etc., que, generalmente, son los verdaderos protagonistas de esas mismas situaciones en la vida real (Haynes y Wilson, 1979; Haynes y O’Brien, 2000). Un ejemplo de este tipo de tests situacionales es el Procedimiento rápido para la evaluación de interacciones madre-hijo de Toub (1978), en el que figura una matriz de interacciones como técnica de observación. Este instrumento consta de tres subtests situacionales a través de los cuales y en tiempo controlado (entre 10 y 15 minutos) se pide a la díada madre-hijo que interactúe trabajando con un rompecabezas, leyendo unos cuentos o entreteniéndose en la construcción de cubos. La fiabilidad interjueces parece ser adecuada, y, asimismo, Toub presenta índices de una aceptable validez criterial, ya que diferencia, significativamente, entre grupos de sujetos (madres-hijos) normales y con trastornos de conducta. Por otra parte, han sido creados otros tipos de tests situacionales más sencillos; en ellos se muestra al sujeto en exploración determinados estímulos ante los que se supone presenta conductas inadecuadas. Un ejemplo típico de estos procedimientos es el Test de evitación conductual (BAT), que, construido por Lang y Lazovik (1963) para evaluar el miedo a las serpientes, es utilizado hoy en día para medir muy distintos tipos de conductas de ansiedad y fóbicas en relación a diferentes estímulos (para una revisión, véase Hersen y Bellack, 2002). Estos tests requieren, básicamente, la presentación al sujeto del estímulo temido. Tanto el estímulo como la respuesta son cuantificados a través de parámetros físicos, como tiempo de presentación o distancia a la que se sitúa, y otros como frecuencia, duración, intensidad de la respuesta de temor, etc. Obviamente la prueba ha de adaptarse a las necesidades del caso. 220 / Evaluación psicológica. Conceptos, métodos y estudio de casos En segundo lugar, aumentando la «artificialidad» y disminuyendo el «realismo» de la situación puede crearse ésta «como si» ocurriera. Estos procedimientos, llamados de role-playing o «juego de papeles» (rebautizados por los evaluadores conductuales como de «ensayo de conducta»), en la misma línea que los tests situacionales, permiten la creación de múltiples situaciones ficticias en las que el sujeto interactúa con personas u objetos que representan los papeles requeridos por la situación representada. Generalmente, estas pruebas exigen que un técnico, auxiliar de evaluador, actúe en un determinado papel ficticio (con conocimiento del sujeto) necesario para la representación de una situación que se supone es importante para el sujeto en su vida real y ante la cual se quiere saber cómo se desenvuelve. Un buen ejemplo lo constituyen los Role-Playing Assessment Instruments de Fawcett et al. (véase Fawcett, 2002) que consisten en un conjunto de situaciones que permiten la observación de las conductas emitidas por el/los sujeto/s en evaluación. Por ejemplo, para evaluar el comportamiento de búsqueda de empleo se utilizan distintas situaciones en las que un ayudante del evaluador entrenado asume los papeles de empresario, jefe de la oficina de empleo, etc. Estos instrumentos permiten la evaluación en múltiples situaciones y referidas a distintos objetivos. Finalmente, la realidad virtual permite replicar situaciones naturales. Así, el Virtual Assessment Testing (VAT) (TEA, 1999) simula distintas situaciones relevantes en selección de personal (una sala de mandos en una central hidroeléctrica, el patrullaje de la policía en una ciudad, etc.) que permiten registrar las conductas relevantes sobre el buen desempeño del trabajo. Sin embargo, el VAT está todavía en fase experimental. El resumen y balance que después de una excelente revisión de estos procedimientos de observación en situaciones artificiales hacen Haynes y Wilson (1979) es el siguiente: 1. Su aplicabilidad depende de que los eventos objeto de estudio sean replicables en el laboratorio, de su especificidad, de la probabilidad de ocurrencia y de su reactividad. 2. Se ha demostrado su gran sensibilidad ante la aplicación de tratamientos, por lo que parecen constituir excelentes variables dependientes de los mismos en el proceso interventivo-valorativo. 3. No es posible hablar, en general, de su poder predictivo y de su validez externa, ya que todo ello depende, íntimamente, de la estructura y contenido de los eventos a observar. 4. Han sido utilizados más como procedimientos de investigación que en la práctica. 5. Antes de utilizar una situación artificial para recoger datos observacionales, esta alternativa debe ser analizada minuciosamente y sopesar las ventajas e inconvenientes que conlleva. En todo caso, no debe utilizarse la observación en situaciones artificiales como único método de evaluación. 6. GArAnTÍAS CIEnTÍFICAS DE LA OBSErVACIón Como todo procedimiento de recogida de información, la observación ha de presentar una serie de garantías que prueben su valor científico. Tales garantías son las de fiabilidad, validez y/o exactitud de lo observado. Es decir, aquí, como en cualquier otra técnica de medición, son relevantes las cuestiones siguientes: ¿hasta qué punto los datos de la observación son objetivos?, ¿en qué medida los registros procedentes de unos determinados períodos y situaciones son generalizables a otros momentos y otros ambientes?, ¿hasta qué punto lo que se observa representa todo lo que se desea o se supone es observado?, etc. Últimas revisiones sobre la calidad de la observación (Anguera, 1991, 2003a; Kazdin, 1980, 1981; Hartman, Barrios y Wood, 2003; Haynes, 1978; Haynes y O’Brien, 2000; Kent y Foster, 1977) han planteado múltiples sesgos en la recogida de datos observacionales, por lo que, antes de plantear el estado actual sobre tales garantías, vamos a referirnos a las principales fuentes de error de la observación. © Ediciones Pirámide La observación 6.1. Fuentes de error de la observación Tres son las fundamentales fuentes de error de la observación, procedentes del sujeto observado, del observador y del sistema de observación elegido. 6.1.1. Procedentes del sujeto observado Se ha dicho que uno de los problemas capitales de la observación radica en que los sujetos observados pueden modificar su conducta por el solo hecho de saberse observados. A esta fuente de sesgos se le ha llamado reactividad. Haynes y Horn (1982) han realizado una excelente revisión de este tema a la que nos vamos a ceñir a continuación. En primer lugar, estos autores señalan la necesidad de identificar tal fuente de error para poder cuantificarla y/o controlarla. Veamos los más importantes indicios: 1. 2. 3. 4. 5. El cambio sistemático de la frecuencia en la aparición de las conductas objeto de estudio. El incremento de la variabilidad de la conducta que no se relaciona con cambios en las condiciones ambientales. La expresión verbal de que se está produciendo reactividad por parte de los sujetos que están siendo observados o bien por parte de las personas allegadas a ellos. La discrepancia entre los datos procedentes de la observación y los recogidos con otros procedimientos sobre las mismas conductas. Las diferencias halladas entre lo observado y un criterio objetivo previamente conocido. Por otra parte, se han cuestionado los factores causales o mediadores de la reactividad. Éstos parecen ser los siguientes: 1. El proceso observacional introduce nuevos estímulos en el ambiente que pueden convertirse en estímulos discriminativos para © Ediciones Pirámide 2. 3. 4. 5. / 221 el sujeto. Algunos autores han puesto de relieve la importancia de minimizar las interacciones sujeto-observador y otras fuentes de introducción de estímulos discriminativos en la suposición de disminuir así la reactividad. La investigación al respecto apunta a que mientras, en efecto, la neutralidad del observador disminuye la reactividad en algunos sujetos, en otros la incrementa. El grado de reactividad está en función del grado en que el sistema de observación modifica el ambiente natural; es decir, la reactividad sería una función de la novedad que introduce la observación. Esto podría subsanarse, entonces, esperando un período de tiempo determinado hasta la habituación del sujeto a la situación de observación. No existe, sin embargo, evidencia de que la habituación elimine los efectos de la reactividad. Distintas investigaciones han puesto de manifiesto qué características individuales (sexo, edad, estrato social, expectativas, etc.) de los sujetos observados afectan a la reactividad. No obstante, tampoco existe evidencia conclusiva al respecto. El tipo de conducta, así como sus propiedades (adecuación, frecuencia, etc.), pueden afectar al grado en el cual la reactividad se produce. Tampoco a este respecto existen datos concluyentes. Por último, hay un amplio número de investigaciones que avalan la hipótesis de que la reactividad —al igual que la habituación— es una propiedad de los organismos vivos que se ven afectados por la presencia de estímulos novedosos con un incremento en su activación. Por último, conviene realizar una serie de recomendaciones con el objetivo de minimizar o controlar los efectos de la reactividad: — Utilización de observadores participantes siempre que sea posible. 222 / Evaluación psicológica. Conceptos, métodos y estudio de casos — Utilización de dispositivos ocultos y/o a distancia (como, por ejemplo, cámaras de televisión, magnetófonos, etc.) teniendo en cuenta, en este caso, las cuestiones éticas relevantes. — Minimizar la interacción observador-sujeto u otras propiedades discriminativas de la observación que puedan introducir sesgos. — Pedir a los sujetos que actúen de la forma más natural posible e incrementar su motivación para que así lo hagan. — Utilizar un amplio período de habituación en el que la reactividad se intente disipar. — Utilizar distintos sistemas de observación y diferentes observadores, lo cual permitirá estudiar la validez de los resultados. Aparte de tales recomendaciones, ya se ha dicho que existen procedimientos de observación libres de reactividad que coinciden, en su mayor parte, con los rastros de conducta producidos en ambientes naturales, así como con las unidades de observación no contaminadas o reactivas. Las medidas no productoras de reactividad son las siguientes: 1. Las ya descritas por Webb et al. (1966) como medidas de erosión, de huella y de archivo (descritas en el apartado 3). 2. Los productos de conducta tomados de la situación natural (ejercicios, resultados de tests de ejecución de máximo realismo, etc.). 3. Observaciones simples (Kazdin, 1980), como aquellas registradas en la situación natural por un observador independiente que no interviniera en absoluto en la situación observada. Por ejemplo, el registro de conducta motora externa y espacial de un sujeto en un jardín mientras el observador permanece oculto o está de forma anónima o/y su tarea no se evidencia. 6.1.2. Procedentes del observador Cuando un proceso de recogida de datos o de información es llevado a cabo por un ser humano, éste introduce una importante fuente de errores que necesariamente va a contaminar los resultados derivados de dicho proceso. El propio observador, sus sistemas psicológicos y sus receptores sensoriales suponen los dispositivos de registro más importantes en el proceso observacional, ya que —en la mayoría de los casos— aquel es el que recibe, selecciona, codifica y analiza la información. Además, hay que tener en cuenta que la garantía de objetividad implica la utilización de dos observadores (con el fin de evaluar la fiabilidad interjueces u objetividad), y, por tanto, son dos los agentes o productores de error. De entre las variables que, procedentes del observador, pueden mediatizar los resultados de la observación hemos seleccionado aquellas que nos parecen más relevantes, a saber: su grado de participación, las expectativas que llevan a la situación de observación, su entrenamiento previo y sus características personales. Grados de participación A lo largo del capítulo nos hemos venido refiriendo indirectamente a los distintos grados posibles de participación del observador en la situación de observación. Podemos establecer tres posibilidades: observador no participante, observador experto pero que está presente y es visible en la situación de observación y, finalmente, observador allegado al sujeto que es entrenado para observar. Cuando hablamos de un observador no participante hacemos referencia a aquel que es independiente a lo observado y del cual el sujeto no tiene conocimiento. En nuestra opinión, esto tan sólo puede darse cuando el observador permanece alejado temporal, espacial y/o física y afectivamente a lo que es observado. Así, esto sucede cuando se observa a través de registros mecánicos (cámaras de televisión, magnetófonos, dispositivos telemétricos, etc.), cuando se trata del análisis de datos no reactivos o de productos de conducta del pasado (o del presente recogidos por otros) o en el caso de que el observador acierte a situarse en un lugar que permita su neutralidad e independencia © Ediciones Pirámide La observación junto a la adecuada percepción de lo que ha de observar. Esta observación suele minimizar los efectos de la reactividad de lo observado —aunque no siempre— y favorece una mayor objetividad de la observación. En segundo lugar, el observador participante puede estar más o menos implicado en la situación de observación: permanecer físicamente en el lugar, mantener contactos (más o menos estrechos) con los sujetos observados, alejarse o acercarse a ellos según lo requiera el proceso de observación, la situación o los sujetos. Es decir, puede participar más o menos en el proceso observacional. Este tipo de observador es el más frecuente en evaluación y no debe ser confundido —al menos es ésta nuestra opinión— con la observación que efectúan personas allegadas al sujeto. Así, el observador ajeno pero participante es un técnico de la observación que sabe su oficio y ha sido entrenado para ello. Por eso, la observación por él realizada presenta una serie de características que maximizan la objetividad y exactitud de lo observado. Junto a esto, el observador participante —pero ajeno a la realidad natural del sujeto— puede provocar un incremento de la reactividad de éste, o al menos eso ocurre en ciertos casos. Por último, el observador puede ser una persona allegada al sujeto: su madre, su marido, su maestra. En evaluación psicológica se está tendiendo cada vez más a utilizar observadores participantes entrenados, allegados al sujeto, ya que tal tipo de observación minimiza la reactividad de los sujetos. Pero junto a esto se corre el riesgo de que se reduzcan, a la vez, la objetividad y la precisión de la observación. Esta última posibilidad de sesgos introducidos por los observadores allegados al sujeto puede ser minimizada con el entrenamiento de éstos. Expectativas Estudios sobre metodología experimental han puesto de manifiesto la fuente de sesgos que pueden suponer las expectativas que el observador lleva a la situación experimental y/o correlacional. En efecto, parece demostrado (Rosenthal, © Ediciones Pirámide / 223 1966, 1976) que el observador, ciertamente, introduce involuntariamente sesgos importantes, lo cual ocurre en los distintos momentos del proceso observacional, por ejemplo: a) al elegir el sistema de observación; b) al registrar las conductas o categorías conductuales consonantes con sus hipótesis previas, y c) al seleccionar el diseño estadístico de análisis de los datos procedentes de lo observado. Kazdin (1980) ha planteado algunas recomendaciones para evitar o minimizar este tipo de sesgos en diseños experimentales, algunas de las cuales son aplicables a la observación que se efectúa en evaluación; éstas son: 1. 2. Utilizar observadores entrenados que desconozcan las particularidades del caso. Si se utilizan observadores allegados al sujeto, tratar de no contaminarles con las expectativas del evaluador y entrenarles en objetividad observacional. Entrenamiento Que el observador —cualquiera que sea su grado de participación— sea previamente entrenado en la tarea de observación es de vital importancia para la obtención de datos objetivos y precisos. Antes de proceder a la observación, el evaluador ha debido procurar el entrenamiento de los observadores en el sistema de observación que haya seleccionado. Dos son las clases fundamentales de error que suelen cometer los observadores y que pueden ser subsanadas mediante entrenamiento: errores de tiempo y de interpretación. Evidentemente los primeros tan sólo son posibles cuando se utilizan procedimientos de muestreo del tiempo, y son claramente subsanables con el entrenamiento y utilización de jueces expertos. Por tanto, el error más extendido está relacionado con la interpretación y/o reconocimiento de los eventos objeto de estudio. Para evitar tales errores, el evaluador debe utilizar sesiones de entrenamiento del observador en número suficiente para la consecución de un determinado criterio. Dos son los criterios que 224 / Evaluación psicológica. Conceptos, métodos y estudio de casos suelen utilizarse para dar por finalizado el entrenamiento: 1. Que los entrenados lleguen a alcanzar altos niveles de acuerdo entre sí. 2. Que obtengan acuerdos con un criterio previamente establecido, como puede ser, por ejemplo, un protocolo estándar puntuado por unos jueces expertos. Es importante que los entrenamientos se prolonguen a intervalos regulares durante el período de observación con el fin de evitar el efecto de «arrastrado» o desplazamiento. Esto se suele producir en algunos observadores que modifican poco a poco su forma de identificación de las categorías conductuales, observan en el sentido de su pareja de observación o en cualquier otro sentido. Con entrenamientos regulares, se obtiene una constante recalibración del sistema de observación incrementando con ello la exactitud de los resultados. Características generales Las características o atributos del observador (sexo, edad, habilidades, etc.) pueden también mediar en los resultados de la observación. No obstante, como señala Kazdin (1980), la literatura existente al respecto no justifica el control sistemático de tales variables dada la enorme dificultad para ser controladas. 6.1.3. Procedentes del sistema de observación Una última fuente de errores es aquella que suministra el sistema de observación y, concretamente, el código o registro elegido, el muestreo (en su caso) efectuado y los dispositivos técnicos seleccionados (cuando se dan). Evidentemente el tipo de registro elegido afecta tanto a la fiabilidad como a la validez de los datos. Las características que incrementan la bondad de estos instrumentos son las siguientes: 1. La claridad en las definiciones conductuales. Es decir, que sean fácilmente identificables por el observador. 2. Un reducido número de categorías o conductas en ellos presentes. La literatura no precisa cuál es el número óptimo de categorías a observar. Lo que sí está claro es que la fiabilidad y la validez de un registro se ven reducidas en tanto en cuanto se incrementa el número de categorías en él presentes (Kent y Foster, 1977). 3. Utilizar un código estándar, que cuente con las suficientes garantías científicas en su construcción. 4. Por último, cuando se van a utilizar clasificaciones sobre atributos o escalas de conducta, que el observador tenga suficiente conocimiento sobre el sujeto. Ya se ha dicho cómo frecuentemente se utilizan procedimientos de muestreo del tiempo, de los sujetos o de situaciones a la hora de observar. Como ya nos hemos referido a este punto en el apartado 4, no vamos a abundar más en ello. Por último, en ocasiones es posible utilizar procedimientos eléctricos o mecánicos de registro de datos observacionales que, en líneas generales, son una fuente no de sesgos sino de objetividad y exactitud en la observación. No obstante, algunos de estos procedimientos aportan problemas metodológicos específicos que han de ser tenidos en cuenta y subsanados, en la medida de lo posible, antes de pasar a su utilización. 6.2. Algunas cuestiones sobre fiabilidad, validez y exactitud de la observación Resulta dificil referirse, en general, a las garantías científicas de la observación. En primer lugar porque las posibles unidades de observación son del más variado tipo, en segundo lugar porque los instrumentos que sirven de base a tal procedimiento presentan muy diferentes indicadores de sus propiedades psicométricas y en tercer lugar porque se discute sobre las más importantes ga© Ediciones Pirámide La observación rantías psicométricas de la observación (Anguera, 2003a; American Psychological Association, 1999; Silva, 1989). Sin profundizar en estas cuestiones (puesto que es sólo el momento de hacer un balance sobre ello), vamos a repetir lo ya dicho en el capítulo 4 en aquellos puntos que parecen decisivos a la hora de enjuiciar las garantías que han de presentar los datos procedentes de la observación desde los planteamientos de Cronbach et al. (1972) y compatibilizando éstos con la teoría psicométrica clásica, así como con otras perspectivas actuales. Bien entendido que con ello no se está haciendo referencia a las garantías con las que se deben construir las técnicas estándar de observación, sino a las garantías que deben presentar los datos de observación recogidos en el caso individual de observación —con o sin procedimientos estándar— sobre las actividades de un/os sujeto/s concreto/s en exploración. Veamos a este respecto las cuatro preguntas que consideramos más relevantes y que hacen referencia a la generalizabilidad de las puntuaciones, el tiempo, las situaciones y, en su caso, de constructo. ¿En qué medida los datos procedentes de un observador son generalizables a los recogidos por otros observadores? Una primera garantía de la observación está en la utilización de más de un observador. Esto, desde una perspectiva epistemológica, posibilita la apreciación de la intersubjetividad (y no tanto de la objetividad, como diría Kaplan, 1964) de la observación. Además, con esta pregunta estamos haciendo referencia a lo que —desde una perspectiva de la psicometría clásica— se denomina objetividad o fiabilidad interjueces y que ha sido reformulado desde la teoría de la generalizabilidad haciendo referencia al universo de los observadores. En todo caso lo que se pretende es constatar la medida en la cual los datos observados dependen de la persona que realiza la observación. Se han descrito veintidós procedimientos que permiten su cuantificación. Tales procedimientos © Ediciones Pirámide / 225 pueden dividirse en aquellos que hacen referencia, propiamente, al acuerdo entre observadores (utilizándose entonces porcentajes de acuerdo), mientras que otros dan cuenta de la estimación de los coeficientes de fiabilidad interjueces (desde un enfoque correlacional). En todo caso, como señala Anguera (1990), los índices de concordancia habrán de ser obtenidos en función de la unidad de medida utilizada. Ya se ha dicho que los tres parámetros básicos, o unidades de análisis, son orden de ocurrencia, frecuencia y duración, y guardan un orden progresivo de inclusión. Los índices más adecuados para hallar el grado de concordancia inter e intraobservador/es son, respectivamente: a) concordancia para escalas nominales; b) concordancia según frecuencia, y c) concordancia en base a duración. Veamos los índices de acuerdo con estas tres unidades fundamentales o parámetros de análisis observacionales. 1. Índice de concordancia para la ocurrencia y el orden De entre las fórmulas propuestas por los distintos autores vamos a destacar el coeficiente propuesto por Scott. Según Anguera (1990), este índice «admite una adaptación a la situación de búsqueda del grado de concordancia entre registros inter o intraobservador en que, independientemente de la frecuencia (dado que podrían perfectamente coincidir las frecuencias de ocurrencia de cada una de las conductas registradas), interese evaluar la concordancia en la ocurrencia y el orden o secuencia de registro de las diferentes conductas» (p. 194). Este coeficiente puede expresarse a través de los siguientes elementos: K = Número de categorías del sistema. Po = Proporción de acuerdos observados. Pe = Proporción de acuerdos al azar. 226 / Evaluación psicológica. Conceptos, métodos y estudio de casos Pe (1 + 2) = La proporción correspondiente a la suma de ocurrencias de ambos observadores para cada una de las categorías y con relación al total. Entonces: Conviene recordar que el concepto de acuerdo aquí no se refiere a la frecuencia de ocurrencias de cada una de las categorías, sino a los registros respecto al lugar de orden ocupado para cada ocurrencia de cada evento conductual. EJEMPLO: La información de que se dispone es el orden de la ocurrencia de los eventos conductuales (A, B, C, D) de los observadores O1 y O2: O1 O2 B A C D B A C D A C B C A D A B C D A C Luego, han obtenido los siguientes acuerdos, desacuerdos y proporción de acuerdos y proporción de acuerdos esparados al azar: Acuerdos Desacuerdos Acuerdos % Acuerdos por azar al cuadrado % A B C D 2 2 4 4 4 2 2 0 0,3 0,2 0,3 0,2 0,09 0,04 0,09 0,04 T 12 8 0,26 Es decir, el acuerdo entre dos observadores en las categorías de eventos de conducta observadas ha sido del 46 por 100. 2. Índice de concordancia en función de la frecuencia Tradicionalmente, los índices de concordancia referidos a la frecuencia han sido calculados con respecto al grado de acuerdo entre observadores. Sin embargo, en los últimos años se ha demostrado que tales formulaciones inflan el grado de concordancia al no tener en cuenta el grado de acuerdo debido al azar, por lo que no es recomendable su uso. Tratando de superar este problema, se ha propuesto un índice global (C global) de acuerdo o concordancia que implica el cálculo del acuerdo imputable al azar (C global aleatorio), obteniendo así la concordancia neta (C neta) entre observadores (véase Anguera, 1990). En todo caso, no parece existir una fórmula óptima en la obtención del acuerdo entre observadores, ya que ésta depende del gran número de posibilidades de la observación, por lo que se acepta que el mejor indicador del acuerdo interjueces es la correlación entre las puntuaciones de dos o más observadores. Así, desde una perspectiva correlacional tradicional, suele ser utilizada la correlación de Pearson o, también, si la fiabilidad estimada está directamente relacionada con la amplitud de la muestra de elementos © Ediciones Pirámide La observación observados, puede utilizarse la fórmula Spearman-Brown. Esa misma correlación es la indicada cuando se utilizan escalas de apreciación. Ambos coeficientes son de sobra conocidos y se encuentran en todo tipo de paquetes estadísticos. 3. O1 A C D B A C D A B D Duración En este caso se trata de comprobar la concordancia entre observadores cuando se utiliza como unidad de medida la duración de la conducta observada. En esos casos, el estadístico aconsejado es la Kappa propuesta por Cohen (1960) y rectificada posteriormente por otros autores (véase Anguera, 1990): O2 3 1 5 2 3 4 3 4 2 3 A C A D B A C D A B D 2 2 2 3 2 2 5 3 2 3 3 O1 O2 Po = Proporción de unidades de tiempo correspondientes a las conductas observadas por ambos observadores (concordantemente). Pe = Proporción de unidades de tiempo correspondientes a las concordancias esperadas por efecto del azar. / 227 A B C D A B C D 7 — — 2 1 4 — — 2 — 5 — — — — 9 10/3 4/30 5/30 11/30 9/30 5/30 7/30 9/30 ∑ = 30 Entonces: Los valores de Po y Pe se hallan como sigue: siendo: P1 = Proporción de las unidades de tiempo correspondientes al observador 1. P2 = Ídem del observador 2. K = Número de categorías. EJEMPLO: La información de la que se dispone es el orden y duración (en minutos) de la ocurrencia de las conductas A, B, C y D: © Ediciones Pirámide Hasta aquí las distintas formulaciones utilizadas a la hora de obtener la concordancia entre distintos observadores según éstos manejen diferentes unidades de medida (orden, ocurrencia, frecuencia o duración). Las recomendaciones que formulamos a la hora de establecer el acuerdo entre observadores son las siguientes: 1. El acuerdo o la fiabilidad interobservadores deben ser siempre utilizados a la hora 228 / Evaluación psicológica. Conceptos, métodos y estudio de casos de probar la objetividad de nuestras observaciones cualquiera que sea el instrumento y el procedimiento a observar. 2. El estadístico a utilizar debe estar en correspondencia con el tipo de dimensión de respuesta empleado. 3. Cuando se utilizan escalas de estimación o apreciación conviene emplear la perspectiva correlacional clásica. 4. En ningún caso deben ser tenidos en cuenta datos que obtengan bajos acuerdos entre observadores o baja fiabilidad interjueces. Tienden a incrementar la generalizabilidad entre observadores las siguientes condiciones: a) Utilización de claras definiciones conductuales sobre las que el observador no tenga que hacer inferencias (véase Cone y Foster, 1982). b) La utilización de intervalos de observación. c) El entrenamiento adecuado y semejante de los observadores. d) La recalibración (o prolongación del entrenamiento durante las sesiones de observación en forma intermitente) de los procedimientos de observación. e) Cuando se trata de utilizar escalas sobre constructos de apreciación con posterioridad a la observación, el conocimiento extenso y semejante de lo observado por parte de los observadores y, asimismo, que todos ellos compartan el mismo sistema de referencia teórico. Conviene añadir que —aunque sea poco frecuente— cuando es viable registrar la sesión de observación (sea ésta en situaciones naturales o artificiales) en varios soportes (por ejemplo en vídeo y en magnetófono), es posible que exista un solo observador registrando lo observado por ambos soportes, de modo que entonces se puede obtener la fiabilidad o concordancia intraobservador (Anguera, 2003a) como sustituto de la interobservadores. Finalmente, también es posible obtener el grado de relación lineal entre dos variables continuas (por ejemplo, observaciones de calificaciones escolares) mediante el coeficiente de concordancia (véase Abad et al., 2011, p. 317). ¿Hasta qué punto lo observado en un determinado momento es generalizable a otros momentos de la vida del sujeto? Si los datos que registramos en un período de observación concreto (por ejemplo, una sesión de observación) se repiten en otros períodos, podríamos hablar de estabilidad de nuestras observaciones o bien de la posibilidad de generalizar a un universo temporal (desde la teoría de la generalizabilidad), o, en otros términos, de que hemos obtenido una adecuada fiabiliadad test-retest (desde la psicometría clásica). En cualquier caso, lo que está claro es que el evaluador ha de cerciorarse, antes de tomar como aptos los datos procedentes de sus observaciones, de que la conducta observada o la atribución que los jueces han realizado sobre ella no se ha dado de forma casual. Tres son los procedimientos más frecuentes de estimar esta forma de fiabilidad de las observaciones: 1. A través de las correlaciones que puedan obtenerse entre dos observaciones registradas en dos o más momentos por medio de coeficientes de fiabilidad test-retest (correlación de Pearson o Spearman). 2. Por medio de la apreciación visual de la línea base registrada. Así, por ejemplo, en la figura 6.2 presentamos las frecuencias de aparición de las desobediencias de un niño durante 12 sesiones de observación. Podemos apreciar claramente que a partir de la 9.a sesión las «desobediencias» se estabilizan de forma notable, lo que permite pasar a la fase de tratamiento. A pesar de que este procedimiento tiene bastante de subjetivo en la apreciación de la estabilidad, existen procedimientos estadísticos a la hora © Ediciones Pirámide La observación / 229 12 10 8 6 Desobediencias 4 2 0 1.er 2.o 3.er 4.o 5.o 6.o 7.o 8.o 9.o 10.o 11.o 12.o obs obs obs obs obs obs obs obs obs obs obs obs Figura 6.2.—Representación gráfica de medidas observacionales. Frecuencias de «desobediencia» de un niño durante 12 sesiones de observación. de juzgar empíricamente esta cuestión (véase Anguera, 2003a). Por último, los autores consideran que es factible utilizar la fórmula de Spearman-Brown como medida de la consistencia interna de las distintas categorías o manifestaciones conductuales observadas con el fin de reflejar la fiabilidad de las observaciones. Sin embargo, como señala Haynes (1978), la utilización de este coeficiente puede ser engañosa, ya que la variabilidad intrasesión puede, por tanto, demostrar la varianza verdadera o ser reflejo, también, de errores en el sistema de observación. Las recomendaciones a este respecto son las siguientes: 1. En el caso de trabajar con diseños n = 1 en códigos o categorías conductuales simples, es preferible la inspección visual de la línea base. 2. En el caso de tratarse de códigos de categorías complejos y/o de utilizarse éstos en distintos períodos de observación, deben emplearse procedimientos correlacionales. © Ediciones Pirámide ¿Hasta qué punto los datos de observación procedentes de una situación son generalizables a otras situaciones? Con ello estamos haciendo referencia al universo de generalizabilidad de las situaciones, así como a la validez ecológica de lo observado; es decir, a la posibilidad de que los datos recogidos en situaciones artificiales de laboratorio sean generalizables a la vida real. Por último, desde la observación a través de la cual se realizan inferencias sobre constructos no se tendrá que tener esta preocupación, ya que está basada en un enfoque teórico en el que se sostiene la generalizabilidad intersituacional. En todo caso, el evaluador deberá conocer, como garantía de sus datos, hasta qué punto la conducta (o la atribución que se hace sobre ella) que un sujeto presenta en una situación también ocurre (o puede inferirse también) en otras. El uso del muestreo intersituacional permite la obtención de datos al respecto. Asimismo, la especificidad situacional de ciertas escalas de 230 / Evaluación psicológica. Conceptos, métodos y estudio de casos apreciación también lo posibilitan. Por último, con respecto a la validez externa de los procedimientos de observación en situaciones artificiales, ésta puede confundirse, hasta cierto punto al menos, con las posibilidades de generalizar entre métodos, y se resuelve a través de la concordancia que pueda encontrarse con lo observado en situaciones naturales. ¿Hasta qué punto los datos evalúan el constructo que pretendemos observar? La observación tiene como objetivo prioritario el estudio del comportamiento manifiesto (llamado, precisamente, observable) y, por ello, ha sido entendida como el criterio último de validez. Ello ha sido criticado por cuanto mediante la observación se trata de medir ciertos constructos (por muy conductuales que éstos sean) y ello conlleva, necesariamente, la demostración de la validez de constructo y conceptos relacionados (por ejemplo, Silva, 1989). Sin embargo, otros autores consideran que las garantías que ha demostrado la observación están mucho más en relación con la fiabilidad y el universo de generalizabilidad de los observadores que con la validez, sea de contenido, criterial o de constructo (por ejemplo, Haynes y O’Brien, 2000). Tal vez la cuestión más importante esté no tanto en la validez del instrumento de observación utilizado como en las inferencias que puedan realizarse desde esas observaciones. En nuestro caso, y dado que nos estamos refiriendo al caso individual, lo importante a la hora de asegurarnos de la validez de nuestras inferencias sobre ese caso en particular es no realizar ninguna sin haber utilizado distintos métodos. Así, los resultados procedentes de los métodos observacionales deberán ser contrastados (en nuestro caso particular) con lo que hemos obtenido mediante otros métodos (entrevistas, cuestionarios, autorregistros, etc.). Ésa será la mejor manera de avalar nuestras inferencias. Finalmente, existen paquetes estadísticos para el análisis de los datos observacionales; los más importantes se pueden encontrar en Internet en las siguientes páginas: — www.efdeportes.com/efd20/trans.htm (Transcriptor). — www.skware.com (BEST). — www.efdeportes.com/efd18/codex.htm (Codex). — www.psycsoft.com/ (Observe). — www.ub.es/comporta/comporta.htm (SDISGSEQ). — http://www.noldus.com (The Observer). COnCLUSIOnES A modo de síntesis de todo lo dicho hasta aquí a lo largo de este capítulo vamos a presentar los distintos pasos —a modo de preguntas— que el evaluador tendrá que seguir a la hora de llevar a cabo observaciones en un caso concreto. En el cuadro 5.8 se presenta un Protocolo resumen del Plan de Observación en el que se pueden verter las decisiones tomadas en torno a la observación. 1. El caso que nos ocupa ¿requiere observación? 2. ¿Qué unidades de observación están implícitas en la hipótesis sobre el caso?: — — — — — — Continuo de la conducta. Atributos. Conductas. Interacciones. Sistemas de categorías. Productos de conducta. 3. ¿Qué unidades de medida van a ser usadas?: — — — — Ocurrencia. Frecuencia. Orden. Duración. © Ediciones Pirámide La observación — Dimensiones cualitativas. 4. — En situaciones artificiales. ¿Mediante qué técnicas van a ser recogidas las observaciones?: 7. ¿Durante cuánto tiempo se realizará la observación?: — Registros narrativos. — Escalas de apreciación. — Protocolos observacionales de conducta: • Registros de conducta. • Matrices de interacción. • Mapas de conducta. — Sistemas de categorías. — Registro de productos. — Procedimientos automáticos de registro. 5. ¿Quién o quiénes van a ser observados?: — Un solo sujeto. — Varios. — En su caso, representatividad de los sujetos observados. 6. / 231 ¿Dónde se va a observar?: — En situaciones naturales. — — — — Tiempo total de observación. Número de sesiones. Intervalos de las sesiones. Duración de los intervalos de observación y registro (en su caso). — En su caso, períodos de habituación. 8. ¿Quién o quiénes van a observar?: — Uno o varios observadores. — Cómo se va a entrenar a los observadores. 9. ¿Cómo va a apreciarse la calidad de las observaciones?: — — — — Generalizabilidad entre puntuadores. Generalizabilidad entre situaciones. Generalizabilidad en el tiempo. Con qué otros resultados se van a comparar aquellos procedentes de la observación. BIBLIOGrAFÍA BáSICA Anguera, M. T. (1978). Metodología de la observación, Madrid: Cátedra. Anguera, M. T. (dir.) (1991). Metodología observacional en la investigación psicológica, Barcelona: PPU. Anguera, M. T. (dir.) (2003a). La observación. En C. Moreno Rosset (dir.). Evaluación psicológica. Concepto, proceso y aplicación en las áreas de desarrollo e inteligencia, Madrid: Sanz y Torres. Anguera, M. T. (2003b). Observational methods. En R. Fernández-Ballesteros (ed.) (2003). Encyclopedia of Psychological Assessment, vol. 2, Londres: Sage Pub. Bakeman, R. y Gottman J. M. (1986). Observing interaction. University Cambridge Press (traducción castellana en ed. Morata, 1989). © Ediciones Pirámide Medinnus, G. R. (1979). Estudio y observación del niño, México: Limusa. Hartman, D. P., Barrios, B. A. y Wood, D. D. (2003). Principles of Behavioral Observation. En M. Hersen (ed.). Comprenhensive Handbook of Psychological Assessment, vol. 3, Nueva York: Wiley. Haynes, S. N. y O’Brien, W. H. (2000). Principles and Practice of Behavioral Assessment, Nueva York: Kluwer. Hersen, M. y Bellack, A. S. (2002). Dictionary of Behavioral Assessment Techniques, Clinton Corners: Percheron. Sechrest, L. y Hill, M. (1979). Unobtrusive measurement today. New Directions for Methodology of Behavioral Science. San Francisco: Jossey Bass. 232 / Evaluación psicológica. Conceptos, métodos y estudio de casos rEFErEnCIAS BIBLIOGráFICAS Abad, F. J., Olea, J., Ponsoda, V. y García, C. (2011). Medición en ciencias sociales y de la salud, Madrid: Síntesis. Anguera, M. T. (1978). Metodología de la observación, Madrid: Cátedra. Anguera, M. T. (1981). La observación I: Problemas metodológicos. En R. Fernández-Ballesteros y J. A. I. Carobles (eds.). Evaluación conductual, metología y aplicaciones, Madrid: Pirámide. Anguera, M. T. (1987). Mapas conductuales y cognitivos. En R. Fernández-Ballesteros (dir.). El ambiente, análisis psicológico, Madrid: Pirámide. Anguera, M. T. (1990). Metodología observacional. En J. Arnau, M. T. Anguera y J. L. Gómez. Metodología de la investigación en ciencias del comportamiento, Murcia: Secretariado de Publicaciones de la Universidad de Murcia. Anguera, M. T. (dir.) (1991). Metodología observacional en la investigación psicológica, Barcelona: PPU. Anguera, M. T. (2003a). La observación. En C. Moreno Rosset (dir.). Evaluación psicológica. Concepto, proceso y aplicación en las áreas de desarrollo e inteligencia, Madrid: Sanz y Torres. Anguera, M. T. (2003b). Observational methods. En R. Fernández-Ballesteros (ed.) (2003). Encyclopedia of Psychological Assessment, vol. 2, Londres: Sage Pub. American Psychological Association, American Educational Research Association y National Council on Measurement in Education (1999). Standards for Educational and Psychological Testing, Washinton, DC: APA. Bakeman, R. y Gottman J. M. (1986). Observing interaction, University Cambridge Press (traducción castellana en ed. Morata, 1989). Cairns, R. (1979). The analysis of social interactions, Erlbaum Hillsdale. Campbell, D. T. y Stanley, J. C. (1963). Experimental and quasi-experimental designs for research, Chicago: Rand McNally College Pub. Carreras M. V. (1991). Método de Registro observacional. En M. T. Anguera (dir). Metodología observacional en Investigación Psicológica, Barcelona: PPO. Cerezo, M. A. (1991). Interacciones familiares: Un sistema de evaluación observacional, Madrid: MEPSA. Cerezo, M. A. (2001). Interacción familiar: Un sistema de evaluación observacional SOC III, Valencia: Publicacions de la Universitat de Valencia. www.uv.es/publications. Cohen, S. (1960). A coefficient of agreement for nomial scales. Educational and psychological mesurement, 20, 37-46. Cone, J. D. y Foster, S. L. (1982). Direct observation in clinical psychology. En J. N. Butcher y P. C. Kendall (eds). Handbook of research methods in clinical psychology, Nueva York: Wiley. Cronbach, L. J., Gleser, G. C., Nanda, H. y Rajaratman, N. (1972). The dependability of behavioral measurements theory of generalizability for scores and profiles, Nueva York: Wiley. Eyberg, S. M. y Ross, M. (1978). Assessment of child behavior problems. Journal of Clinical Psychology, 3, 113-116. ETS (1991). Test Catalog, Princeton, NJ: Educational Testing Service. Fawcett, S. B. (2002). Role-Playing Assessment Instruments. En M. Hersen y A. S. Bellack (eds.). Dictionary of Behavioral Assessment Techniques, Nueva York: Percheron. Fahrenberg, J. (2003). Ambulatory Assessment. En R. Fernández-Ballesteros (ed.). Encyclopedia of Psychological Assessment, vol. I, Londres: Sage Pub. Fernández-Ballesteros, R. (1979). Los métodos de evaluación conductual, Madrid: Pablo del Río. Fernández-Ballesteros, R. et al. (1982). Evaluación de contextos, Servicio de Publicaciones de la Universidad de Murcia. Fernández-Ballesteros, R., Díaz, P., Izal, M. y González, J. L. (1987). Evaluación de una residencia de ancianos y valoración de tratamientos ambientales. En R. Fernández-Ballesteros. El ambiente. Análisis psicológico, Madrid: Pirámide. Fernández-Ballesteros, R. (dir.) (1996). Sistema de Evaluación de Residencias de Ancianos (SERA), Madrid: INSERSO. Fiske, D. W. (1978). Strategies for personality research, San Francisco: Jossey Bass. Green, S. B., McCoy, J. F., Burns, K. P. y Smith, A. C. (1982). Accuracy of observational data with whole interval, parital interval and momentary time sampling recording techniques. Journal of behavioral assessment, 4, 103-118. © Ediciones Pirámide La observación Hartman, D. P., Barrios, B. A. y Wood, D. D. (2003). Principles of Behavioral Observation. En M. Hersen (ed.). Comprenhensive Handbook of Psychological Assessment, vol. 3, Nueva York: Wiley. Haynes, S. et al. (1978). The relationships of psychosocial factors to coronary heart disease in the Framingham study: I method and risj factors. American Journal of Epidemiology, 107, 362-383. Haynes, S. (1979). Compliance in health, Baltimore: Johns Jopkins University Press. Haynes, S. N. y O’Brien, W. H. (2000). Principles and Practice of Behavioral Assessment, Nueva York: Kluwer. Haynes, S. y Wilson, C. (1979). Behavioral assessment, San Francisco: Jossey Bass. Haynes, S. N. y Horn, W. F. (1982). Reactivity in behavioral observation: A review. Behavioral assessment, 4, 369-387. Hersen, A. S. y Bellack, A. S. (1998). Dictionary of behavioral assessment techniques, Nueva York: Pergamon Press. Hersen, M. y Bellack, A. S. (2002). Dictionary of Behavioral Assessment Techniques, Clinton Corners: Percheron. Johnston, J. M. y Pennypacker, H. S. (1980). Strategies and Tactis of human behavioral research, New Jersey: Hillsdale, Lawrence Erlbaum. Kaplan, A. (1964). The conduct inquiry, San Francisco: Chandler Pub. Kazdin, A. E. (1977). Assessing the clinical or applied significance of behavior change throught social validation. Behavior modification, 1, 427-452. Kazdin, A. E. (1979). Unobtrusive measures in behavioral assessment. Journal of applied behavioral analysis, 10, 341-349. Kazdin, A. E. (1980). Research design in clinical psychology, Nueva York: Harper and Row. Kazdin, A. E. (1981). Behavioral observation. En M. Hersen y A. S. Bellack (eds.). Behavioral assessment (2.a ed.), Nueva York: Pergamon. Kent, R. N., O’Leary, L. D., Dietz, A. y Diarnent, C. (1974). Expectation biases in observational evaluation of therapeutic change. Journal of consulting clinical psychology, 42, 774-730. Kent, R. N. y Foster, S. L. (1977). Direct observational procedures: methodological issues in naturalistic settings. En A. R. Ciminero, K. S. Calhoum y H. E. Adams (eds.). Handbook of behavioral Assessment, Nueva York: Wiley. © Ediciones Pirámide / 233 Lang, P. J. y Lazovik, A. P. (1963). Experimental desensitization of a phobia. Journal of abnormal and social psychology, 66, 519-525. Medinnus, G. R. (1979). Estudio y observación del niño, México: Limusa. Nay, W. R. (1979). Multimethod clinical assessment, Nueva York: Gardner Press. Nelson, R. O. (1983). Past, present and future on the behavioral assessment. Conferencia presidencial (16 Convención de la Association for Advancement on Behavior Therapy, 1982). Behavioral Assessment, 5, 195-207. Patterson, G. R., Weiss, R. L. y Hops, H. (1975). Training of marital skills: some problemas and concepts. En R. Stuart, R. Liberman y S. Wilder (dirs.). Advances in behavior therapy, Nueva York: Academic Press. Patterson, G. R. (1977). Naturalistic observation in clinical assessment. Journal of Abnormal Child psychology, 5, 309-322. Powel, J., Martindale, A. y Kulp, S. (1975). An evaluation of time sample measures of behavior. J. of Applied Behavior Analysis, 6, 463-469. Powell, J., Martindale, A., Kulp, S. y Bauman, R. (1977). Taking a closer look: time sampling and measurement error. Journal of Applied Behavior Analysis, 10, 325-332. Reid, J. B. (1977). A social learning approach to the treatment and study of families: Il observation manual and observer training procedures, Eugene, Ore: Castalia. Rosenthal, R. (1966, 1976). Experimenter effects in behavioral research, Nueva York: Appleton-CenturyCrofts. Sackett, G. P. (1978). Observing behavior (vol. II) Data Collection and analysis methods, Baltimore: University Park Press. Sechrest, L. (1979). Unobtrusive measurement today. New Directions for Methodology of Behavioral Science, San Francisco: Jossey Bass. Sechrest, L. y Hill, M. (2003). Unobtrusive measures. New Directions for methodology of Behavioral Science, San Francisco: Jossey Bass. Silva, F. (1989). Evaluación conductual y criterios psicométricos, Madrid: Pirámide. Quera, V. (1991). Muestreo y registro observacional. En M. T. Anguera (dir.). Metodología observacional en la investigación psicológica, Barcelona: PPC. 234 / Evaluación psicológica. Conceptos, métodos y estudio de casos TEA (1999). Virtual Assessment Test (documento no publicado), Madrid: TEA. Toub, G. S. (1978). A rapid assessment procedure for model-child interventions. Journal of clinic child psychology, 4, 342-352. Whaler, R. G., House, A. E. y Stambaugh, E. E. (1976). Ecological assessment of child problem behavior, Nueva York: Pergamon Press. Webb, E. J., Campbell, D. T., Schwartz, E. R. y Sechrest, L. (1966). Unbotrusive measurement: non reactive research in the social sciences, Chicago: Rand McNally. Wright, H. F. (1964). Observational child study. En P. Mussen. Handbook of research methods in child development, Nueva York: Willey. © Ediciones Pirámide Los autoinformes ROCÍO FERNÁNDEZ-BALLESTEROS 7 OBJETIVOS DEL CAPÍTULO • Ser capaz de identificar los tipos de información que proporcionan las distintas clases de autoinformes y cuáles son sus características esenciales. • Conocer los sesgos que afectan a la calidad de la información proporcionada por los autoinformes. • Conocer las unidades de análisis y los más importantes tipos de autoinforme: cuestionarios, inventarios, escalas, etc. • Ser capaz de preparar un autorregistro, autoadministrarlo, analizarlo e infor­ marlo. • Ubicar el uso de los autoinformes en el contexto del proceso de evaluación. • Dados los resultados de distintos autoinformes y la información relativa al contexto en el que se han recogido, ser capaz de interpretarlos. © Ediciones Pirámide 1. InTrODUCCIón Un autoinforme supone un mensaje verbal que un sujeto emite sobre cualquier tipo de manifestación propia. No cabe duda de que ése es el procedimiento más antiguo, y el más simple, a la hora de obtener información sobre una persona; como se ha dicho no sin ironía, «si quieres saber la experiencia interna de la persona, quizás el método más directo es preguntarle» (Kleinmutz, 1967, p. 20)1. Sin embargo, el autoinforme no sólo es capaz de dar cuenta de la experiencia subjetiva, sino de una inmensa constelación de eventos tanto internos como externos y tanto subjetivos como objetivos. Esta diversidad de fenómenos que pueden ser informados por el sujeto hace del autoinforme la categoría metódica más diversa y rica y, junto a ello, más compleja y difícil de valorar desde un punto de vista científico. Los autoinformes —producto de la introspección o la autoobservación—, como procedimientos de recogida de información en psicología, han sido fuertemente criticados. Utilizados durante los primeros años de la psicología en el laboratorio por estructuralistas y funcionalistas, como métodos prioritarios para investigar los elementos de la conciencia, fueron rechazados posteriormente por el conductismo de Watson y Skinner, acusados de no presentar las necesarias garantías científicas. Sin embargo, el conductismo de la tercera generación (Bandura, 1987; Fernández-Ballesteros y Staats, 1992) ha rescadato los autoinformes en unas 1 determinadas condiciones que luego veremos (Fernández-Ballesteros, 2003). Paralelamente, los autoinformes han sido empleados desde la psicología diferencial de la personalidad como base de la evaluación y medición de rasgos y han sido los métodos prioritarios en la psicología fenomenológica y, más recientemente, en la evaluación constructivista. Finalmente, el autoinforme ha sido siempre una base para la evaluación de características psicopatológicas en el modelo médico, y el modelo psicodinámico aún tiene en cuenta el mensaje verbal del sujeto como expresión de construcciones inconscientes. En resumen, el autoinforme puede ser considerado como la más amplia categoría metódica en evaluación psicológica. La crítica y/o defensa de los autoinformes pasa por su especificación. Es decir, en ningún caso puede hablarse de la bondad o inadecuación de los autoinformes en general, ya que éstos pueden adoptar muy distintas formas. Así, los autoinformes dan cuenta de diferentes manifestaciones o actividades psicológicas que, a su vez, hacen referencia a distintos momentos o situaciones de la vida del sujeto. Asimismo, tales eventos pueden ser registrados a través de muy distintos protocolos. Por ende, el psicólogo que los recoge puede conceptualizar el material recogido desde perspectivas teóricas distintas y elaborar los resultados a través de diferentes diseños psicométricos, experimentales o hermenéuticos En gran parte de los manuales de evaluación psicológica la técnica del autoinforme viene recogida como «cuestionarios de autoin- Citado por Pervin (1975). © Ediciones Pirámide Los autoinformes forme» y, por tanto, gran parte de los autoinformes son tomados como un conjunto o, en otros términos, como una serie de ítems que miden un determinado constructo. Nuestro objetivo en este tema es considerar los autoinformes como una categoría metódica en evaluación psicológica y reflexionar sobre su enorme variedad (entrevista, cuestionarios, inventarios, escalas de calificación o, incluso, narrativa), así como sobre la diversidad de condiciones que afectan tanto a su calidad como procedimientos científicos de recogida de información como a su utilidad en la práctica de la evaluación psicológica. La mayor parte de estas cuestiones van a ser planteadas en los siguientes apartados de este capítulo; pero ante todo es necesario contemplar los autoinformes como una de las expresiones de los procesos psicológicos básicos, lo cual nos permitirá establecer un marco general. 2. CArACTErÍSTICAS DE LOS AUTOInfOrmES Cualquier información verbal sobre uno mismo (o informes en primera persona) y, más aún, cualquier respuesta a una pregunta sobre uno mismo implican procesos de memoria, pensamiento y lenguaje y, no sólo eso, sino que se sitúan en el meollo del complicado problema de las relaciones entre el pensamiento y el lenguaje. No vamos a adentrarnos en tan complejas cuestiones de la psicología básica, pero sí deberemos recordar un modelo teórico que nos servirá para reflexionar sobre la complejidad de cualquier información en primera persona. Así, contamos con parámetros bien conocidos tales como el tipo de información que se requiere, el tiempo al que se refiere la información demandada, el nivel de elaboración que exige del sujeto para contestar a la demanda, el grado de accesibilidad y contrastación del autoinforme y, finalmente, las inferencias que el evaluador realiza sobre la información suministrada. Todos ellos son aspectos esenciales a la hora de considerar las posibilidades de rigor de los autoinformes (para una revisión, véase Fernández-Ballesteros, 2004). © Ediciones Pirámide 2.1. / 237 Procesamiento de información y autoinformes En diversas publicaciones, Simon et al. (Newell y Simon, 1972; Simon, 1979; Ericsson y Simon, 1980, 1984) han planteado un modelo sobre el procesamiento de la información aplicable a los informes verbales. Brevemente, se asume básicamente que cualquier información es almacenada en diferentes estructuras de memoria, pasando de un almacén sensorial de muy corta duración a una memoria a corto plazo (MCP) de capacidad limitada, y, finalmente, a una memoria a largo plazo (MLP), de ilimitada capacidad y almacenamiento. La información a la cual se atiende se mantiene en la MCP, siendo directamente accesible para producir informes verbales (entre otras operaciones). Por otra parte, la información almacenada en la MLP para ser informada ha de ser recuperada, transferida a la MCP antes de producirse la información verbal sobre la misma. Lo más importante para nuestros fines es que la limitada capacidad de la MCP sólo permite informar directamente sobre eventos que se están produciendo en el momento; por otra parte, se podrá informar sobre los eventos pasados almacenados en la MLP en tanto en cuanto éstos sean recuperados en la MCP. Cualquier pregunta que requiera la elaboración sobre un evento pasado, no realizada en el momento de producirse el evento o posteriormente, será seguramente construida en el presente. Por tanto, dos aspectos esenciales de los autoinformes serán el tiempo al que se refiere la información y el tipo de evento que se solicite. Por lo que se refiere al tiempo, podríamos hablar de autoinformes concurrentes (eventos que se producen en el momento de informar), presentes (que ocurren en un no bien especificado tiempo presente o presente continuo) y pasados. Por lo que se refiere al tipo de evento, éste puede implicar un evento que ha sido almacenado de la misma forma en que se pregunta (por ejemplo, ¿cuándo fue a la escuela por primera vez?) o un evento que requiere una determinada transformación (por ejemplo, ¿era su maestra exigente?). 238 / Evaluación psicológica. Conceptos, métodos y estudio de casos Pongamos algunos ejemplos en autoinformes en distintos tiempos y que exigen diferentes grados de transformación. En primer lugar, el sujeto informa describiendo lo que está percibiendo, de sí mismo o de otros, por medio de sus sentidos; en este caso está actuando sobre un material presente en la MCP. También puede informar sobre sus respuestas fisiológicas, de algunas de las cuales tiene información mediante aferencias propio o interoceptivas. Asimismo, puede poner en palabras algunos de sus pensamientos y de los procesos internos que están ocurriendo en la situación de evaluación. En segundo lugar, también puede referirse a un sinfín de eventos que suceden en el presente: a qué hora suele ir al trabajo, si se siente enamorado de su mujer o si va a votar en una determinada dirección. Por otra parte, puede describir una enorme cantidad de información almacenada en su memoria a largo plazo, así como eventos importantes de su ambiente, y, más aún, puede informar verbalmente de qué tiene pensado hacer en el futuro, es decir, sus planes. La información de todos estos fenómenos, sobre los que el sujeto es o puede ser consciente, se encuentra en su MLP, pero puede ser recuperada por la MCP y comunicada por medio del lenguaje al evaluador o ser redactada por escrito. Finalmente, el sujeto puede informar sobre una amplia clase de eventos que ocurrieron en el pasado remoto (desde eventos puntuales históricos hasta elaboraciones sobre ellos) y que, lógicamente, fueron transferidos a la MLP (memoria autobiográfica). Para que esos eventos sean informados —con las limitaciones y deformaciones propias de los procesos de recuerdo y olvido—, han de ser recuperados nuevamente por la MCP y traducidos según unos esquemas predeterminados (propios o solicitados por el evaluador). Como señalan Ericsson y Simon (1980), ese último tipo de información no puede presentar igual exactitud; obviamente, el primer tipo de información debe ser, teóricamente, más fidedigno que los restantes, y aún más cuando la información solicitada requiere transformaciones de lo ocurrido en el pasado, que, finalmente, ha de ser elaborado en el presente. En otras palabras, la autoobservación y el autoinforme concurrente son potencialmente más exactos que los autoinformes relativos a hechos o a elaboraciones sobre acontencimientos pasados. En muchos autoinformes lo que se pide al sujeto es que realice elaboraciones o inferencias sobre información previamente almacenada. Es decir, frecuentemente se interroga a los sujetos sobre valores, atribuciones, expectativas, intenciones, etc., que no fueron elaborados en su momento en el sentido de la pregunta que se realiza. En estos casos la información registrada en el pasado ha de ser recuperada y de ella inferidas las atribuciones sobre las que se le pide información. Evidentemente estos datos elaborativos pueden ser relevantes (incluso mucho más que los informes concurrentes), pero habremos de tener en cuenta que su fidelidad depende tanto del tiempo al que se refieren como del nivel de transformación que exigen y si fueron almacenados con ese nivel de transformación en el momento de producirse. Por tanto, los autoinformes serán más fidedignos en tanto en cuanto se refieran a eventos de mayor actualidad y en tanto en cuanto hayan sido almacenados con el mismo nivel de elaboración que el demandado (Nisbett y Wilson, 1977; Ericsson y Simon, 1980; Hollon y Bennis, 1981; Schwartz et al., 1998). En resumen, de este modelo se derivan dos importantes aspectos de los autoinformes que habrán de ser tenidos en cuenta: el grado de transformación o elaboración que la información solicitada requiere y el tiempo al que ésta se refiere. 2.2. Sobre qué se informa Ya que hemos hablado de la importancia del nivel de transformación o elaboración, de ello se deduce que existe una gran variedad de eventos informables difíciles de categorizar o clasificar. Así, tratando de sintetizar con Hersen y Bellack (1977), un sujeto puede informar verbalmente sobre los siguientes aspectos: © Ediciones Pirámide Los autoinformes — Conductas motoras (por ejemplo, cuántos cigarrillos consume en una unidad de tiempo). — Respuestas fisiológicas (por ejemplo, si tiene taquicardia). — Pensamientos o cogniciones (por ejemplo, si tiene ideas de suicidio). — Emociones (por ejemplo, si se siente alegre o triste). — Experiencia subjetiva en relación con determinados actos o comportamientos (por ejemplo, si cree que está fumando demasiado). Pero esto no es todo: una persona puede informar también sobre otras muchas cuestiones que requieren elaboraciones, tales como: — Descripciones, calificaciones, clasificaciones o construcciones sobre sí mismo o eventos externos. — Sus atribuciones de causalidad (por ejemplo, cuál cree que es la causa de un determinado trastorno por el que consulta). — Qué estrategias o secuencias de eventos usa para llegar a resolver un determinado problema (por ejemplo, qué estrategia utiliza cuando está resolviendo los cubos de Khos). — Cómo describe narrativamente eventos personales o externos 2. — Sus expectativas futuras de bienestar, sus planes y proyectos. Vemos pues cómo los autoinformes pueden referirse a múltiples manifestaciones tanto externas como internas, lo cual ampliaremos más adelante cuando examinemos cuáles son las variables más comunes a las que los autoinformes se refieren. En este momento, vamos a describir dos de las más importantes características de los autoinformes: accesibilidad y contrastabilidad. 2 Aunque en otras ediciones de esta obra las técnicas de calificación y clasificación han sido incluidas en un tema sobre técnicas subjetivas, en aras de la brevedad y la simplici- © Ediciones Pirámide 2.3. / 239 Accesibilidad y contrastabilidad Del modelo base presentado pueden deducirse dos de sus propiedades esenciales: su grado de accesibilidad y su posibilidad de contrastación. Como hemos señalado más arriba, la información a la que un sujeto se refiere ha tenido que ser procesada previamente para poder ser suministrada; es decir, tiene que ser accesible al sujeto. Tal proceso implica una serie de eventos; por ejemplo, en los primeros instantes de la recepción de un estímulo, éste es percibido en un primer almacén sensorial, y se producen una serie de momentos selectivos de la información; todo ello ocurre en unos pocos milisegundos y de ello el sujeto no es consciente; sería inútil preguntarle por ello ya que, muy probablemente, respondería con el «heurístico dominante» y, por tanto, sus respuestas serían «reconstruidas» (con aquello que el sujeto considera más probable; véase Tversky y Kahneman, 1980). También existe multiples actividades automáticas (por ejemplo, conducir un coche) de las que el individuo tampoco es consciente en el momento de ejecutarlas; preguntar por ellas no tendría sentido. Sin embargo, la actividad automática puede hacerse accesible si el sujeto atiende a esa actividad «autoobservándola» previamente a la información verbal. La diferencia entre ambas reside en que las primeras son totalmente inaccesibles y, por tanto, no son de ninguna manera informables mientras que las segundas pueden ser accesibles en la medida en que el sujeto atienda a esa información. Hemos dicho que las personas pueden informar sobre una multitud de comportamientos: motores, psicofisiológicos y cognitivos, así como de la experiencia subjetiva sobre tales eventos y de otros muchos que tienen que ver con elaboraciones de eventos. Lo más importante ahora es que parte de esos eventos pueden ser contrastados y parte de ellos no. dad, se han incluido aquí como «autoinformes» ya que, en definitiva, en su base lo son. 240 / Evaluación psicológica. Conceptos, métodos y estudio de casos Así, el comportamiento motor es observable, y el psicofisiológico, amplificable mediante aparatos. Por ejemplo, el número de cigarrillos que un sujeto dice fumar al día puede ser contrastado mediante la observación por un experto, por personas allegadas a ese sujeto o mediante dispositivos mecánicos. Por otro lado, las respuestas fisiológicas que el sujeto dice presentar pueden ser verificadas bien a través de registros en el laboratorio, bien a través de aparatos de telemetría, o portátiles, en la vida real. En base a esto, los autoinformes sobre conductas motoras y fisiológicas son útiles a la hora de recoger una primera información, pero podrán y deberán ser contrastados mediante otras pruebas más válidas y exactas a la hora de realizar una evaluación rigurosa. Esta deseable contrastación no puede extenderse a contenidos cognitivos y/o subjetivos del sujeto. Es decir, no contamos con pruebas independientes que nos sirvan de criterio a la hora de analizar, en sus contenidos, el mundo cognitivo y extensamente subjetivo del individuo. En ello, el autoinforme puede ser considerado el método prioritario y «directo» por excelencia —al menos por el momento— a la hora de explorar los contenidos mentales del ser humano (Fernández-Ballesteros, 1990, 1991, 2003). Ahora bien, a pesar de que, parece claro, existe una marcada diferencia en las posibilidades de contrastación de unos y otros autoinformes, también es verdad que para su producción se requieren diferentes operaciones internas. El mensaje verbal que emite un sujeto depende de la información solicitada por el evaluador y a la que ha de responder. Conviene recordar ahora algunos conceptos básicos al respecto, ya que vamos a partir de ellos para hacer las consideraciones que siguen. Los autores, en su mayor parte, han establecido tres conceptualizaciones de lo cognitivo: contenidos, procesos y estructuras. Los contenidos cognitivos han sido considerados como productos de la actividad cognitiva; es aquello de lo que el indivi- duo es consciente y puede verbalizar. Los procesos suponen aquellas operaciones sucesivas necesarias para llegar a un determinado producto mental (Miller, 1981). Las estructuras hacen referencia a organizaciones estables (con o sin sustrato neurofisiológico) subyacentes a los fenómenos cognitivos (Landau y Goldfried, 1981). Sin poder extendernos en todas estas cuestiones, vamos a concluir diciendo, como hacen Nisbett y Wilson (1977), entre otros muchos, que los sujetos humanos pueden ser muy exactos en la información sobre los contenidos o productos de su actividad cognitiva pero lo son mucho menos sobre los procesos que intervienen en su formación, además de ser absolutamente ajenos a las supuestas estructuras que actúan en unos y otros. En definitiva, utilizando las características de los autoinformes antes mencionadas, la información procesual es poco accesible y las estructuras no lo son en absoluto. En resumen, los autoinformes son de gran utilidad a la hora de dar cuenta de los contenidos o productos mentales, resultan parcialmente útiles a la hora de evaluar procesos cognitivos y son inservibles a la hora de dar directa razón de estructuras cognitivas3. Cabe preguntarse ahora sobre la posibilidad de contrastación de los autoinformes sobre lo cognitivo. La respuesta a esta pregunta pasa por los tipos de datos y estrategias experimentales que, generalmente, se han utilizado en el estudio de las funciones cognitivas; éstos son las siguientes: 1) latencia u otras dimensiones temporales de la respuesta; 2) la respuesta en términos de aciertos o errores; 3) la conducta motora externa (por ejemplo, movimientos que realiza al ejecutar la tarea) o la actividad psicofisiológica desarrollada durante la tarea cognitiva; 4) manipulación de propiedades estimulares de tareas bien especificadas y análisis diferencial de las respuestas (1, 2 y 3) a esas tareas criteriales; 5) manipulación de sujetos (por ejemplo, normales-psicóticos, normales-deficientes, etc.) en función de distintos supuestos teóricos sobre ellos y análisis de sus respuestas, y 3 No estamos en absoluto de acuerdo con las propuestas de Landau y Goldfried (1981) sobre la evaluación de estructuras cognitivas, ya que tal y como las plantean estos autores suponen la vuelta a la evaluación de construcciones hipotéticas de altos niveles de inferencia sin apoyatura empírica suficiente. © Ediciones Pirámide Los autoinformes 6) por último, lo que es en este momento nuestro tema, las autoinformes de los sujetos, tanto en el momento de producirse la situación experimental como de manera retrospectiva. Pues bien, si todos estos tipos de datos y estrategias son útiles en el estudio del mundo subjetivo desde la psicología básica y/o al tratar de construir procedimientos generales de evaluación de esta modalidad de conducta, también es posible tratar de verificar o contrastar en un caso único, en evaluación psicológica, los autoinformes cognitivos emitidos por el individuo mediante al menos tres de los tipos de datos mencionales: las ejecuciones ante tareas experimentales (o productos de conducta), respuestas fisiológicas y motoras efectuadas concurrentes las tareas cognitivas con utilización de distintos autoinformes. La conclusión es que, si bien es cierto que no contamos con métodos independientes de comprobación del mundo subjetivo y cognitivo (interno), sí es posible y necesario triangular el constructo cognitivo y/o subjetivo que queremos evaluar utilizando distintas técnicas de autoinforme a la hora de evaluar variables internas relevantes de un sujeto. Veamos algunas formas de contrastación esenciales y necesarias del autoinforme aplicables a la evaluación del mundo emocional y subjetivo del sujeto: 1. El autoinforme puede ser contrastado en distintos momentos, para distintas situaciones y mediante diferentes tipos de autoinformes, pudiéndose llegar así a una semivalidación intrasubjetiva. Así, por ejemplo, si el sujeto informa tener «muchísimo miedo» a la vista de la sangre (elemento del Inventario de temores FSS-III de Wolpe), podemos situarle, en el laboratorio, ante el objeto temido y verificar allí su experiencia subjetiva de temor (a través, por ejemplo, de un «termómetro de miedo»). Así también, si un sujeto informa tener pensamientos de inadecuación (por ejemplo, a través del «Listado de pensamientos negativos» [TSSS] de Cautela, 1977), podemos suministrarle una hoja de autorregistro © Ediciones Pirámide / 241 (cuadros 7.6 y 7.7) para que en ella anote la ocurrencia, duración y/o antecedentes y consecuentes de tales manifestaciones subjetivas comprobando, a través de dos procedimientos de autoinforme distintos, tales conductas. En ambas ocasiones podemos verificar, a través de diferentes técnicas de un mismo procedimiento —el autoinforme— y en distintas situaciones, las respuestas subjetivas de un sujeto. Así, aunque no se produzca una contrastación independiente, sí se producirá una semivalidación de constructo o teórica de ese concreto autoinforme en ese sujeto específico y para la gama de situaciones estudiadas. 2. También existe la posibilidad de contrastación indirecta de los autoinformes sobre respuestas subjetivas al comprobar si se dan los correlatos fisiológicos y motores o los productos de conducta esperados teóricamente. Es decir, podemos registrar la actividad fisiológica del sujeto en un polígrafo y observar su conducta manifiesta mientras emite el autoinforme esperando encontrar los correlatos hipotéticamente esperables. Por ejemplo, si la expresión de temor ante la sangre se da junto con un incremento de la tasa cardíaca o/y de una reacción evitativa-motora de huida, habremos encontrado las supuestas covariaciones teóricas. No obstante, el hecho de que no aparecieran éstas no invalidaría la experiencia subjetiva transmitida en autoinforme. Como ya se ha puesto de relieve en capítulos anteriores, la evidencia empírica parece sostener que existe una cierta independencia entre las distintas modalidades de respuesta, lo cual impide utilizar datos motores o fisiológicos como criterios de verificación o validación de los autoinformes sobre contenidos mentales. En muchos casos, incluso, la falta de covariación entre modalidades puede ser, precisamente, una de las variables a modificar. Por ejemplo, en el caso de un sujeto que, ante un determinado estímulo, experimenta 242 / Evaluación psicológica. Conceptos, métodos y estudio de casos subjetivamente alguna condición fisiológica o motora que no se da en la realidad, evaluada ésta objetivamente. Como conclusión sobre este punto podemos afirmar que es predecible un paralelismo entre distintos autoinformes que evalúan un mismo contenido subjetivo en distintos tiempos y circunstancias, así como posibles correlatos entre lo cognitivo y otras modalidades de respuesta (relacionadas teóricamente). Ello nos permitirán utilizar el autoinforme sobre lo cognitivo con las máximas garantías de rigor, al menos por el momento. 2.4. Autoinformes directos versus indirectos Las respuestas verbales que emite una persona sobre sí misma pueden ser tomadas a distintos niveles de inferencia por parte del evaluador. En el capítulo 1 hablamos de los distintos niveles de inferencia preconizados por los diferentes modelos; refiriéndonos a los autoinformes, también éstos pueden ser entendidos en forma directa o indirecta4. Así, el informe verbal sobre un evento motor, cognitivo o psicofisiológico (y, también, las valoraciones subjetivas de esos eventos comportamentales) puede ser entendido directa o isomórficamente, como expresión o muestra de que el evento informado ha ocurrido o está ocurriendo. Así, por ejemplo, si un sujeto informa que «tiene pesadillas», «habitualmente hace régimen de alimentación» o en ese momento «está furioso», o considera que «tiene complejo de Edipo», entendemos que esos eventos suceden en él. Todos esos eventos, desde luego, implican distintos niveles de inferencia en el propio sujeto, pero pueden ser entendidos por el evaluador como eventos que suceden, es decir, como una muestra de lo que el sujeto hace, piensa, siente o teoriza, aunque respondan a distintos niveles de inferencia del propio sujeto. Sin embargo, los informes verbales sobre sí mismo también pueden ser tomados indirecta o inferencialmente, como manifestación externa (verbal), indicador o signo de una determinada construcción psicológica procedente de una teoría de la psicología. Como veremos más adelante, la mayor parte de los cuestionarios, inventarios y escalas contienen autoinformes que se componen de un conjunto de informaciones verbales del sujeto que informa sobre sí mismo. Incluso, en ocasiones, los contenidos informados pueden no tener importancia en sí mismos y referirse a comportamientos motores moleculares y ser relevantes, tan sólo porque, tomados en agregado, se dan en un determinado sentido en una serie de muestras de sujetos y/o saturan en un determinado factor, variable o constructo. Así, podemos decir que un evaluador puede utilizar indirecta o inferencialmente los autoinformes de un sujeto cuando de ellos extrae algo distinto de lo expresado por éste. En otras palabras, es muy frecuente en los tests de personalidad que un conjunto de autoinformes conformen una escala o factor y en conjunto arrojen una puntuación que, debidamente convertida en una puntuación estándar, expresa la posición relativa del sujeto en una dimensión, variable o constructo con respecto a un grupo normativo. Así, por ejemplo, el elemento «¿Necesita, con frecuencia, que le comprendan y atiendan?» contestado positivamente puede ser tomado, directa o isomórficamente, como indicación de que el sujeto siente esa necesidad frecuentemente o, junto con otros elementos verbales que covarían entre sí y saturan factorialmente un determinado factor o variable, se considere que el sujeto es «dependiente» porque presenta una puntuación alta en esa dimensión, variable o factor en la que satura ese determinado elemento (Fernández-Ballesteros, 1991, 2003). En el cuadro 7.1 se presentan esquemáticamente las más imporantes características de los autoinformes. 4 Para una revisión sobre las distintas conceptualizaciones de los términos «directo» e «indirecto» en evaluación, véase Fernández-Ballesteros, 2003. © Ediciones Pirámide Los autoinformes / 243 CUADRO 7.1 Características y tipos de autoinformes Características Tipos Tiempo Pasado, presente, concurrente, futuro Tipo de manifestación Motora, fisiológica, cognitiva, experiencia subjetiva sobre tales comportamientos o construcciones globales sobre sí mismo y el mundo Grado de accesibilidad Accesible Potencialmente accesible No accesible pero sí «inventable» Contrastabilidad Contrastable mediante criterios externos Contrastación intrasubjetiva Nivel de inferencia del evaluador Directa o isomórfica Indirecta o inferencial Resumiendo, las garantías que proponemos a la hora de incrementar la calidad de los autoinformes son las siguientes: Tener en cuenta el tiempo de referencia y el nivel de transformación del evento por el que se pregunta. 2. Cuando se utilicen autoinformes directos, tener en cuenta el grado de transformación que requiere el evento preguntado y, si es posible, verificar concurrentemente los autoinformes sobre el pasado. 3. Utilizar el autoinforme sobre conductas motoras o fisiológicas como un primer procedimiento de recogida de información a la hora de cribar y obtener las conductas importantes objeto de estudio, contrastando este tipo de datos, expresados por el sujeto, con otros procedimientos observacionales más objetivos. 4. Los autoinformes sobre eventos internos deben ser considerados como datos sobre contenidos cognitivos o subjetivos que de- berán ser examinados intrasubjetivamente. Contrastar a través de distintos procedimientos de autoinforme (inventarios, autorregistros, pensamientos en voz alta en la ejecución de tareas o ante la presentación de estímulos, etc.), en diversos momentos y diferentes situaciones las actividades cognitivas recogidas, así como establecer relaciones entre las tres modalidades de respuesta que permitirán determinar matrices multiconstructo-multimétodo para nuestro sujeto. 5. Los autoinformes sobre contenidos cognitivos, experiencia emocional, autocalificaciones, valoraciones, atribuciones, etc., han de ser entendidos como la expresión verbal de eventos internos, y, en este caso, el autoinforme pasa a ser un procedimiento directo y prioritario de recogida de información sobre esos contenidos cognitivos y/o experiencia subjetiva del sujeto5. 6. No realizar transvases intermodalidades, es decir, no inferir conductas motoras a par- 5 Todo esto en desacuerdo con Cone (1979, 1981) cuando agrupa el autoinforme entre los procedimientos indirectos de recogida de información. Por el contrario, el autoin- forme sobre la experiencia subjetiva ha de ser considerado como un procedimiento «directo» como así lo admite Mischel (1972). 1. © Ediciones Pirámide 244 / Evaluación psicológica. Conceptos, métodos y estudio de casos tir de comportamientos cognitivos o viceversa, a no ser que se cuente con evidencia al respecto. 7. Cuando se utilicen los autoinformes como procedimientos estándar o tests para evaluar indirectamente dimensiones de personalidad, seleccionar éstos asegurándose de que presentan las garantías psicométricas necesarias o, si no, utilizarlos directamnete como expresión isomórfica de la experiencia del sujeto. En ningún caso utilizar inferencialmente autoinformes sobre constructos mediante autoinformes que no han demostrado las propiedades de rigor. Más adelante completaremos todo esto. 3. UnIDADES DE AnáLISIS O VArIABLES A EVALUAr Como puede deducirse del apartado anterior, uno de los aspectos más importantes a desarrollar hace referencia a la unidad de análisis o tipo de variable sobre la que se pretende recoger información. Se ha dicho que, históricamente, los autoinformes se utilizaron desde la psicología diferencial como base fundamental en la construcción de técnicas de medición de atributos intrapsíquicos a partir de los correlatos encontrados entre distintas manifestaciones verbales. También los autoinformes han sido utilizados para evaluar estados dependientes de situaciones concretas. Desde una perspectiva conductual, los autoinformes están siendo empleados en la recogida de información sobre las conductas problema (objeto de estudio), al igual que los procedimientos de autoinforme y autorregistro son utilizados para evaluar las relaciones funcionales entre estímulos y respuestas. Desde una perspectiva más actual del enfoque conductual (llamado por algunos conductualcognitivo), los autoinformes son utilizados para la evaluación de la conducta cognitiva y aun de constructos cognitivos (ideas irracionales, atribuciones, etc.). Vamos a desarrollar a continuación—siguiendo una pesrspectiva histórica— es- tas cinco agrupaciones de autoinformes en base a la clase de variables que en ellos se indaga. 3.1. rasgos, dimensiones o factores Los procedimientos de recogida de información más conocidos, los llamados tests de personalidad, no son, ni más ni menos, que autoinformes tipificados que, construidos a través de procedimientos psicométricos, permiten obtener una puntuación diferencial, es decir, la posición relativa de un sujeto en una determinada variable intrapsíquica tras la comparación de sus respuestas con las de un grupo normativo. Tales instrumentos de autoinforme evalúan bien un conjunto de rasgos (constructos, dimensiones o factores), bien un solo constructo. Las características de estos autoinformes sobre constructos, rasgos, dimensiones o factores de la personalidad son las siguientes: a) La conducta autoinformada (y el propio mensaje verbal) es entendida como un indicador o signo de un atributo subyacente o disposición psicológica presente en todos los sujetos en alguna cantidad o medida. b) El contenido del autoinforme no está, necesariamente, relacionado con la característica que evalúa. Por ejemplo, el elemento «Cristo realizó milagros, tales como cambiar el agua en vino» del MMPI es un indicador de la escala «Dominancia». Es decir, como señala Mischel (1972), tales procedimientos de autoinforme suponen una medida indirecta de un atributo o característica (véase Fernández-Ballesteros, 2003). c) Los elementos elegidos para construir el autoinforme han sido seleccionados a través de estrategias racionales, empíricas o factoriales (Kelly, 1967, capítulo 9). En base a estrategias racionales, los elementos de la prueba han sido elegidos por el autor del test, ya que, según la teoría de base, existe una relación entre éstos y lo que se pretende medir. Así, por ejemplo, Gryeger © Ediciones Pirámide Los autoinformes incluyó en su DPI (Dynamic Personality Inventory), a partir de la teoría psicoanalítica, el elemento «Comer alimentos blandos» en la evaluación del constructo «Oralidad receptiva». Partiendo de estrategias empíricas, los elementos del autoinforme son seleccionados por el hecho de discriminar entre distintos grupos criteriales (véase capítulo 4). Por ejemplo, el MMPI (Minnesota Multiphasic Personality Inventory) de Hathaway y McKinley fue construido partiendo de un amplísimo número de elementos de los cuales se seleccionaron aquellos que diferenciaban entre sujetos normales y anormales (clasificados éstos según la nosología psiquiátrica). Lo importante no es el contenido verbal de cada ítem, ni que cada ítem permita predecir la conducta que expresa ese ítem en la vida real del sujeto (lo cual implicaría una consideración directa del mismo); lo importante es que ese ítem, junto con otros, covarían entre sí y conjuntamente son capaces de discriminar entre grupos criteriales, y, por tanto, la puntuación que arrojan es una medida de esa entidad nosológica (véase tema 10 y Apéndice en CD, MMPI). Por último, existe un gran número de autoinformes de evaluación de constructos cuyos elementos han sido seleccionados a partir de sus saturaciones factoriales en un determinado factor. Así, por ejemplo, Eysenck (1975) seleccionó el elemento «Se preocupa por desgracias que podrían suceder» porque éste aparecía saturando el factor «neuroticismo» en su test EPI (Eysenck Personality Inventory). Hay que señalar que estas estrategias —racionales, empíricas y factoriales— de construcción de instrumentos de autoinforme suelen combinarse en muchos casos (véase Apéndice en CD, EPI). d) En todo caso, cualquiera que sea la estrategia a través de la cual se hayan construido estos autoinformes, ésta se ha llevado a cabo a través de un diseño intersujetos. Es © Ediciones Pirámide / 245 decir, las respuestas que un sujeto da en el autoinforme son comparadas con las de otros sujetos que forman el grupo normativo a través del cual se ha construido o elaborado el test. Así, por ejemplo, la puntuación directa que obtiene un sujeto en cada escala del MMPI es traducida a puntuaciones normalizadas a través de las cuales se pone de manifiesto la situación o posición relativa de nuestro sujeto comparativamente con la de los sujetos que formaron la muestra de tipificación. e) Puesto que estos autoinformes parten de la hipótesis de que el comportamiento es generalizable a través del tiempo y a través de distintas situaciones, los elementos o ítems están formulados de forma general o poco definida. Así, por ejemplo, en el ítem del MMPI «He de admitir que, a veces, me he preocupado sin motivo alguno por cosas que no valían la pena», existe una indefinición notable de su contenido («algunas veces», «por cosas»). Es decir, lo importante en estos autoinformes es conocer cómo el sujeto dice que se comporta sin tener en cuenta la especificidad situacional de la respuesta. Hay que resaltar que en las instrucciones a tales tests se pide que el sujeto responda de la forma en que habitualmente se comporta. f ) Éstos son los enfoques teóricos básicos desde los que se ha construido la mayor parte de autoinformes de evaluación de constructos: el modelo diferencial-psicométrico, el modelo médico-psiquiátrico y, más recientemente, el modelo cognitivo. g) Desde el punto de vista mantenido en esta obra, estos autoinformes son útiles en tanto en cuanto nos permiten encontrar empíricamente correlatos entre conductas permitiéndonos predecir, a unos determinados niveles de probabilidad, el comportamiento, de modo que pueden ser utilizados en la orientación, clasificación o selección de un sujeto. Así también, más recientemente, algunos constructos han 246 / Evaluación psicológica. Conceptos, métodos y estudio de casos logrado ser manipulados mediante tratamientos bien diseñados y especificados. En esos casos, existen pruebas experimentales de que tales constructos pueden ser modificados mediante intervenciones y, por tanto, podrían ser entendidos como variables independientes que contrastar mediante un proceso interventivo-valorativo (véase capítulo 3). 3.2. Estados La posición situacionista enfatizó la especificidad del comportamiento; es decir, que éste es dependiente de los estímulos o situaciones presentes. Así, por ejemplo, la «ansiedad» hace referencia a un complejo patrón de respuestas cognitivas, psicofisiológicas y motoras. Este concepto puede ser conceptualizado como una disposición interna que provoca que el sujeto que la ostenta se comporte, generalmente, ansiosamente. Diríamos entonces que el sujeto es ansioso. Pero la ansiedad puede mostrarse en momentos o situaciones concretas. En otras palabras, la ansiedad puede ser entendida como un estado, en el sentido de que la persona pueda presentar ansiedad en determinadas situaciones. Spielberger (1966, 1991) ha enfatizado la importancia de la distinción entre el «rasgo» y el «estado» de ansiedad y con base en estos conceptos construyó el STAI (State-Trait Anxiety Inventory), el cual es un cuestionario que cuenta con dos formas; en la primera se cuestiona sobre la medida en que aparecen ciertas conductas (por ejemplo, «Habitualmente me siento tenso»), y en la segunda se cuestiona sobre esas mismas conductas ante determinadas situaciones o tareas (véase Apéndice en CD: STAI, ISRA). Con estos mismos planteamientos han sido constituidos otros muchos instrumentos de autoinforme (véase Apéndice en CD: STAXI, STAXIC). Las características de autoinformes sobre estados son las siguientes: a) La conducta expresada en el autoinforme es tomada como una muestra de con- ducta referida a la situación concreta evaluada. b) Los eventos conductuales inventariados en autoinformes de estado pertenecen a una determinada clase, es decir, se refieren a una dimensión específica como la ansiedad, la dependencia o la hostilidad. c) Las situaciones a las que se refieren las conductas han sido bien seleccionadas en función de unos presupuestos teóricos preestablecidos (es decir, se refieren a situaciones sociales, estresores ambientales, tareas cognitivas, etc.) o bien se mantienen abiertas para que el evaluador explore las respuestas del sujeto frente a estímulos o situaciones idiográficamente importantes para éste. d) Estos autoinformes son útiles en tanto en cuanto se desee predecir la conducta diferencial de un sujeto ante distintas situaciones. 3.3. repertorios conductuales Como ya se ha señalado repetidamente, desde una perspectiva conductual a la evaluación se rechazan claramente los autoinformes de evaluación de dimensiones de personalidad. No obstante, hay que precisar que éstos no han sido criticados por el tipo de procedimiento de recogida de información —el de autoinforme—, sino, más bien, por razones teóricas; es decir, por el hecho de que de unas pocas informaciones recogidas del sujeto sean inferidos rasgos o construcciones intrapsíquicas a los que se concede carácter explicativo o bien porque de manifestaciones sobre la experiencia subjetiva se haya pasado a predecir comportamientos externos. No obstante, los evaluadores de conducta aceptan los autoinformes (Kanfer y Saslow, 1965), es decir, el informe verbal de los sujetos sobre su conducta motora, cognitiva y fisiológica (así como su experiencia subjetiva sobre ellas), en tanto en cuanto estos autoinformes supongan muestras o repertorios de conducta y no constructos intrapsíquicos. © Ediciones Pirámide Los autoinformes Ahora bien, la evaluación conductual se dirige al análisis funcional de trastornos de conducta, es decir —al menos en un principio y prioritariamente—, al área clínica. No es de extrañar que un primer grupo de autoinformes conductuales hayan sido desarrollados cara a la exploración de problemas psicológicos. En este sentido se ha construido una serie de autoinformes con el objetivo de evaluar distintos trastornos de conducta como miedos, depresión, asertividad, etc. (para una revisión, véase Hersen y Bellack, 2003). En el Apéndice (CD) podemos encontrar algunos de estos instrumentos, como la Escala de miedos (FSS-III) de Wolpe o la Escala de eventos placenteros (PES) de McPhally y Lewinshon. Las características comunes a este tipo de autoinformes son las siguientes: a) Constan de una serie de comportamientos cognitivos, motores o fisiológicos que han sido seleccionados en virtud de su frecuencia de aparición en un determinado trastorno de conducta. En algunos de ellos aparece también el tipo de situación en el que las conductas psicológicas aparecen. b) Los datos de conducta obtenidos a través de estos autoinformes son utilizados directa e isomórficamente como «muestra» de un tipo determinado de conducta perturbada y no como «signo» de la existencia de entidades intrapsíquicas ni son tomados «en agregado» (no arrojan una puntuación sumatoria). c) Tales comportamientos suelen estar en conexión con situaciones específicas. Si tales situaciones no están especificadas en el autoinforme, lo serán a través de otros procedimientos (observación, autorregistro, etc.). Los autoinformes presentan distintos grados de utilidad en la clínica en función del tipo de datos que se pretende evaluar: 1) son insustituibles a la hora de realizar una p