Taller de prácticas basadas en la evidencia en la psicología industrial organizacional Carlos A. Andújar Rojas, Ph.D. 1
Taller de prácticas basadas en la evidencia en la psicología industrial organizacional
Carlos A. Andújar Rojas, Ph.D.
1
Objetivos:
• Al final del taller, los participantes podrán:Familiarizarse con el término de prácticas basadas en la
evidenciaDiferenciar entre lo que son las prácticas basadas en la
evidencia y las creencias convencionales y no informadas sobre el término y sus aplicaciones
Conocer formas simples de recoger información para evidenciar nuestras prácticas
Identificar las fuentes investigativas que fortalecen nuestras prácticas
Distinguir entre las prácticas basadas en la evidencia en la psicología industrial organizacional y otras disciplinas
2
Agenda:
• Bienvenida e introducción• Lo que sabemos y lo que no de las PBE• Practicas basadas en la evidencia en perspectiva• Estrategias para evidenciar las prácticas en la
psicología industrial organizacional• Resumen, evaluación y cierre
3
Prácticas basadas en la evidencia
• Se ha popularizado en la sociedad norteamericana con el propósito de que profesiones como la medicina, psicología, educación, política pública y arquitectura.
• El zeitgeist es requerir que los y las profesionales basen sus prácticas en evidencias en la medidad que sea posible.
• La APA desarrolló un “taskforce”para definir el concepto.
4
Prácticas psicológicas basadas en la evidencia (PPBE)• Quehacer del/de la psicólogo/a en cualquiera de
sus especialidades que procure la integración de los mejores hallazgos investigativos disponibles en su práctica psicológica al peritaje profesional en el contacto de las características del cliente, sus preferencias y su cultura.
• Esta integración debe asegurar que los resultados de las investigaciones consultadas respondan a las características, necesidades y contexto sociocultural de nuestra clientela.
5
Evidencia
• Resultados de todo esfuerzo investigativo cualitativo, cuantitativo o la combinación de ambos, que le provea al profesional de la psicología una base documentada en la cual fundamentar su práctica en un momento determinado.
6
Algunos tipos de evidencia
• Estudios empíricos• Estudios de casos• Análisis de contenido• Entrevistas• Historias de vida• Benchmark
7
Confusiones
• Prácticas basadas en la evidencia• Tratamientos basados en la evidencias• Teorías basadas en la evidencia• Gerencia basada en la evidencia
8
Prácticas en las organizaciones
• Se implantan muchas modas de forma acrítica.• Se percibe que la investigación no tiene un uso
práctico.• Se parte de concepto de “one size fit’s all”• Se cree en la percepción de validez generalizada.• No se toma en consideración la evaluación de
resultados.• Se usa la experiencia de forma acrítica.
9
Retos de las prácticas basadas en la evidencia• ¿Cómo se usará la evidencia?• ¿Cuál es la mejor evidencia disponible?• Se usará el método científico o otros de carácter
cualitativo o ambos?• ¿Cómo la evidencia recopilada ayuda a darle
dirección a la intervención?• ¿Cómo los elementos de validez interna y externa se
relacionan con la evidencia y la intervención?• ¿Debe existir una jerarquía de evidencias que
sostengan las intervenciones organizacionales?• ¿Cómo sintetizar las evidencias?
10
Retos de las prácticas basadas en la evidencia (Cont.)• ¿Cuán representativos son los clientes de las
intervenciones?• ¿Cómo afectan las característic as de las personas
y de las organizaciones tanto en la recopilación de la evidencia, como a la intervención?
• ¿Cómo las diversidad cultural impacta la recopilación de la evidencia y las intervenciones?
11
Retos de las prácticas basadas en la evidencia (Cont.)• ¿Cuán amplias son las intervenciones y cómo se
relacionan con la efectividad?• ¿Cómo recoger evidencias en intervenciones a
gran escala?• ¿Cuál es la mejor evidencia en intervenciones a
gran escala?
12
Retos de las prácticas basadas en la evidencia (Cont.)• ¿Cuánto ayudan los resultados de los estudios en
la práctica real?• ¿Cómo la evidencia me ayuda a maximizar la
eficiencia y la eficacia de las intervenciones organizacionales?
• ¿Dónde ubicar la investigación básica en las prácticas basadas en la evidencia?
• ¿Cómo maximizar el uso de la investigación aplicada?
13
Recomendaciones para las prácticas basadas en la evidencia en el ámbito gerencial• Enfóquese en principios donde la ciencia es clara.• Desarrolle conciencia sobre las decisiones que se
toman en la práctica profesional.• Diagnostique factores subyacentes relacionados a las
decisiones.• Contextualice el conocimiento relacionado al uso de
la evidencia.• Desarrolle mecanismos de apoyo para las decisiones
usando las prácticas basadas en la evidencia.• Prepárese para acceder a nueva evidencia.
14
Algunas investigaciones• Aarons y Sawitzky (2006) estuvieron las actitudes
de los proveedores de salud mental hace adoptar prácticas basadas en la evidencia y su relación con el contexto organizacional.
• Este estudio evaluó la asociación de cultura y clima organizacional, actitudes hacia adoptar prácticas basadas en la evidencia.
• Los participantes fueron 300 servidores públicos del campo de la salud provenientes de 49 programas para jóvenes y familias.
15
Algunas investigaciones (Cont.)• Cont.• Se llevaron a cabo análisis de correlación y regresión
jerárquica controlando por la características personales.
• Se encontró una asociación entre cultura constructiva y actitudes positivas hacia las prácticas basadas en la evidencia y pobres climas de trabajo con intenciones de descarrilar las prácticas basadas en la evidencia.
• Las organizaciones de cuidado de salud se pueden beneficiar de cómo el clima y la cultura afecta las actitudes hacia el cambio en las prácticas de trabajo.
16
Algunas investigaciones (Cont.)• Gerrish y Clayton (2004) examinaron los factores que
ayudan a lograr prácticas basadas en evidencia.• Presenta un estudio llevado a cabo un hospital de
Inglaterra a través de un periodo de cinco años.• Se utilizó una muestra de 330 enfermeras clínicas,
donde se les administró un cuestionario que les pedía que informara sobre sus prácticas, barreras percibidas para acceder a la información sobre las prácticas basadas en la evidencia, efectuar el cambio en la práctica y la autoevaluación de las destrezas que se necesitan para aplicar las prácticas basadas en la evidencia.
17
Algunas investigaciones (Cont.)• Cont.• Los resultados señalan que la mayor parte de las
prácticas se fundamentan en la experiencia a través de su interacción con pares, médicos y pacientes.
• Se valían más de informes y procedimientos operacionales que de estudios o investigaciones.
• Enumeraron la falta de recursos, tiempo y autoridad de superiores para cambiar las prácticas y sustituidas por otras basadas en evidencia nueva.
18
Algunas investigaciones (Cont.)
• Cont.• Las organizaciones de salud necesitan considerar
múltiples estrategias para facilitar y promover las prácticas basadas en evidencia. Hace falta el apoyo gerencial, la facilitación y una cultura receptiva a estos cambios.
19
Estudios de casos• El estudio de caso puede ser una herramienta
cualitativa muy útil para demostrar efectividad y eficiencia.
• Permite también ser parte de la evidencia a considerar dentro una intervención organizacional.
• Lo importante los estudios de caso es que los mismos se lleve a cabo con el rigor adecuado y que se utilicen múltiples estrategias para validar la información.
20
Hoja de análisis de casos
• Problemas o áreas de oportunidad▫ Macro▫ Micro
• Causas• Alternativas• Recomendaciones
21
Caso 1: Validar inferencias escala de afectividad positiva• Análisis de reactivos
▫ Índices de discriminación de .30 o más• Confiabilidad de consistencia interna
▫ alfa de Cronbach▫ Indice igual o mayor a .70
• Análisis de factores (técnica de estimación de máxima verosimilitud)▫ Valor eigen igual o mayor de 1.00▫ Factores de carga inicial de .30 o más
22
Midiendo la eficacia
• Eficacia. Es el criterio institucional que revela la capacidad administrativa para alcanzar las metas o resultados propuestos (la eficacia administrativa se ocupa esencialmente del logro de los objetivos educativos)
23
Ejemplos
• Hemos reducido en un 70% las quejas de nuestros clientes
• Los gastos operacionales han sido reducidos en un 10%
• Las ventas aumentaron un 30 por ciento
24
Medición de la eficacia• Caso 2: Estrés en Pharmacorp• Pharmacorp desea llevar a cabo un estudio piloto de un
programa de manejo del estrés para los empleados.• Debido a los altos costos de operación, la organización
quiere ver si este taller ayudaría a que todos los empleados disminuyeran los niveles de estrés en su trabajo.
• El año anterior se hizo una encuesta donde se encontró que el promedio de estrés de la población era 60.
• Luego del taller, se administró una escala para medir estrés, donde el promedio de estrés de los participantes fue de 49.
25
Solución
• Llevar a cabo una prueba t para un grupo• Se busca ver si existen diferencias
estadísticamente significativas en el promedio de la muestra y el promedio de la población
26
Caso 3: Evaluando el impacto antes y después de un taller de toma de decisiones• Secure Inc. ha enfrentado serias dificultades debido a
que su personal de gerencia y supervisión ha estado tomando decisiones de manera errática y desacertada.
• Usted ha propuesto un adiestramiento que tiene como objetivo aprender un modelo estructurado de toma de decisiones.
• Se administró al grupo una prueba de conocimientos y destrezas en la toma de decisiones. Llevo a cabo un adiestramiento de un día y al final de éste, le administró la misma prueba.
27
Solución
• Prueba t para medidas dependientes• Busca evaluar si existen diferencias
estadísticamente significativas en los promedios de ambas medidas como resultado de una intervención organizacional
28
Caso 3: Mejorando el servicio al cliente• Salesmart es una empresa que vende productos al detal
que ha sido muy exitosa en las pasadas décadas.• En los últimos años, las ventas han bajado gracias a los
bajos precios de la competencia y a las constantes quejas de sus clientes.
• Le han pedido que haga un taller de servicio al cliente para todos los empleados, pero quieren que el mismo sea piloteado antes de ofrecércelo a todos los empleados.
• Se seleccionaron dos grupos de 15 personas cada uno: uno tomó el taller de servicio al cliente y el otro una charla de beneficios marginales.
• Ambos grupos tomaron una escala de servicio al cliente luego de cada actividad.
29
Solución
• Hacer una prueba t para grupos independientes.• Se busca saber si existen diferencias
estadísticamente significativas en las puntuaciones promedios de ambos grupos partiendo de la premisa de que hubo cambios en conductas y actitudes a través del taller de servicio al cliente.
30
Eficiencia y retorno de inversión
• Eficiencia. Es el criterio económico que revela la capacidad administrativa de producir el máximo de resultados con el mínimo de recursos, energía y tiempo.
• Retorno de la inversión. Es la medida en dólares y centavos, que se obtiene luego de un tiempo de haber hecho una determinada inversión.
31
Eficiencia
• Caso 4: Horas de adiestramiento y productividad• Sigma es una empresa de servicios y asesoría en
ingeniería.• Ellos quieren saber si existe una relación entre las
horas de adiestramiento que invierten en sus empleados y la productividad en dólares generada en los proyectos.
32
Solución
• Regresión simple• Nos permite observar el cambio en dólares
cuando las horas de adiestramiento cambian una unidad ▫ Y=a+b*X▫ Y=Resultado de regresión▫ a = Intercepto = 0▫ b = Pendiente = coeficiente de regresión▫ X = Variable independiente
33
Validez de criterio económico
• Es la validez predictiva de un conjunto de pruebas con resultados económicos.
• Se busca la predicción a largo plazo con un criterio cuantitativo tal como productividad medida en dólares
• Nos ayuda a determinar quiénes son los empleados más productivos.
34
Caso 5: validez predictiva de criterio económico• La empresa Vendemax usa en la selección de sus
vendedores instrumentos para medir inteligencia, personalidad, actitudes hacia el trabajo y una entrevista estructurada.
• La gerencia quiere que los resultados de estas pruebas sean correlacionados con las ventas en dólares que hacen sus empleados.
35
Solución
• Regresión múltiple• Nos permite observar el cambio en dólares
cuando las puntuaciones de los instrumentos cambian una unidad ▫ Y=a+b*X1, X2,X3,X…▫ Y=Resultado de regresión▫ a = Intercepto = 0▫ b = Pendiente = coeficiente de regresión▫ X = Variables independientes
36
Estrategias para evaluar los resultados de un adiestramiento en términos financieros• Análisis de utilidad. Es una técnica estadística que
permite analizar los resultados de un adiestramiento en términos financieros.
• Fórmula:▫ ∆U=T x N x dt x DSy-N x C▫ Donde:▫ ∆U= Resultado del adiestramiento en dólares▫ T= Número de años en que el taller ha afectado el
desempeño▫ N= Número de personas adiestradas▫ dt= La verdadera diferencia en el desempeño entre el grupo
adiestrado y el que no se ha adiestrado en puntuaciones z▫ C= Costo del adiestramiento de cada persona
37
Fórmula para determinar el tamaño del efecto (dt)• dt = Xe – Xc SD√ryyDonde:• Xe= Promedio del desempeño de los empleados
adiestrados• Xc= Promedio del desempeño de los empleados
no adiestrados• SD = Desviación estándar del desempeño del
grupo no adiestrado• ryy= Confiabilidad de la medida de desempeño
38
Para expresar el efecto del desempeño en términos porcentuales• % de cambio en X = dt x 100 x SD pre-test
promedio pre-test
39
Caso 6: Estimando el retorno de inversión de un programa de destrezas de supervisión• T= 2 años• N = 100• dt = .31• SD = $10,000• C = $500• ∆U = 2 x 100 x .31 x $10,000 – (100) ($500) = 200 x .31 x $10,000 - $50,000 = 62 x $10,000 - $50,000
= $620,000 - $50,000= $570,000
40
Estimando retorno de inversión…
• El ROI del taller en dos años es de $570,000• Haciendo un ajuste de descuento de 15%, como
sugieren Mathieu y Leonard (1987) se convierte en $423,000
• Se deben de considerar los impuestos
41