EVALUACION DE COMPETENCIAS DE AUDITORES INTERNOS EN SISTEMAS DE GESTION DE LA CALIDAD BASADOS ISO 9001
Diana Rocío Mejía Ávila Enfermera Especialista en Salud Ocupacional mejiaavilad7@gmail.com Director: Ing. Orlando Cedeño Tamayo ocedenot@gmail.com
PROYECTO DE INVESTIGACIÓN
FUNDACIÓN UNIVERSITARIA AGRARIA DE COLOMBIA ESPECIALIZACIÓN EN SISTEMAS DE GESTIÓN INTEGRADA CALIDAD, MEDIO AMBIENTE Y PREVENCION DE RIESGOS LABORALES. BOGOTÁ D.C. 2.015
TABLA DE CONTENIDO
1.
RESUMEN ....................................................................................................................... 7
2.
METODO GENERAL ................................................................................................... 13 2.1.
Problema a Solucionar ............................................................................................ 13
2.2.
Justificación ............................................................................................................ 13
2.3.
Objetivos ................................................................................................................. 16
2.3.1.
Objetivo General.............................................................................................. 16
2.3.2.
Objetivos Específicos ...................................................................................... 16
2.4.
3.
Marco de Referencia ............................................................................................... 16
2.4.1.
Taxonomía de Bloom ...................................................................................... 16
2.4.2.
Competencias de Spencer 2003 ....................................................................... 24
DESARROLLO ............................................................................................................. 30 3.1.
Aplicación de un instrumento de evaluación de las capacidades intelectuales
(conocimiento) de los auditores internos en ISO 9001:2008 .................................................... 30 3.2.
Se aplica esta parte del instrumento de evaluación para auditores internos de
sistemas de gestión en ISO 9001:2008 mediante la participación de 28 personas con un nivel de conocimiento de la norma ISO 9001:2008 ........................................................................... 32 3.2.1.
Resultados Categoría Conocimiento ............................................................... 33
3.2.2.
Resultados Categoría Comprensión................................................................. 35
3.2.3.
Resultados Categoría Aplicación..................................................................... 36
3.2.4.
Resultados Categoría Síntesis .......................................................................... 38
3.2.5.
Resultados Categoría Análisis ......................................................................... 39
3.2.6.
Resultados Categoría Evaluación .................................................................... 41
3.2.7.
Resultado Global Aplicación Categorías de Bloom ........................................ 42
3.2.8.
Resultado Global Dimensiones Evaluadas ...................................................... 44
4.
CONCLUSIONES ......................................................................................................... 46
5.
RECOMENDACIONES ................................................................................................ 49
6.
REFERENCIAS ............................................................................................................. 51
7.
ANEXOS ........................................................................................................................ 52
LISTA DE FIGURAS
Figura 1. Taxonom铆a Cognitiva de Bloom ................................................................................... 23 Figura 2. Gesti贸n Por Competencias ............................................................................................ 29
LISTA DE GRÁFICAS
Gráfico 1. Resultados de la Aplicación de la herramienta de evaluación bajo Taxonomía de Bloom – Categoría Conocimiento ................................................................................................ 33 Gráfico 2. Resultados de la Aplicación de la herramienta de evaluación bajo Taxonomía de Bloom – Categoría Comprensión.................................................................................................. 35 Gráfico 3. Resultados de la Aplicación de la herramienta de evaluación bajo Taxonomía de Bloom – Categoría Aplicación...................................................................................................... 36 Gráfico 4. Resultados de la Aplicación de la herramienta de evaluación bajo Taxonomía de Bloom – Categoría Síntesis ........................................................................................................... 38 Gráfico 5. Resultados de la Aplicación de la herramienta de evaluación bajo Taxonomía de Bloom – Categoría Análisis .......................................................................................................... 39 Gráfico 6. Resultados de la Aplicación de la herramienta de evaluación bajo Taxonomía de Bloom – Categoría Evaluación ..................................................................................................... 41 Gráfico 7. Taxonomía de Bloom ................................................................................................. 42 Gráfico 8. Número de preguntas aplicadas por Categoría de Bloom ........................................... 44
LISTA DE TABLAS
Tabla 1. Resultados Categoría Conocimiento ............................................................................... 34 Tabla 2. Resultados Categoría Comprensión ................................................................................ 35 Tabla 3. Resultados Categoría Aplicación .................................................................................... 37 Tabla 4. Resultados Categoría Síntesis ......................................................................................... 38 Tabla 5. Resultados Categoría Análisis ........................................................................................ 40 Tabla 6. Resultados Categoría Evaluación ................................................................................... 41 Tabla 8. Dimensiones Evaluadas .................................................................................................. 44
1.
RESUMEN
Este trabajo de investigación hace parte de un macro proyecto el se encuentra enmarcado dentro de la Línea de sistemas de gestión integrada que hace parte del grupo de investigación INSIG, pretende aportar hacia el conocimiento de las competencias que deben desarrollar los profesionales que se desempeñan como auditores lideres e internos en Sistemas de Gestión Integrada en Calidad (ISO 9001:2008), Medio Ambiente (ISO 14001:2004) y Riesgos Laborales (OHSAS 18001:2007). La competencia del talento humano se basa en tres pilares: saber ser, que está relacionado con las actitudes, el saber saber, que corresponde al conocimiento y el saber hacer, que corresponde a la suma de las aptitudes, habilidades y experiencia. Este proyecto de grado en particular se fundamenta en iniciar la prueba parcialmente de un instrumento que permita saber si es adecuado para evaluar las capacidades en cuanto a las competencias cognitivas de los auditores internos de sistemas de gestión en ISO 9001:2008. La confiabilidad del proceso de auditoria y la confianza en el mismo dependen de la competencia de aquellos que llevan a cabo la auditoria. Esta competencia se basa en la demostración de las cualidades personales del auditor, la aptitud para aplicar los conocimientos y habilidades adquiridos mediante la educación y la experiencia laboral. En éste proyecto no se evalúan las características actitudinales de los auditores, solo las de conocimiento e interpretación del sistema de gestión ISO 9001 atendiendo los lineamientos de la Guía ISO 19011. Los auditores desarrollan, mantienen y mejoran su competencia a través del continuo desarrollo profesional y de la participación regular en auditorias.
De acuerdo a la norma Internacional ISO 19011: 2011 en sus numerales 7.0, 7.2, 7.2.2, 7.2.3 El auditor debe ser: Ético, es decir, imparcial, sincero, honesto y discreto; De mentalidad abierta, es decir, dispuesto a considerar ideas y punto de vista alternativos; Diplomático, es decir, con tacto en las relación con las personas; Observador, es decir activamente conciente del entorno físico y las actividades; Perceptivo, es decir, instintivamente consciente y capaz de entender las situaciones; Versátil, es decir, se adapta fácilmente a diferentes situaciones; Tenaz, es decir, persistente, orientado hacia el logro de los objetivos; Decidido, es decir, alcanza conclusiones oportunas basadas en el análisis y razonamiento lógicos; y Seguro de si mismo, es decir, actúa y funciona de forma independiente a la vez que se relaciona eficazmente con otros. Las anteriores habilidades no son objeto del instrumento que se aplica en este proyecto de grado. Los auditores deberían tener conocimientos y habilidades en Principios, procedimientos y técnicas de auditoria, para permitir al auditor aplicar aquellos que sean apropiados a las diferentes auditorias y para asegurarse que las auditorias se llevan a cabo de manera coherente y sistemática. Al igual, Un auditor debe ser capaz de: Aplicar principios, procedimientos y técnicas de auditoria;
Planificar y organizar el trabajo eficazmente Llevar a cabo la auditoria dentro del horario acordado; Establecer prioridades y centrarse en los asuntos de importancia; Recopilar información a través de entrevistas eficaces, escuchando, observando y revisando documentos, registros y datos; Entender lo apropiado del uso de técnicas estadísticas de muestreo y sus consecuencias para la auditoria, verificar la exactitud de la información recopilada; Confirmar que la evidencia de la auditoria es suficiente y apropiada para sustentar los hallazgos y conclusiones de la auditoria; Evaluar aquellos factores que pueden afectar a la confiabilidad de los hallazgos y conclusiones de la auditoria; Utilizar los documentos de trabajo para registrar las actividades de la auditoria; Preparar informes de auditoria; Mantener confidencialidad y la seguridad de la información; y Comunicarse eficazmente, Estos últimos factores, si son objeto de aplicación en el presente instrumento de evaluación de los auditores.
PALABRAS CLAVES: ISO 9001, Evaluación Auditores Internos, Taxonomía de Bloom, Competencias Técnicas y cognitivas.
ABSTRACT
This research is part of a larger project is framed within the Line of integrated management systems that is part of the research group INSIG, it seeks to contribute to the knowledge of the powers must develop professional leaders who serve as auditors and internal systems Integrated Quality Management (ISO 9001: 2008), Environment (ISO 14001: 2004) and Occupational Risks (OHSAS 18001: 2007). Human talent competition is based on three pillars: knowing how to be, which is related to the attitudes, knowledge namely that corresponds to knowledge and expertise, which corresponds to the sum of the skills, abilities and experience. This particular degree project is based on starting the test part of an instrument to know whether it is appropriate to assess the capabilities in terms of cognitive skills of internal auditors of management systems ISO 9001: 2008. The reliability of the audit process and the confidence in it depend on the competence of those who carry out the audit. This competition is based on the demonstration of the personal qualities of the auditor, the ability to apply knowledge and skills acquired through education and work experience. In this project the attitudinal characteristics of the auditors are not evaluated, only the knowledge and interpretation of the ISO 9001 management system serving the guidelines of ISO 19011. Auditors develop, maintain and improve their competence through continual professional development and regular participation in audits. According Wing International Standard ISO 19011: 2011 in numerals 7.0, 7.2, 7.2.2, 7.2.3 The auditor should be:
uthful, honest and discreet;
-minded, ie willing to consider alternative ideas and point of view;
aware of and able to understand situations;
Y
of himself, ie acts and functions independently while interacting effectively with others.
The above skills are not the subject of the instrument that applies in this graduation project. Auditors should have knowledge and skills in principles, auditing procedures and techniques to enable the auditor to apply those that are appropriate to different audits and ensure that audits are conducted in a consistent and systematic manner. Like, an auditor must be able to:
echniques;
reviewing documents, records and data;
implications for the audit, verify the accuracy of information collected;
ort the findings and conclusions of the audit;
the audit;
d security of information; Y
These latter factors, if they are being applied in this assessment tool auditors.
KEYWORDS: ISO 9001, Evaluation Internal Auditors, Bloom's Taxonomy, Technical and cognitive competencies.
2. METODO GENERAL
2.1. Problema a Solucionar Con este proyecto de investigación se busca evaluar si la persona que desea convertirse en auditor Interno en ISO 9001:2008 ha logrado un nivel de conceptualización, análisis y comprensión básica para iniciar un proceso de afianzamiento de su práctica profesional teniendo en cuenta que la actividad de Auditoría es una de las responsabilidades de mayor envergadura dado que se debe evaluar todo un Sistema de Gestión Integrado que incluye personas, métodos, documentos, prácticas y comportamientos empresariales.
Una restricción del proyecto es que los estudiantes no son expertos con alta trayectoria pedagógica, académica, empresarial, entre otras y no es posible que ellos por su cuenta propia formulen las preguntas y casos requeridos. Por lo anterior se han identificado instrumentos o exámenes que tradicionalmente se aplican a los candidatos a auditores para poner en práctica el proyecto.
¿Cómo evaluar las competencias cognitivas de auditores internos en
calidad ISO
9001:2008?
2.2. Justificación Para contribuir al proyecto de investigación, este proyecto de grado se dedica solo a probar parcialmente un instrumento inicial de un examen de conocimientos e interpretación de la norma
ISO 9001:2008 atendiendo las directrices de la ISO 19011:2011. La pregunta a solucionar pertenece al proyecto macro de investigación de la Universidad Agraria; en este aspecto uno de los elementos aplicable, corresponde a los cuestionarios utilizados regularmente en la certificación de auditores internos de calidad.
Al consultar los posibles candidatos para participar en el proyecto; se encuentra la gran limitación del tiempo disponible de las personas. Un examen completo toma alrededor de cuatro horas para resolver 150 preguntas incluyendo casos y los entrevistados no disponían de más de 2 horas. Por esta realidad se procedió a seleccionar algunas preguntas de cada tema y garantizando que se cubrían en forma representativa las categorías de Bloom. En próximos trabajos de grado se utilizaran otros conjuntos de preguntas para ir progresivamente cubriendo el examen y a la misma vez aumentando la muestra de personas que voluntariamente participan en la investigación. Igualmente trabajar con un grupo de estudiantes que inician su formación especializada, no garantiza la experiencia que podría contribuir a obtener otro tipo de conclusiones. El proyecto plantea una metodología para este objetivo.
Por lo anteriormente mencionado la gestión integrada de los sistemas en las empresas esta dada por la comprensión de los procesos es por ello que es necesario la cualificación del auditor, la identificación de las cualidades y atributos personales el desarrollo profesional continuo relacionado puede
con el mantenimiento y la mejora de los conocimientos y habilidades, esto
lograrse a través de varios medios
tales
como experiencia laboral, formación,
entrenamiento. Los auditores deberían tener conocimientos y habilidades en principios,
procedimientos y técnicas de auditoria para ser aplicados de manera coherente y sistémica en el proceso de auditoria.
El conocimiento y habilidades de auditor se pueden adquirir usando una combinación de educación formal/entrenamiento y experiencia que contribuye al desarrollo de conocimiento y habilidades en la disciplina y en el sector del sistema de gestión que el auditor busca auditar; programas de entrenamiento que cubren conocimiento genérico y habilidades de auditor; experiencia en una posición técnica, profesional o gerencial relevante que involucre el ejercicio de juicio, toma de decisiones, solución de problemas y comunicación con gerentes, profesionales, pares, clientes y otras partes interesadas; experiencia de auditoría adquirida bajo la supervisión de un auditor en la misma disciplina.
Los auditores deben demostrar su desarrollo profesional continuo teniendo en cuenta los cambios en las necesidades de las personas y de las organizaciones.
Es muy crítico evaluar si los instrumentos aplicados para la certificación de auditores realmente han sido construidos para garantizar que se evalúan las competencias cognitivas; es decir de conocimiento e interpretación del sistema de gestión. Para lograr un análisis uniforme y comparativo a largo plazo se aborda la taxonomía de Bloom la cual en el dominio cognitivo involucra el conocimiento y el desarrollo de habilidades intelectuales. Esto incluye el recuerdo o el reconocimiento de hechos específicos, las pautas de procedimiento, y los conceptos que sirven en el desarrollo de las capacidades intelectuales y habilidades.
2.3. Objetivos Los objetivos del presente trabajo se relacionan con lo objetivos del Macro proyecto, para este proyecto en particular nos enfocaremos en Auditores Internos.
2.3.1. Objetivo General Contribuir a validar parcialmente un cuestionario de examen de auditores internos, que permita avalar su adecuación en la evaluación de las competencias cognitivas de auditores internos en Sistemas de Gestión de ISO 9001:2008 y buenas prácticas de la ISO 19011:2011
2.3.2. Objetivos Específicos
Aplicar un instrumento de evaluación que permita conocer las capacidades intelectuales y las habilidades de los auditores de sistemas de gestión de calidad ISO 9001:2008 y la ISO 19011:2011
Contribuir a validar el instrumento de evaluación de auditores de sistemas de gestión para evaluar competencia en ISO 9001:2008
2.4. Marco de Referencia 2.4.1. Taxonomía de Bloom Se toma como referencia los estudios realizados por Benjamín Bloom (1973), identifica tres dominios de actividades educativas: •
Cognitiva: las habilidades mentales (Conocimiento)
•
Afectivo: el crecimiento de los sentimientos o las áreas emocional (actitud)
quien
•
Psicomotor: habilidades manuales o físicas (Experiencia)
Es de interés para el proyecto centrar la atención en el dominio Cognitivo. El dominio cognitivo (Bloom, 1973) implica el conocimiento y el desarrollo de habilidades intelectuales. Esto incluye el recuerdo o el reconocimiento de hechos específicos, las pautas de procedimiento, y los conceptos que sirven en el desarrollo de las capacidades intelectuales y habilidades de los auditores internos.
Las habilidades intelectuales se refieren a las diferentes cualidades de la personalidad que constituyen la premisa para la ejecución de una actividad con éxito. Son el conjunto de aptitudes y destrezas que optimizan el aprendizaje de nuevos conocimientos, como por ejemplo; observar, conceptuar, describir, argumentar, clasificar, comparar, analizar, seriar, inferir, sintetizar o generalizar. Los instrumentos de evaluación, están diseñados para asegurarse de la habilidad intelectual de los Auditores Internos. Las dimensiones de la actividad intelectual son:
La aptitud numérica: Habilidad para la velocidad matemática y la precisión numérica.
La comprensión verbal: Habilidad para comprender lo que se lee o se oye y la relación entre las palabras.
La velocidad perceptual: Habilidad para identificar las similitudes y las diferencias que se pueden ver rápidamente y con precisión.
El razonamiento inductivo: Habilidad de identificar la secuencia lógica de un problema en un problema y luego resolverlo.
El razonamiento deductivo: Habilidad para usar la lógica y evaluar las implicaciones de un argumento.
La visualización espacial: Habilidad de imaginar la manera en que vería un objeto al cambiarle de posición en el espacio.
La memoria: Habilidad para registrar, almacenar, retener y recordar informaciones recibidas de manera mediata o inmediata.
Existen seis categorías principales, que están en el orden siguiente, a partir del comportamiento más simple al más complejo.
Las categorías (competencias) pueden ser
consideradas como grados de dificultad. Es decir, el primero debe ser dominado antes que el siguiente pueda tener lugar.
Conocimiento: Prueba de memoria de materiales previamente aprendidos por los hechos que recuerda, términos, conceptos básicos y respuestas. Se refiere a recordar información previamente aprendida. Reconocer informaciones, ideas, hechos, fechas, nombres, símbolos, definiciones, etc., de una manera aproximada a como se han aprendido. El conocimiento de detalles - hechos terminología específica. El conocimiento de los medios de tratar con datos específicos - los convenios, las tendencias y secuencias, clasificaciones y categorías, criterios, metodología.
El conocimiento de los universales y abstracciones en un campo - principios y generalizaciones, teorías y estructuras Recuperación de datos o información. La observación y el recuerdo de la información Dominio de la materia
Comprensión:
Entendimiento demostrativo de hechos e ideas organizando, comparando, traduciendo, interpretando, dando descripciones donde se expongan las ideas principales
Comprender el significado, la traducción, la interpolación, y la interpretación de las instrucciones y los problemas. Estado de un problema en sus propias palabras.
Quiere decir entender (apropiarse, aferrar) lo que se ha aprendido. Se demuestra cuando se presenta la información de otra manera, se transforma, se buscan relaciones, se asocia a otro hecho, se interpreta o se saben decir las posibles causas y consecuencias, comprensión de la información.
Entender el significado, en sus propias palabras, interpretar, extrapolar, traducir, explicar o interpretar el significado de una situación dada o la declaración, sugieren que el tratamiento, la reacción o la solución de determinado problema, crear ejemplos o metáforas.
Captar el sentido de
Traducir el conocimiento en el nuevo contexto
Interpretar los hechos, comparar, contrastar, inferir las causas, predecir las consecuencias.
Aplicación:
Utilizar o aplicar los conocimientos, poner la teoría en práctica, utilizar el conocimiento en respuesta a las circunstancias reales.
El uso de un concepto en una nueva situación o la utilización espontánea de una abstracción. Se aplica lo aprendido en situaciones nuevas en el lugar de trabajo.
El auditor interno, transfiere y utiliza datos y leyes para completar un problema o tarea con un mínimo de supervisión.
Aplica las habilidades adquiridas a nuevas situaciones que se le presentan.
Utiliza la información que ha recibido en situaciones nuevas y concretas para resolver problemas.
Utilizar la información, métodos de uso, conceptos, teorías en situaciones nuevas.
Resolver problemas usando habilidades o conocimientos necesarios.
Poner en práctica una teoría. Practicar, demostrar, resolver un problema de gestión de una actividad.
Análisis: Examinar y romper la información en partes mediante la identificación de los motivos o causas. Hacer inferencias y encontrar evidencia que apoye las generalizaciones El auditor interno distingue, clasifica y relaciona evidencias o estructuras de un hecho o de una pregunta, se hace preguntas, elabora hipótesis.
Descompone el todo en sus partes y puede solucionar problemas a partir del conocimiento adquirido: razona. Intenta entender la estructura de la organización del material informativo examinando las partes de las que se compone. La información que obtiene le sirve para desarrollar conclusiones divergentes. Identifica motivos y causas haciendo inferencias y/o halla evidencias que corroboran sus generalizaciones. Separa los materiales o conceptos en partes componentes, de manera que su estructura organizacional puede ser entendido. Distingue entre hechos e inferencias. Ver los patrones de organización de las partes. reconocimiento de los significados ocultos Identificación de los componentes Interpretar los elementos, principios de organización, estructura, construcción, relaciones internas, la calidad, la fiabilidad de los componentes individuales Identificar los elementos constitutivos y las funciones de un proceso o un concepto, o deconstruir una metodología o proceso, haciendo una evaluación cualitativa de los elementos, relaciones, valores y efectos, los requisitos de medida o las necesidades.
Síntesis: Construye una estructura o patrón de diversos elementos. Ponga las piezas juntas para formar un todo, con énfasis en la creación de un nuevo significado o estructura. Uso de
las viejas ideas para crear otras nuevas, generalizar a partir de hechos dados, relacionar el conocimiento de varias áreas, predice, saca conclusiones. Recopilar información en conjunto de una manera diferente por la combinación de elementos en un patrón nuevo o proponiendo soluciones alternativas. El Auditor Interno crea, integra, combina ideas, planea, propone nuevas maneras de hacer. Crea aplicando el conocimiento y las habilidades anteriores para producir algo nuevo u original. Se adapta, prevé, se anticipa, categoriza, colabora, se comunica, compara. Desarrollar nuevas estructuras únicas, sistemas, modelos, enfoques, ideas, pensamiento creativo, desarrollar planes o procedimientos, soluciones de diseño, integración de métodos, recursos, ideas, piezas, equipos o crear nuevos enfoques, escribir protocolos o contingencias. Elaboración de un plan o proyecto conjunto de operaciones
Evaluación:
Hacer juicios sobre el valor de las ideas o materiales. Comparar y discriminar entre ideas.
Evaluar el valor de las teorías, presentaciones
Tomar decisiones basadas en argumentos razonados
Verificar el valor de las pruebas
Reconocer la subjetividad
Presentar y defender opiniones por hacer juicios acerca de la información, la validez de ideas o la calidad del trabajo basado en un conjunto de criterios.
Emitir juicios sobre la base de criterios preestablecidos.
Emitir juicios respecto al valor de un producto según las propias opiniones personales a partir de unos objetivos determinados.
Figura 1. Taxonomía Cognitiva de Bloom
Fuente: El autor
2.4.2. Competencias de Spencer 2003 Evaluación de competencia en el trabajo, Modelo para un Desempeño Superior
DEFINICIÓN DE UNA “COMPETENCIA” Una competencia es una característica subyacente de un individuo que está causalmente relacionada a un criterio referenciado como efectivo y/o un desempeño superior en un trabajo o en una situación.
Característica subyacente significa que una competencia es una parte relativamente profunda persistente de la personalidad de una persona y que puede predecir la conducta en una amplia variedad de situaciones y tareas de trabajo. Causalmente relacionada significa que una competencia causa o predice la conducta y el desempeño.
Criterio referenciado significa que la competencia realmente predice quién hace algo bien o mal, como es medido en un criterio específico o estándar.
CARACTERÍSTICAS SUBYACENTES Las competencias son características subyacentes de las personas e indican “los modos en que una persona se comporta o piensa, generaliza a través de las situaciones, y que persisten por un periodo razonablemente largo” (1).
CINCO TIPOS DE CARACTERÍSTICAS DE COMPETENCIA
a) Motivos. Cosas en las que una persona consistentemente piensa o quiere que causan acción. Los motivos “impulsan, dirigen y seleccionan” (2) la conducta hacia ciertas acciones o metas y la alejan de otras.
Ejemplo: Las personas motivadas por el logro consistentemente se fijan a sí mismos metas desafiantes, se responsabilizan personalmente por cumplirlas y utilizan la retroalimentación para hacer algo mejor.
b) Rasgos. Características físicas y respuestas consistentes a situaciones o información. Ejemplo: El tiempo de reacción y buena visión son rasgos físicos de competencia de los pilotos de combate. El auto-control emocional y la iniciativa son “respuestas consistentes a situaciones” de un tipo más complejo. Algunas personas no “explotan” con los demás y sí actúan “más allá de su deber” para resolver problemas bajo estrés. Estos rasgos de competencia son característicos de los administradores exitosos. Los motivos y las competencias son “rasgos maestros” operantes intrínsecos o auto - iniciados que predicen lo que las personas harán en sus trabajos a un largo plazo sin supervisión estricta.
c) Auto-Concepto. Las actitudes, valores o auto-imagen de una persona.
Ejemplo: Auto-confianza, la creencia de una persona de que podrá ser eficaz en casi cualquier situación, es una parte del concepto del self de esa persona.
Los valores de una persona son motivos respondientes o reflejos que predicen lo que hará a corto plazo en situaciones en las que otros están a cargo. (3). Por ejemplo, es más frecuente que alguien que valora el ser líder exhiba conductas de liderazgo si se le ha dicho que una determinada tarea o trabajo “será una prueba de su habilidad de liderazgo”. Las personas que valoran pertenecer a “la gerencia” pero a quienes intrínsecamente no les gusta o espontáneamente piensan en influenciar a otros en un nivel de motivos frecuentemente logran ascender a puestos gerenciales pero después fracasan.
d) Conocimiento. Información que una persona tiene en áreas de contenido específico. Ejemplo: El conocimiento de un cirujano sobre los músculos y nervios del cuerpo humano.
El conocimiento es una competencia compleja. Las calificaciones en las pruebas de conocimiento frecuentemente fallan al predecir el desempeño laboral porque no miden los conocimientos y las destrezas en la forma en que son realmente usadas en el trabajo. Primero, muchas pruebas de conocimiento miden los conocimientos memorizados sin una comprensión cabal, cuando lo que es verdaderamente importante es la habilidad para encontrar información.
La memorización de hechos específicos es mucho menos importante que el saber dónde encontrarlos cuando sea necesario. Segundo, las pruebas de conocimiento son “respondientes”,
Miden la habilidad de los examinados para elegir cuál de las varias opciones es la respuesta correcta, pero no si una persona puede actuar sobre la base del conocimiento.
Por ejemplo, la habilidad de elegir cuál de los cinco ítems es una argumentación eficaz es muy diferente a la habilidad de hacer frente a un conflicto y argumentar persuasivamente.
Finalmente, en el mejor de los casos, las pruebas de conocimiento predicen lo que una persona puede hacer, no lo que hará.
e) Destreza. La habilidad de ejecutar una cierta tarea física o mental. Ejemplo: La destreza física de un dentista para tapar una muela sin lastimar el nervio; la habilidad de un programador de computadoras para organizar 50,000 líneas de códigos en un orden secuencial lógico.
Las competencias mentales o de destrezas cognitivas incluyen el pensamiento analítico (procesamiento de datos y conocimiento, determinación de causas-efectos, organización de datos y planes) y pensamiento conceptual (reconocimiento de patrones en datos complejos).
El tipo o nivel de una competencia tiene implicaciones prácticas para la planeación de los recursos humanos. Las competencias de conocimiento y de destrezas tienden a ser características visibles y superficiales de las personas. Las competencias de auto-concepto, de rasgo y de motivos son más “profundas”, están más escondidas y son el centro de la personalidad.
Las competencias de conocimiento superficial y de destreza son relativamente fáciles de desarrollar; el entrenamiento es la manera más efectiva en cuanto al costo para garantizar las habilidades de los empleados.
Competencias Centrales y Superficiales El Modelo del Iceberg (The Iceberg Model) Visible (Visible) Escondido (Hidden) Destreza (Skill) Conocimiento (Knowledge) Auto-Concepto (Self-Concept) Rasgo (Trait) Motivo (Motive) Superficie (Surface) Más fácilmente desarrollado (Most easily developed) Personalidad Nuclear (Core) (Core Personality) Más difíciles para desarrollar (Most difficult to develop) Conocimiento (Knowledge) Destreza (Skill) Actitudes, Valores (Attitudes, Values) Auto-Concepto (Self-Concept) Motivo, Rasgo (Motive, Trait)
Figura 2. Gesti贸n Por Competencias
HABILIDADES Y DESTREZAS
CONCEPTO DE UNO MISMO ACTITUDES RASGOS VALORES DE PERSONALID CONOCIMIENTOS AD
Fuente: El Autor
3. DESARROLLO
3.1. Aplicación de un instrumento de evaluación de las capacidades intelectuales (conocimiento) de los auditores internos en ISO 9001:2008
La Sociedad de la Calidad de los Estados Unidos ASQ (American Society for Quality) en su página web vende una base de datos de preguntas y respuestas para preparar a los auditores de sistemas de gestión de calidad ISO 9001. La Corporación Metrología y Calidad Ltda, adquirió este producto para utilizarlo en el proyecto de investigación conjunta con la Universidad Agraria de Colombia y gradualmente desarrollar una validación del mismo. El material comprado a la ASQ esta estructurado bajo la Taxonomía de Bloom.
Para el desarrollo del presente trabajo se estudiaron cuales preguntas aplicaban al entorno colombiano en cuanto a lenguaje y reglamentación. Tomando como base que ASQ aplica un examen a nivel internacional que está compuesto por 150 preguntas para ser contestadas en 4 horas. Evaluando y consultando la posible disponibilidad de los candidatos a participar se conformaron dos cuestionarios de 50 preguntas para un tiempo de aplicación de máximo dos horas. Se garantiza que el instrumento cubra todos los temas y los seis niveles de Bloom. En este trabajo de grado solo se aplica uno de los cuestionarios; el segundo se considera de rescate; en caso que alguno o varios participantes deseen en el futuro aplicar y seguir contribuyendo al estudio global.
El cuestionario tiene una sección A donde la persona debe seleccionar la respuesta correcta de acuerdo con las opciones dadas y una sección B donde encuentran estudios de caso con información introductoria sobre una compañía específica o una situación de auditoria, seguida por un grupo de preguntas relacionadas a la situación descrita. (Ver anexos 1 y 3)
3.2. Se aplica esta parte del instrumento de evaluación para auditores internos de sistemas de gestión en ISO 9001:2008 mediante la participación de 28 personas con un nivel de conocimiento de la norma ISO 9001:2008
La muestra se dividió en dos grupos: un grupo de 20 personas correspondientes a Auditores Internos de una empresa de consumo masivo, los cuales recibieron un curso de 40 horas en noviembre de 2014 por una entidad certificadora, la cual al finalizar la semana de entrenamiento aplico un examen para certificarlos con auditores internos. Los perfiles de estas 20 personas son multidisciplinarios: Ingenieros Industriales, mecánicos, químicos. Técnicos en procesos de producción. Dentro del proceso de calibración de auditores internos de dicha empresa se puso a disposición el instrumento a validar.
El grupo restante de 8 personas también es un grupo interdisciplinario: Ingenieros Industriales, Psicólogos, etc., estudiantes de la cohorte 44 ciclo III de la Especialización de Sistemas Integrados de Gestión de la Uniagraria donde de manera voluntaria presentaron el examen, en contraprestación para las 28 personas que presentaron el examen la Corporación Metrología y Calidad expido una certificación de participación en la validación del instrumento y que aprobó dicho examen.
Dicho instrumento se aplicó de manera presencial (Durante 45 días del 01 de agosto al 15 de septiembre de 2015), el tiempo empleado por persona en la aplicación de la prueba fue de 2 horas.
Es importante resaltar que de acuerdo a la Taxonomía de Bloom las categorías (competencias) pueden ser consideradas como grados de dificultad. Es decir, el primero debe ser dominado antes que el siguiente pueda tener lugar, es por esto que el número de preguntas por cada categoría varía de acuerdo con la dimensión que se pretende evaluar, este instrumento (examen) difiere con los que habitualmente utilizan los entes certificadores para evaluar ya que este no tiene sección de falso y verdadero ni preguntas abiertas que puedan generar juicios y apreciaciones diferentes a las que el evaluado pretende explicar por parte de quien califica el examen.
Una Vez recolectada la información se procedió a realizar la calificación con el número de aciertos y desaciertos por pregunta y la calificación total por persona.
Con base en los resultados se procedió a tabular y analizar los datos por cada una de las categorías de Bloom las cuales se describen a continuación:
3.2.1. Resultados Categoría Conocimiento Gráfico 1. Resultados de la Aplicación de la herramienta de evaluación bajo Taxonomía de Bloom – Categoría Conocimiento
Fuente: Autor
Tabla 1. Resultados Categoría Conocimiento No. PREGUNTA CN 1 CN 2 CN 20 CN 26 CN 32 CN 34 CN 49
% acertividad 2,0% 18,0% 22,0% 21,0% 24,0% 3,0% 10,00%
% Desaciertos 27,08% 10,42% 6,25% 7,29% 4,17% 26,04% 18,75%
Fuente: Autor
Analizados los resultados de las siete preguntas aplicadas a la categoría de conocimiento se encontró un porcentaje de asertividad del 51.02% observándose el mayor número de aciertos en las preguntas 32, 20 y 26, las cuales se enfocan en el reconocimiento de información relevante
que se trae a la memoria aprendida previamente en cuanto a conceptos básicos, conocimiento de detalles y en general el dominio del tema.
3.2.2. Resultados Categoría Comprensión Gráfico 2. Resultados de la Aplicación de la herramienta de evaluación bajo Taxonomía de Bloom – Categoría Comprensión
Fuente: Autor
Tabla 2. Resultados Categoría Comprensión
No. PREGUNTA CM 3 CM 6 CM 15 CM 27 CM 36 CM 40
% acertividad 9,90% 25,74% 22,77% 7,92% 13,86% 19,80%
% Desaciertos 26,87% 2,99% 7,46% 29,85% 20,90% 11,94%
Fuente: Autor
La categoría de comprensión evalúa la habilidad de construir significado a partir del conocimiento y de la interpretación a través de la comprensión de lectura de la pregunta para inferir la respuesta, se evidencio un porcentaje de asertividad del 51.1% analizados los resultados de las seis preguntas aplicadas a la categoría de comprensión se encontró el mayor número de aciertos en las preguntas 6, 15 y 40, en general las preguntas de la categoría de comprensión pretendían evaluar la capacidad del auditor interno para buscar las relaciones y asociaciones a otro hecho, la interpretación o predicción de posibles causas y/o consecuencias.
3.2.3. Resultados Categoría Aplicación Gráfico 3. Resultados de la Aplicación de la herramienta de evaluación bajo Taxonomía de Bloom – Categoría Aplicación
Fuente: Autor Tabla 3. Resultados Categoría Aplicación No. PREGUNTA AP 4 AP 7 AP 12 AP18 AP 23 AP 28 AP 38 AP 41 AP 46
% acertividad 6,98% 21,71% 12,40% 17,83% 0,00% 10,85% 6,98% 19,38% 3,88%
% Desaciertos 15,45% 0,00% 9,76% 4,07% 22,76% 11,38% 15,45% 2,44% 18,70%
Fuente: Autor
La categoría de Aplicación utiliza el conocimiento en respuesta a circunstancias reales, utiliza la abstracción, aplica lo aprendido en nuevas situaciones resolviendo problemas; se evidencio un porcentaje de asertividad del 60.12%, analizados los resultados de las nueve
preguntas aplicadas a la categoría de aplicación se encontró el mayor número de aciertos en las preguntas 7, 41 y 18, en general las preguntas de la categoría de aplicación pretendían evaluar la capacidad del auditor interno para construir, desarrollar, comprobar, implementar un proceso aprendido.
3.2.4. Resultados Categoría Síntesis Gráfico 4. Resultados de la Aplicación de la herramienta de evaluación bajo Taxonomía de Bloom – Categoría Síntesis
Fuente: Autor
Tabla 4. Resultados Categoría Síntesis
No. PREGUNTA SN 10 SN 25 SN 31 SN 43
% acertividad 25,00% 13,64% 36,36% 25,00%
% Desaciertos 38,64% 50,00% 27,27% 38,64%
Fuente: Autor
La categoría de Síntesis busca construir un nuevo significado o estructura, proponiendo nuevas maneras de hacer las cosas aplicando conocimiento y habilidades anteriores para producir algo nuevo y mejorado. Se evidencio un porcentaje de asertividad del 39.29%, analizados los resultados de las cuatro preguntas aplicadas a la categoría de síntesis se encontró el mayor número de aciertos en las preguntas 25, 10 y 43, en general las preguntas de la categoría de síntesis pretendían evaluar la capacidad del auditor interno para integrar, combinar, abstraer y producir algo nuevo basado en el conocimiento y experiencias previas dentro del quehacer diario
3.2.5. Resultados Categoría Análisis Gráfico 5. Resultados de la Aplicación de la herramienta de evaluación bajo Taxonomía de Bloom – Categoría Análisis
Fuente: Autor
Tabla 5. Resultados Categoría Análisis No. PREGUNTA SN 10 SN 25 SN 31 SN 43
% acertividad 25,00% 13,64% 36,36% 25,00%
% Desaciertos 38,64% 50,00% 27,27% 38,64%
Fuente: Autor
La categoría de Análisis descompone el todo en sus partes con el fin de solucionar problemas a partir del conocimiento adquirido, se evidencio un porcentaje de asertividad del 60.27%, analizados los resultados de las diez y seis preguntas aplicadas a la categoría de análisis se encontró el mayor número de aciertos en las preguntas 39, 14, 42 y 44, en general las preguntas
de la categoría de análisis pretendían evaluar la capacidad del auditor interno para razonar, clasificar, relacionar evidencias de un hecho, hacer preguntas y elaborar una hipótesis en pro de solucionar problemas. Evidenciándose que esta categoría en particular se adquiere con el tiempo, a través de las vivencias y experiencias recogidas a lo largo del desarrollo de la profesión.
3.2.6. Resultados Categoría Evaluación Gráfico 6. Resultados de la Aplicación de la herramienta de evaluación bajo Taxonomía de Bloom – Categoría Evaluación
Fuente: Autor
Tabla 6. Resultados Categoría Evaluación
No. PREGUNTA EV 8 EV 9 EV 11 EV 19 EV 24 EV 35 EV 45 EV 47
% acertividad 17,28% 16,05% 9,26% 17,28% 12,96% 12,96% 6,79% 7,41%
% Desaciertos 0,00% 1,23% 8,02% 0,00% 4,32% 4,32% 10,49% 9,88%
Fuente: Autor
La categoría de Evaluación permite hacer juicios sobre la base de criterios preestablecidos, comparar y discriminar entre ideas, verificar el valor de las pruebas, reconocer la subjetividad, se evidencio un porcentaje de asertividad del 72.32%,
analizados los resultados de las ocho
preguntas aplicadas a la categoría de evaluación se encontró el mayor número de aciertos en las preguntas 8, 19 y 9, en general las preguntas de la categoría de evaluación pretendían evaluar la capacidad del auditor interno para tomar decisiones basadas en argumentos razonados emitiendo juicios de valor basado en criterios determinados. Al igual que la categoría anterior la habilidad de evaluación se adquiere con el tiempo y la experiencia.
3.2.7. Resultado Global Aplicación Categorías de Bloom Gráfico 7. Taxonomía de Bloom
Fuente: Autor
Tabla 7. Taxonomía de Bloom Tpregunta CN CM AP SN AN EV
% AC 51,02% 60,12% 51,19% 39,29% 60,27% 72,32%
% Des 48,98% 39,88% 48,81% 60,71% 39,73% 27,68%
Fuente: El Autor
Al realizar el análisis general de aciertos y desaciertos por cada una de las categorías de Bloom se puede evidenciar que el porcentaje de asertividad de la categoría de Evaluación fue el más alto seguido del de análisis y comprensión ya que las personas objeto de la muestra tienen un nivel de conocimiento de su organización, de sus políticas, procesos, procedimientos en general, lo que les permite tener un grado de expertis al momento de auditar los procesos de la
organización, se evidencia que en el quehacer diario del auditor deben fortalecer la categoría de conocimiento, de aplicación y síntesis, permitiendo de esta manera adquirir la competencia en los diferentes campos de la Taxonomía de Bloom.
3.2.8. Resultado Global Dimensiones Evaluadas Gráfico 8. Número de preguntas aplicadas por Categoría de Bloom
Fuente: El Autor
Tabla 7. Dimensiones Evaluadas
Dimensión CN CM AP SN An EV
Npregunta 196 168 252 112 448 224
Fuente: El Autor
El instrumento se aplico a 28 personas las cuales debían dar respuesta a 50 preguntas, con un total de 1400 preguntas por contestar, la categoría que mayor número de preguntas tuvo fue la de Análisis con 448 preguntas contestadas, seguidas por las de aplicación con 252 preguntas, evaluación con 224 preguntas, conocimiento 196 preguntas, comprensión 168 preguntas y síntesis 112 preguntas.
4. CONCLUSIONES
El proyecto de investigación se centra en el dominio Cognitivo es decir en las habilidades mentales del individuo (Conocimiento).
1. La Universidad Agraria de Colombia en el grupo de investigación quiere desarrollar el proyecto de evaluación de las competencias de los auditores de los sistemas de gestión. Por las limitaciones en la cantidad de personas y sus características como profesiones, sectores, experiencias se irá consiguiendo en forma gradual diversos grupos de personas que completen una muestra representativa que garanticen que la prueba se considere al final una validación de los instrumentos utilizados. 2. Una vez revisados los resultados de la tabla No 8 Dimensiones Evaluadas y de acuerdo a las respuestas obtenidas se evidenció que en la categoría de conocimiento la memorización de hechos específicos es mucho menos importante que el saber dónde encontrarlos cuando sea necesario que las pruebas de conocimiento son “respondientes”, miden la habilidad de los examinados para elegir cuál de las varias opciones es la respuesta correcta, pero no si una persona puede actuar sobre la base del conocimiento.; en general las pruebas de conocimiento predicen lo que una persona puede hacer, no lo que hará. Con base en esto se da un mayor peso a las dimensiones de análisis, evaluación y síntesis ya que ellas definen en ultimas la competencia y la expertis del auditor interno en el desarrollo y resultado de una auditoria.
3. Se evidenció un porcentaje de desaciertos bastante alto en la Categoría de Síntesis, la cual pretendían evaluar la capacidad del auditor interno para integrar, combinar, abstraer y producir algo nuevo basado en el conocimiento y experiencias previas, es importante retroalimentar a cada una de las personas que presentaron el examen en cuanto a sus fortalezas y oportunidades en esta categoría en particular pero sin dejar de lado el conjunto y engranaje con el resto de las categorías ya que todas se interconectan para tener como fin último un conocimiento integral sobre un tema determinado. 4. Los evaluados en su mayoría tienen un nivel de conocimiento de las políticas, procedimientos y procesos de su organización con un nivel de formación en diferentes áreas del conocimiento (Técnicos en procesos de producción, Ingenieros de procesos, Ingenieros Industriales), lo que hizo que los resultados en las categorías de análisis y evaluación estuvieran por encima del 60% de asertividad, esto significa que el conocimiento de un quehacer especifico y la expertis en el mismo se configura en una fortaleza para el auditor interno y le define la competencia. 5. La Taxonomía de Bloom describe el proceso del aprendizaje en los seres humanos, estableció niveles en los que describe el grado de complejidad que el pensamiento requiere para desarrollar un aprendizaje completo e integral, pasando por distintas fases, que van desde recordar hasta crear. La taxonomía de Bloom es de fundamental importancia dentro del diseño de las estrategias de enseñanza, ya que es clave para estructurar y comprender el proceso de aprendizaje perteneciente al dominio cognitivo que se encarga de procesar información, conocimiento y habilidades mentales. Esta taxonomía mediante una estructura jerárquica que va de lo más simple a lo más complejo,
busca que las personas en general que se encuentran en procesos de aprendizaje como es el caso de un Auditor Interno logren los objetivos es un proceso polifacĂŠtico, que consiste en algo mĂĄs que recordar la informaciĂłn.
5. RECOMENDACIONES
1. Teniendo en cuenta que esta herramienta solo mide el dominio Cognitivo es decir las habilidades mentales del individuo (Conocimiento) se recomienda paralelo a la aplicación del instrumento aplicar pruebas psicológicas que midan rasgos de personalidad, actitudes y valores, habilidades y destrezas, para la definición de un perfil integral y la gestión por competencias evaluación 360° de un auditor interno en ISO 9001:2008, con el fin de potencializar a aquellos auditores que lo requieran considerando a este auditor como un líder de negocio para su empresa, el cual trabajará en pro de cumplir y lograr los objetivos económicos de su compañía.
2. Se sugiere replantear las preguntas que tuvieron mayor número de desaciertos por categoría, a continuación se describen por cada una de las categorías cuales son las preguntas que se deben replantear o ser más descriptivas en la formulación de la misma para lograr el nivel de comprensión. -
Categoría de Conocimiento: preguntas 1, 34, 18 y 10
-
Categoría de Comprensión: preguntas 27, 3 y 36
-
Categoría Aplicación: 23, 38, 4, 28, 12
-
Categoría de Síntesis: 25, 10 y 43
-
Categoría de Análisis: 22, 16, 37, 21, 13 y 50
-
Categoría de Evaluación: 45, 47, y 11
Una vez replanteadas las preguntas volver a aplicar el examen para hacer el afinamiento y ajuste del mismo.
3. Se recomienda hacer la validación del instrumento del Re – Test para hacer el proceso de afinamiento y ajuste del mismo.
6. REFERENCIAS
-
Bloom B. S 1973 Taxonomía de los objetivos de la Educación: la clasificación de metas educacionales
-
Spencer, L., & Spencer, S (2003). Competencias en el trabajo. Modelos para un rendimiento superior de formación municipal, (57).
-
Técnicas para la elaboración de preguntas
-
ICONTEC. (2011). NTC 19011 Directrices para la Auditoria De Los Sistemas de Gestión. Bogotá: ICONTEC
7. ANEXOS
Examen Auditor Interno ISO 9001:2008 Examen Auditor Interno ISO 9001:2008 – Taxonomía de Bloom Examen Auditor Interno ISO 9001:2008 Re –Test Examen Auditor Interno ISO 9001:2008 Re – Test – Taxonomía de Bloom Folleto Documentos Auditorias – Examen Auditor Interno ISO 9001:2008 Folleto Documentos Auditorias – Examen Auditor Interno Re – Test ISO 9001:2008