Validación del instrumento de evaluación: competencias del proyecto institucional
El texto muestra una manera de abordar la evaluación con enfoque de competencias, utilizando un instrumento diseñado con bloques completos balanceados, que se rotan en espiral para ensamblar distintos cuadernillos de prueba. El constructo que se evalúa es el saber hacer, con el saber de un campo, en distintos contextos del mundo de la vida, que se deriva de la comprensión del Proyecto Institucional, PI, de la Universidad Cooperativa de Colombia.
Saber hacer, entendido como la capacidad de realizar tareas que se organizan en cuatro niveles de la taxonomía SOLO (Structure of Observed Learning Outcomes) propuesta por John Biggs: uniestructural, multiestructural, relacional y abstracto ampliado. Saber de un campo, en términos del conocimiento y dominio de los conceptos y elementos, con los que se estructuran las declaraciones del PI, acerca de la misión y la visión, los principios y valores, el profesor, la autoevaluación y la acreditación, la proyección social y la extensión, los lineamientos curriculares, la gestión, el bienestar y la internacionalización, entre otros. Y contextos del mundo de la vida, en forma de fragmentos que ilustran situaciones locales, sociales o globales y que pueden colocarse en diálogo con el objeto de evaluación, tales como : Maestros, de Alfonso Borrero, Declaración para el diseño del Sistema de Educación Europeo, de La Sorbona, Acerca de la competencia comunicativa, de Dell Hymes, Educación para un
nuevo humanismo, de Guillermo Hoyos, Formas contemporáneas de gobierno y administración universitaria, de Miguel Ángel Escotet, o Las universidades como productora de conocimiento en Colombia, de Milcíades Vizcaíno y Ruth Muñoz, entre otros.
El principal aporte del texto es la validación del instrumento empleado, la cual comprende dos fases centrales. Primero, validación de contenido, que tiene lugar al interior de una colegiatura de profesores y directivos, antes de la aplicación, con base en la discusión teórica y la concertación argumentada de cada componente, para asegurar la pertinencia y relevancia de las situaciones elegidas en los contextos, las declaraciones tomadas del PI como referencia y los enunciados y opciones de los ítems o preguntas formuladas, de acuerdo con los niveles de competencia establecidos en el diseño. Y segundo, validación estadística, de naturaleza empírica, que ocurre después de la aplicación, la cual se lleva a cabo estimando indicadores que surgen al resolver el modelo de Rasch, de la teoría de respuesta al ítem con un parámetro, el de la dificultad, tomando como insumo el universo de cadenas de respuesta logradas, para analizar el desempeño observado y confirmar la validez, tanto de los ítems en forma individual e independiente como del instrumento en su conjunto.
Los valores estimados en la fase de validación estadística, y que se presentan en el texto junto con algunos criterios de aceptación recomendados en el estado del arte respectivo, sustentan la calidad del instrumento elaborado y aplicado, así como la confiabilidad de los resultados hallados, para efectos de tomar decisiones ciertas y soportadas en información precisa. De otra parte, el texto aporta una metodología adecuada para demostrar la validez estadística de instrumentos de evaluación.
