La evaluación de aprendizajes en ambientes virtuales en la Educación Superior :15/03/2009 1 La evaluación de aprendizajes en ambientes virtuales en la Educación Superior Bernardo Restrepo Gómez, Ph. D. 2008


Antecedentes :15/03/2009 2 Antecedentes Esta ponencia es producto de una investigación documental, Estado del Arte de la investigación publicada sobre evaluación de aprendizajes en entornos virtuales y a distancia entre 1985 y 2008. El estudio lo emprendieron en 2007, bajo la dirección del ponente, tutores de la Fundación Universitaria Católica del Norte, institución virtual.


Metodología :15/03/2009 3 Metodología Investigación documental en la que prevalecieron dos procedimientos: Análisis de contenido de investigaciones y publicaciones entre 1985 y 2007 Discusión de grupo


Marco referencial sobre concepciones de Evaluación del Aprendizaje :15/03/2009 4 Marco referencial sobre concepciones de Evaluación del Aprendizaje Evaluación = Examen El modelo de Tyler: resultados vs. Objetivos, pero teniendo en cuenta externalidades. Evaluación Lancasteriana, como instrumento de poder (férula o castigo). Evaluación como control de calidad de la enseñanza. Evaluación como control de calidad del programa. Evaluación como mejoramiento continuo del proceso integral de aprendizaje, no sólo de la dimensión cognitiva.


Concepciones adoptadas en el estudio :15/03/2009 5 Concepciones adoptadas en el estudio Evaluación como control de calidad de la enseñanza: tipos de aprendizaje con énfasis en conocimiento estratégico, no sólo declarativo. Evaluación como control de calidad del programa: pertinencia, autenticidad-competencias. Evaluación como mejoramiento continuo en pos de formación integral.


Slide 6:15/03/2009 6 Para qué evaluar Qué evaluar Cómo evaluar Quién evalúa Cuándo evaluar Categorías Finales


Categorías finales de análisis :15/03/2009 7 Categorías finales de análisis Para qué evaluar (intencionalidad) Qué evaluar (tipos de aprendizaje) Cómo evaluar (técnicas e instrumentos) Quién evalúa (agentes de la evaluación) Cuando evaluar (Momentos de la evaluación)


1. PARA QUÉ Evaluar? :15/03/2009 8 Evaluación del aprendizaje (saberes y competencias) Evaluación para el aprendizaje (realimentación) Evaluación como aprendizaje (prácticas evaluativas de los estudiantes) Evaluación desde el aprendizaje (“saber qué sabe el estudiante y actuar en consecuencia”). 1. PARA QUÉ Evaluar?


2. Productos de la Evaluación :15/03/2009 9 2.1. Dominios de aprendizaje: cognitivo, afectivo, sicomotor 2.2. Metas de aprendizaje: * conocimientos declarativo y * Conocimiento estratégico (conocimiento sobre cómo se busca, se construye, se usa y se aplica el conocimiento en contextos dados) 2. Productos de la Evaluación


El problema de “ALINEACIÓN” entrelas metas del tutor y las expectativas de los estudiantes. :15/03/2009 10 El problema de “ALINEACIÓN” entrelas metas del tutor y las expectativas de los estudiantes. El tutor puede tener metas adecuadas, pero las más de las veces los estudiantes presionan en pos de lo que consideran más conducente a obtener buenas notas. Los tutores deben tratar de alinear ambos aspectos, motivando a los estudiantes hacia el alto logro: aprender a aprender, metacognición, aprendizaje estratégico, desarrollo de habilidades superiores de pensamiento…


Slide 11:15/03/2009 11 Varios estudios (Strother, 2002; Conway, 2003) han comprobado que si los tutores reducen su evaluación a técnicas sencillas y elementales como Falso y Verdadero, escogencia múltiple, los estudiantes adoptan el hábito para responder este tipo de instrumentos que suelen sondear conceptos; en cambio, si se pide reflexión y construcción, se prepararán para la evaluación del razonamiento crítico.


Slide 12:15/03/2009 12 El principio de Autenticidad. Rocío Quesada (2006), en artículo sobre la “Evaluación del aprendizaje en educación a distancia –en línea-” plantea este principio, consistente en la correspondencia entre los procesos intelectuales exigidos en las eventos evaluativos y aquellas competencias que el ejercicio de la profesión requerirá en la vida real. Según Bustos (2006), este tipo de evaluación requiere también aprendizaje colaborativo y por consiguiente la formación para trabajo en grupo y solución de conflictos.


:15/03/2009 13 En esta categoría se trabajaron tres subcategorías, a saber: Realimentación o feedback Técnicas e instrumentos Software especialmente construido para evaluación en e-learning 3. Cómo evaluar: Técnicas


La Realimentación o feedback. :15/03/2009 14 La Realimentación o feedback. Esta técnica evaluativa ha sido intensamente investigada en todos los niveles de la educación y se concluye que informar al estudiante sobre su desempeño a lo largo de las actividades de aprendizaje favorece la efectividad y la calidad del mismo. Contreras y otros (2007) plantean que la inmediata respuesta del tutor en línea, comentando el trabajo del alumno, es factor formativo de primera magnitud.


Realimentación o feedback :15/03/2009 15 Realimentación o feedback Pero es más: algunos autores califican el buen feedback como INVESTIGACIÓN DE AULA. En efecto, para enviar al estudiante información sobre su desempeño, el tutor tiene que reflexionar sobre la información obtenida del estudiante para tomar decisiones sobre la información de retorno. El portafolio es un mar de datos riquísimos para hacer seguimiento al desempeño del estudiante, para investigar su progreso.


Técnicas e instrumentos :15/03/2009 16 Técnicas e instrumentos El desarrollo y aplicación de técnicas e instrumentos de evaluación en la educación virtual, especial para ésta, es bastante reciente. Los estudios datan principalmente de los últimos años de la década del 90 y de la presente década. Entre los medios más destacados figuran los portafolios digitales, los mapas conceptuales, los proyectos de aplicación en contextos, evaluación en línea, forogramas y otros.


El portafolio :15/03/2009 17 El portafolio Técnica relativamente reciente de gran utilidad para la autoevaluación y la coevaluación, principalmente en al evaluación formativa o continua. El portafolio permite que el estudiante sea protagonista de su aprendizaje y monitoree sus progresos y dificultades. Existen ya los portafolios digitales.


Software especializado para evaluación. :15/03/2009 18 Software especializado para evaluación. Paralelamente a la construcción de software para la enseñanza, se viene creando software para evaluación. Tres son los programas informáticos utilizados para evaluar los aprendizajes de los estudiantes: Entornos virtuales de formación Herramientas de autor Software específico más complejo


Entornos virtuales de formación :15/03/2009 19 Entornos virtuales de formación Son las plataformas LMS. Ayudan al tutor a gestionar un curso completo: Distribuir los contenidos Interaccionar con los estudiantes a través de: Correo electrónico Foros Chats.


Herramientas de autor: :15/03/2009 20 Herramientas de autor: Software destinado a la creación de programas a modo de ejercicios o tareas con diferentes niveles de dificultad que el mismo sistema va graduando de acuerdo con el progreso individual (Hot Potatotes, Quia!, Clic, etc., de uso libre).


Software más complejo (propietario) (Perception y Quiz Factory…) :15/03/2009 21 Software más complejo (propietario) (Perception y Quiz Factory…) Permite poner en la red toda la institución para: Creación y publicación de los exámenes Seguimiento de los estudiantes y recoger resultados.


Posibilidades de evaluación de las plataformas tecnológicas: :15/03/2009 22 Posibilidades de evaluación de las plataformas tecnológicas: Muria (2004) plantea tres posibilidades de evaluación de Web CT: Seguimiento automatizado a estudiantes y tutores Informes de los usuarios (pruebas con preguntas abiertas y cerradas) Análisis sobre herramientas de comunicación (correo, foro, chat y pizarra electrónica)


4. Quién evalúa? :15/03/2009 23 Heteroevaluación Coevaluación Autoevaluación 4. Quién evalúa?


Heteroevaluación :15/03/2009 24 Heteroevaluación Es iniciativa del tutor y busca comprobar si los estudiantes están alcanzado las competencias esperadas. Estos deben conocer desde el comienzo del curso o actividad curricular cuáles criterios orientarán la evaluación y cuáles competencias deberán lograrse.


Coevaluación :15/03/2009 25 Coevaluación Esta evaluación se realiza entre el tutor y el estudiante o entre grupos de estudiantes que trabajan colaborativamente para alcanzar las metas propuestas. Este tipo de evaluación se facilita en los ambientes virtuales, dadas las técnicas utilizadas, como el chat y los foros de discusión en los cuales la participación colectiva es natural y se fomenta desde la tutoría.


Autoevaluación :15/03/2009 26 Autoevaluación En esta modalidad el estudiante es el protagonista de la evaluación. El objetivo central es que el estudiante reflexione sobre los contenidos, la metodología, las fortalezas y debilidades durante el proceso de desarrollo de sus competencias. Lo más importante es que la reflexión crítica amplía el proceso de aprendizaje dirigiéndolo en la dirección correcta. El portafolio es la técnica preferida para la autoevaluación.


Slide 27:15/03/2009 27 Scriven (1967) estableció una diferencia entre evaluación formativa y evaluación sumativa, y Ausubel (1983) planteó la necesidad de hacer una evaluación de los conceptos previos de los estudiantes a manera de evaluación diagnóstica, en pos de aprendizaje significativo. Se ha encontrado que en la educación virtual, con mayor necesidad que en la presencialidad, se evalúa en tres momentos: al inicio, evaluación diagnóstica, continuamente, evaluación formativa y al final, evaluación sumativa. 5. Cuándo evaluar


Evaluación diagnóstica :15/03/2009 28 Evaluación diagnóstica Consiste en averiguar qué sabe el estudiante al comienzo de la actividad curricular. Pretende saber si sus conocimientos, habilidades y actitudes en el momento de iniciar son las necesarias para enfrentar con probabilidades de éxito el nuevo aprendizaje, o si es menester emprender actividades de nivelación.


Evaluación formativa :15/03/2009 29 Evaluación formativa Tiene lugar durante todo el curso o actividad curricular. En educación virtual se ha señalado el portafolio como técnica de especial poder para este seguimiento del progreso del estudiante.


Evaluación sumativa :15/03/2009 30 Evaluación sumativa Es la evaluación final en la que se recoge e interpreta toda la valoración que se ha hecho del aprendizaje del estudiante desde un comienzo. Por medio de esta interpretación final se decide la certificación del aprendizaje y se califica para efectos de acreditación del curso o actividad curricular respectiva.


Implicaciones prácticas :15/03/2009 31 Implicaciones prácticas Este estado del arte arroja importantes implicaciones para la práctica de la evaluación de aprendizaje de tutores y estudiantes en la educación virtual. La investigación social no debe quedarse en los hallazgos. La ciencia y el conocimiento deben ser gestionados para la transformación de la sociedad y sus instituciones.


Sobre el para qué evaluar :15/03/2009 32 Dos implicaciones prácticas : Evaluación desde el aprendizaje, es decir, averiguar qué sabe el estudiante y actuar en consecuencia para lograr aprendizaje significativo. Evaluación para el aprendizaje, o sea, Retroalimentación oportuna al estudiante para estimular su aprendizaje. Sobre el para qué evaluar


Sobre el qué evaluar :15/03/2009 33 El aprendizaje estratégico: productos creativos de conocimiento. Evaluaciones productivas o competencias generales, ciudadanas, laborales y científicas en cada campo y área del conocimiento, todo dentro de una concepción de evaluación AUTENTICA. Sobre el qué evaluar


Sobre el cómo evaluar :15/03/2009 34 Técnicas alternativas, como mapas conceptuales, rúbricas, aprendizaje colaborativo en la red, que opera como técnica de realimentación de competencias entre los participantes, y portafolios digitales. Sobre el cómo evaluar


Sobre quién evalúa :15/03/2009 35 La autoevaluación orientada a que el estudiante sea protagonista de su aprendizaje y monitoree sus fortalezas y debilidades a lo largo del proceso de aprendizaje. De esta manera construye mejor su capacidad crítica. Sobre quién evalúa


Sobre cuándo evaluar :15/03/2009 36 Lo adecuado es combinar la evaluación diagnóstica con la formativa o continua y con la sumativa. Sobre cuándo evaluar


QUÉ SIGUE EN LA UCN? :15/03/2009 37 QUÉ SIGUE EN LA UCN? La siguiente fase es llevar a cabo miniexperimentos para poner a prueba varios de los hallazgos de este Estado del Arte en los programas de la Universidad Católica y compartir luego sus frutos con la Comunidad Académica Nacional.