Evaluación y autoevaluación con rúbricas, usando TIC (1)

¿QUÉ VAMOS A EVALUAR?

Hemos de tener claro en todas las materias que la evaluación debe tener respuestas para estas TRES preguntas:

• ¿Cómo evaluamos el SABER del alumno?  
• CONTENIDOS CONCEPTUALES
• PROCEDIMIENTOS
• ACTITUDES

Como instrumentos de evaluación habituales nos encontramos con test de opciones multiples, o actividades incluidas en los exámenes en las que pedimos a los alumnos que "reproduzcan saberes"  como la definición de conceptos (¿qué es un verbo irregular?, ¿define nutrición autótrofa?...), lista de conceptos (sobre la obra de un pintor, partes de una flor, valencias de los elementos, ecuaciones físicas o matemáticas...)... Memoria pura y dura que compite contra "el mago Google"....¿Qué saberes son característicos de tu materia?

• ¿Cómo evaluamos lo que SABE HACER el alumno? 
• COMPETENCIAS
• SABER APLICADO

En este aspecto no debemos caer en la trampa de que "saber hacer" es un tipo de contenido que en el lenguaje de la LOGSE se llamaban "procedimientos". En realidad va mucho más allá de la realización de una lámina de dibujo, un problema de mates con enunciado textual, o un resumen compresivo de un texto descriptivo...Saber hacer implica también:

• Crear un mapa conceptual de una unidad didáctica.
• Idear una investigación que permita comprobar una hipótesis científica.
• Aplicar lo aprendido en un escenario diferente para resolver un problema.

• ¿Cómo evaluamos las PRODUCCIONES de los alumnos? 

Entiendo como producciones de los alumnos los trabajos finales que realiza el alumno trabajando individualmente o en grupo:

• Construir un proyecto documental (presentación, poster, informe..) y comunicarlo mediante TIC
• Diseño y explicación de los experimentos para la semana de la Ciencia.
• Participación en la obra de teatro del IES
• Comentario de texto, película, vídeo
• Reseña de un libro de lectura
• Diseño estético de un rincón del centro
• Actividades en la visita de un museo
• Cuaderno de trabajo del alumno (portfolio)

Frecuentemente pedimos a los alumnos este tipo de tareas que no son materia de examen, y con cierta carga de arbitrariedad, asignamos a éstas un valor que contribuye escasamente, en el mejor de los casos, a su calificación trimestral. Cuando ni siquera las tenemos en cuenta, solicitamos un esfuerzo al alumno que no repercute en su calificación, y ellos....tampoco quieren trabajar de gratis.

¿CON QUÉ INSTRUMENTOS EVALUAMOS?

• Exámenes o pruebas: Este es el instrumento de evaluación por excelencia. Pueden ser iniciales, por unidad, trimestrales, finales o extraordinarias.  En ellos se encuentran actividades muy variadas: 
• Las clásicas de un test (por cierto de nos que aparecen en las plataformas digitales) relacion dos listas de términos, elige la opción correcta, imagen con etiquetas, completa estos huecos, encuentra diferencias, etc...
• Actividades "tipo" relacionadas con cada materia: resuleve, calcula, reconoce, explica, justifica,... 

La variedad de actividades y de pruebas es enorme, y seguirán teniendo validez siempre que estén conectadas con los llamadas "estándares de evaluación evaluables".  

¿Cómo lo conseguiremos?

Ligando los estándares de aprendizaje evaluables con las actividades incluidas en las prueba mediante las escalas de evaluación. Así sabremos con cada actividad de cada prueba si realmente estamos realizando la "medición" de cada estandar y la "frecuencia" o número de veces que lo medimos. Puede parecer banal, pero su validez es enorme ya que nos va a garantizar que hemos evaluado, o mejor dicho,  medido y calificado los estándares que indica el currículum. Entre el material didáctico de las editoriales, están estas escalas de evaluación.

En este ejemplo se muestra la escala de evaluación de un examen de 8 actividades. Las 8 actividades tienen distinto valor.

•  Rúbricas. Este instrumento de evaluación, originariamente fueron diseñados para la valoración de "proyectos", tanto del producto final como del proceso de elaboración del producto final.  Ahora se emplean para numerosas actividades que realizan los alumnos:
• Presentaciones en power point.
• Trabajos documentales
• Entradas en un blog
• Expresión oral o escrita
• Valoración de la destreza en el uso de las TIC....y un largo etcétera...

Iremos disponiendo de rúbricas para evaluar el saber, el saber hacer y las producciones de los alumnos en cada una de las variantes que tiene cada materia. 

Sirva como ejemplo esta propuesta para una unidad:

• Generadores de pruebas en torno a los estándares de aprendizaje. Este sería la herramienta perfecta para elegir estándares de aprendizaje (recuerda ques están asociados a contenidos) y generar un modelo de prueba editable que nos permita corregir y calificar en cualquier sentidodesde las competencias a los niveles de desempeño o al revés. Las editoriales de libros de texto, deberían trabajar en este tipo de generadores de pruebas.

Como se puede observar, la valoración de las pruebas objetivas y la ríubricas de evaluación pueden ser instrumentos idóneos para la evaluación de los estándares, pero....

¿CÓMO EVALUAMOS LAS COMPETENCIAS?

El debate y acuerdo,  o la adaptación de las reflexiones de otros, nos van a permitir concluir cómo evaluamos las competencias a través de la evaluación de los estándares de aprendizaje. Tan sólo hay que establecer en las programaciones didácticas y/o programaciones de aula (o por unidades), las relaciones curriculares, de modo que al evaluar los niveles de desemapeño de un estándar de aprendizaje, sepamos en todo momento qué competencia/s estamos valorando.

• Relacionando objetivos con competencias.

• Relacionando estándares de aprendizaje con competencias.

Es importante recordar el contenido del documento que nos envió el Servicio de Inspección Educativa sobre la valoración de resultados académicos y las propuestas a llevar a cabo para su mejora.

Evaluación y autoevaluación con rúbricas, usando TIC (2)

Entre dos mundos

Voy a tratar de explicar algo complejo, que es la conexión entre la evaluación por competencias y la evaluación clásica de toda la vida que básicamente es calificar, aprobar o suspender, y ser o no generoso.

Para evaluar por competencias primero tenemos que programar por competencias y para ello hemos de descender desde las competencias a los indicadores de evaluación que sirvan para decidir si un alumno ha superado un criterio de evaluación. Concretamente el recorrido que debemos realizar, desde lo general a lo más concreto para todas las materias es este:

1. Competencias
2. Objetivos  generales de la etapa, relacionados con las competencias.
3. Objetivos generales de área, relacionados con los dos puntos anteriores.
4. Criterios de evaluación, relacionados con todos los puntos anteriores. (Y hasta aquí tranquilos ya que en los borradores de currículum, están todos relacionados).
5. Indicadores de evaluación, que en normativa LOMCE se llamarán estándares de evaluación. (¿¿ El legislador pretende homogeneizar todos los indicadores para que todos hagamos lo mismo???)

Supongamos que  hemos "aceptado" las relaciones curriculares de una editorial o que nos hemos puesto muy serios y las hemos construido nosotros mismos a través de largos debates o a través de herramientas informáticas. 

Supongamos que YA está construido el árbol curricular.

Supongamos que ahora deseamos aterrizar en el día a día.... y que tras tomar la decisión de evaluar por competencias (aspecto este que marca la normativa desde 2006)...¿qué hacer?...Llega el momento de las rúbricas....

Rúbricas de evaluación: graduación y ponderación

Una rúbrica básicamente es una tabla....observa este ejemplo al que haremos un par de críticas:

Como se puede ver, los aspectos evaluados (que no son indicadores de evaluación) están graduados del 4 al 1, y toda la información está a la vista. Sin embargo al profesor de Matemáticas, con toda lógica, desea que todos los aspectos no cuenten lo mismo, es decir hay que ponderarlos. Por ejemplo (metiendo los pies en el barro): 

• Conceptos matemáticos (15%)
• Errores matemáticos (30%)
• Diagramas y dibujos (5%)
• Rozamiento matemático (20%)
• Estrategia y procedimientos (20%)
• Orden y organización (10%).

¿Cómo graduamos la adquisición de un indicador?  Por lo general la graduación se realiza en cuatro grados (pero puede ser cualquiera):

• 1, 2 , 3 , 4: 1(nivel más bajo) hasta 4 (nivel de excelencia) 
• 0, 1, 2, 3: 0 (nivel más bajo de adquisición de ese indicador) hasta 4 (conseguido al 100%)

¿Cómo ponderamos unos indicadores sobre otros?  La ponderación que la hacemos sobre cada indicador de evaluación para decidir si un criterio de evaluación ha sido alcanzado o no. 

Todos sabemos que el jefe de departamento es el encargado de la redacción de la programación didáctica de las materias del departamento para cada curso, pero en el diseño de las relaciones curriculares y muy especialmente en el diseño de los indicadores de evaluación deben participar todos los profesores del departamento. 

¿Por qué usaremos rúbricas?

 Una buena rúbrica es un excelente instrumento de evaluación (y también califica) debido básicamente a dos aspectos:

1. Ofrece transparencia. El alumno en todo momento sabrá qué es lo que quiere el profesor que aprenda. Recuerda que hasta ahora la única dosis de transparencia que otorgamos a los alumnos la reciben tras recibir el examen corregido numéricamente y cuando el alumno toma nota al realizar el examen en la pizarra.
2. Permite la autoevaluación. La autorregulación de los aprendizajes es clave en el compromiso de los alumnos con lo que hacen día a día. Hasta ahora este aspecto se reduce a opinables:  "he estudiado mucho pero se me ha dado mal"..."...me ha salido regular"...." ha sido un examen inesperado...no ha puesto lo que hacemos en clase". Y aquí queda todo. Si el alumno conoce la regla de medir que va a emplear el profesor a la hora de evaluar un examen, un trabajo, una actuación en clase...ya sabrá cuáles son nuestras pretensiones y hará un ejercicio adicional para regular sus esfuerzos y tratar de alcanzar aquello que consideramos fundamental puesto que
• Conoce qué es aquello que tiene más peso en la nota numérica final.
• Conoce la meta final...el 10, pero ahora sabe cómo se llama.

Generadores y bancos de rúbricas

Rubricas from Kathy Esquía

No hay que engañarse.  La rúbricas NO nacieron para evaluar ni conceptos ni  procedimientos (en términos LOGSE)...las rúbricas nacieron para evaluar los trabajos, los proyectos, las producciones de los alumnos.

Otra cosa es que ahora, para evaluar los estándares de aprendizaje, usemos las rúbricas. 

• ¿Por comodidad? 
• ¿Por desconocimiento de cómo evaluar estos estándares? 
• ¿Por una moda de la LOE y la LOGSE?...

Dejo abierta la reflexión, pero dejando claro que las competencias, han venido para quedarse y es preciso aprender a evaluarlas...
1. Dudiblog (tercer ciclo de primaria). Para valorar las producciones de los alumnos....de todo tipo.

2. Rubistar. Todos sabemos que la creación de las rúbricas de evaluación es muy tediosa. Con esta aplicación online podrás crearlas, excelentes, en muy poco tiempo (la misma aplicación te sugerirá marcadores), guardarlas, editarlas, imprimirlas o acceder a ellas desde cualquier sitio. Es una herramienta gratuita que tan solo requiere registro si deseas disfrutar de todas sus funcionalidades, y está disponible en Español y en inglés.

3. iRubric es una herramienta que permite a los docentes y a los estudiantes crear rúbricas en el aula de una manera sencilla y gratuita.

4. Teach-nology permite generar nuestra propia rúbrica de una manera sencilla y encontrar más de quinientas rúbricas imprimibles. 

5.  CoRubrics sirve para que el profesor evalúe a los alumnos con una rúbrica y también para que los alumnos se coevaluen entre ellos con una rúbrica. Esta plantilla permite automatizar la evaluación con rúbricas. A partir de una rúbrica, crea un formulario, procesa los datos y envía por correo los resultados.  

6. ¿Por qué no aprovechar la funcionalidad de Google Forms para crear nuestras rúbricas?

Instrumentos de evaluación.

Como ya sabéis, este curso debemos adaptar las programaciones didácticas y de aula en 1º y 3º de ESO y en 1º de Bachillerato, cursos en los que se implanta la LOMCE. Durante el pasado curso 2014/15, se realizaron las adaptaciones de estas programaciones en Educación Primaria en Castilla La Mancha, y uno de los documentos que manejaron fue el de instrumentos de evaluación. Entre los instrumentos que describe este documento se encuentran:

1. Técnicas de observación. de este tipo genérico de instrumentos de evaluación, el departamento de orientación seguramente tenga numerosos ejemplos.
1. Registro anecdótico
2. Listas de control
3. Escalas de observación
4. Diarios de clase
2. Revisión de tareas del alumno mediante:
1. Análisis del cuaderno de clase
2. Análisis de producciones
3. Pruebas específicas. Somos expertos en la confección de pruebas objetivas (exámenes) en los que tratamos de incorporar actividades de todo tipo.
1. Pruebas de composición: elaboración de mapas conceptuales, resúmenes, esquemas,..
2. Pruebas objetivas, con enunciados de preguntas de todo tipo
1. Respuestas corta
2. Texto incompleto
3. Emparejamiento
4. Opción múltiple
5. Verdadero/falso ...Un paréntesis de necesidad: ¿Dónde entran aquí nuestros problemas, nuestros análisis sintácticos, comentarios de texto, actividades de pensamiento crítico, argumentación, actividades de investigación....? Aquí hay un enorme escalón entre las actividades de primaria y las de secundaria... ¿Tal vez se busque "primarizar la secundaria"?
4. Entrevistas
5. Autoevaluación: el alumno reflexiona sobre su propio aprendizaje.
6. Coevaluación: evaluar el nivel de desempeño de un alumno a través de sus compañeros.

Tras la lectura de este sencillo documento, alcanzo a esbozar las siguientes reflexiones personales que me gustaría discutir con vosotros:

• No dudo esta tarea de "toma de datos" puede realizarla un tutor de ed. primaria, ya que pasa con su grupo  de 30 alumnos numerosas horas de clase a la semana y no tiene la tensión de un temario que cumplir. Pero....
• ¿Qué profesor que imparte 4 h/semana, 3 h/semana o 2 h/semana tiene tiempo de llevar un registro de estos datos? 
• ¿Cuánto tiempo invierte en "recopilar datos" nuestro profesor si tiene 100 alumnos?
• ¿Dará tiempo en un grupo de 30-35 alumnos a tomar nota de todo esto y dar la clase o realizar alguna otra actividad con los alumnos? 
•  ¿Qué dejamos de hacer para realizar estas tareas: ajustar la programación, diseñar actividades que mejoren el desarrollo de competencias, ....?
• Y si en clase dedicamos minutos a la recogida de datos, ¿podremos cumplir con la temporalización de unidades planificada en el currículum?

• Los profesores más hábiles en la confección de instrumentos de evaluación, y eficaces a la hora de aplicarlos con regularidad pueden recabar este tipo de indicaciones:
• Durante la sesión de clase puede llevar su "particular personal e intransferible ficha" para anotar indicaciones como estas:
• Si un alumno trae o no la tarea del día anterior, mientras el resto realiza una tarea propuesta.
• Si trae o no el material a clase.
• Si falta a clase.
• Si su atención e interés es el adecuado, o por el contrario se distrae.
• Si responde a las preguntas lanzadas al grupo o individualmente, y cómo lo hace.
• Ante producciones de los alumnos, incluidas las propias pruebas objetivas, podemos realizar autoevaluación y coevaluación, pero quizá lo que de más transparencia a nuestro proceso de evaluación sea que el alumno conozca exactamente qué tiene que aprender. Un rúbrica de evaluación por cada unidad, con los estándares de aprendizaje graduados y ponderados, compartida en el blog de aula, sería una magnífica oportunidad de mejorar nuestra evaluación y sus resultados.
• Tras una prueba específica (de composición o pruebas objetivas) si que sabemos tomar nota de qué sabe/sabe hacer y qué no sabe/sabe hacer, orientar mediante indicaciones por escrito los errores, y calificar.
• En cualquier momento, con aquellos alumnos despistados, podemos realizar entrevistas personales intentando motivar al alumno u orientarle en su aprendizaje, no sólo cuando las notas no son buenas, sino cuando esperamos mejores resultados.

PROPUESTAS DE TRABAJO

1ª Propuesta

Sólo se me ocurre un modo eficaz de hacer todo esto de una manera cómoda y automática:

• Disponer de un ordenador durante las sesiones de evaluación en el que el tutor a través de un formulario de Google Drive (se muestra un ejemplo) pueda elegir a cada alumno, y de modo colegiado, realizar indicaciones de todo tipo sobre el mismo.

• VENTAJAS:
• Los resultados de este instrumento pueden ser consultados (siempre de modo privado) en cualquier momento.
• El acta de evaluación será real y útil.
• Conoceremos y reflejaremos la evolución de cada alumno en tres momentos claves, coincidiendo con las sesiones de evaluación. De este modo la información de un alumno queda a disposición para el equipo docente del nuevo curso, y no tendremos que esperar un mes para conocer las capacidades y resultados de los alumnos. Es decir tendremos una historia académica real y útil.

• DESVENTAJAS, o RETOS para un equipo de profesores antes estas tareas:
• Consensuar la estructura y contenidos de este formulario para que recoja la realidad.
• Diseñar un formulario común para cada curso: 1º, 2º, 3º, 4º, 1ºBTO, 2ºBTO, Pmar, FPB...).
• Alojar todos los formularios en un lugar privado: blog, Sites, Moodle; Web...

La alternativa a esta propuesta, es la de siempre...cada uno a lo suyo...

• Seguir con nuestra "ficha-tesoro" en el mejor de los casos.
• Disponer del ordenador/tablet en clase (otro que no sea el del cañón de vídeo)y utilizar un formulario de Google Drive en el que tengamos previsto qué datos deseo obtener "en vivo y en directo"...
• Pedir que un alumno "ayudante" te haga el trabajo mientras impartimos clase , y NO es su papel....¿no crees?

2ª Propuesta

Sólo cuando consigamos que el alumno sea consciente de cómo aprende, lograremos revertir nuestros resultados. Para ello hemos de procurar que el alumno se implique en su propia regulación del aprendizaje mediante la reflexión y auto-evaluación que le permitan desarrollar la conciencia de qué hace bien o mal y qué debería hacer (Competencia de aprender a aprender)

¿Cómo podemos encontrar ayuda para lograr este objetivo? Mediante formularios de evaluación que rellene el alumno a través del blog de aula, y cuyos resultados lleguen exclusivamente al profesor. Esta excelente información, servirá para organizar entrevistas eficaces con el alumno y sus familias.

En la bibliografía sobre didáctica existen numerosos cuestionarios, escalas o inventario de opinión fácilmente re-convertibles a formularios.