Propuestas de evaluación en cursos abiertos

Recopilación sobre el tema de la evaluación abierta.

  1. Diego Leal publica un borrador acerca de las actividades de evaluación de los cursos abiertos que ha diseñado y facilitado. La propuesta de Leal se basa en modelos de madurez y en una propuesta mixta de evaluación sumativa y formativa. Hay una autoevaluación que se hace a través de una rúbrica al inicio y al final del curso para ver la evolución experimentada durante el curso. Hay un producto final que es evaluado por el docente. Y también se rastrea la contribución de cada participante al grupo a través de las entradas y comentarios en blogs.
  2. Luz Pearson recoge varias formas de evaluación que ha puesto en práctica en diferentes cursos. Ofrece varios ejemplos de evaluación entre pares, plantea la dependencia que tienen los alumnos de la evaluación del docente como experto y lo más interesante es que recoge un ejercicio de evaluación del profesor por parte de los alumnos que tienen que responder en qué medida la labor del profesor ayudó a su proceso de formación. Parte importante de estas propuestas es que se orientan hacia la cohesión del grupo.
  3. Claudia Guerrero habla sobre una experiencia como alumna basada en una especie de meritocracia basada en la evaluación entre pares. Los participantes valoran los aportes de cada uno al aprendizaje de los demás. Los docentes diseñaron un pormenorizado sistema de recuento y recompensas que iba construyendo el “karma” de cada participante. Todo ello fue implementado con una plataforma open source de preguntas y respuestas. También se aportan ejemplos en torno a preguntas y respuestas recompensados por insignias. Muy interesante.
  4. Leigh Blackall proporciona ejemplos de evaluación que ha llevado a cabo en diferentes cursos. Los ejemplos se basan en objetos de conocimiento que se hacen públicos en palataformas basadas en commons (wikiversity) y en la evaluación p2p. Todo queda documentado en la red de forma que la evaluación es transparente, verificable y demanda una alta responsabilidad  del docente y del alumno.
  5. Cathy Davidson ha escrito bastante sobre la evaluación como proceso de revisión entre pares (aquí y aquí, por ejemplo). En estas entradas cuenta algunos detalles de cómo lleva a cabo este proceso en el que se da gran libertad a los alumnos no sólo para evaluar, sino también para establecer los criterios con los que se va a evaluar. Esto me parece muy importante porque supone entregar la responsabilidad a los alumnos. A veces les damos unos criterios y les pedimos que los apliquen pensando en que están haciéndose responsables de la evaluación cuando en realidad están siendo el brazo ejecutor de lo pensado por otros.
  6. Evaluación basada en el peer review académico. Es una posibilidad para cursos basados en la creación de objetos de conocimiento y orientados a replicar las mismas prácticas que tienen lugar en las comunidades de práctica a la que pertenece la materia que se está enseñando. Por ejemplo, en un curso de ciencias sociales se trabaja en torno a un paper porque la práctica discursiva dominante en ese campo son los papers y se propone una revisión entre pares similar a la que se hace en ese campo. Se puede tomar del procedimiento de cualquier revista y adaptarlo más o menos de acuerdo a las necesidades y objetivos. Puede incluir diversas iteraciones con el fin de mejorar el producto final. En este enlace hay una detallada descripción de un proceso de revisión entre pares y varias referencias en las que se basa. Por supuesto es sólo uno de los ejemplos posibles.

Cosas en común:

  • Evaluación transparente. En muchos casos porque se hace en cursos abiertos donde todo el proceso es público y transparente. Esto implica que cualquiera puede verificar la evaluación.
  • Evaluación que involucra a todos los participantes (profesores, interesados, compañeros) en varios niveles: autoevaluación, heteroevaluación. La evaluación entre pares tiene un gran protagonismo.
  • Predominantemente es una evaluación cualitativa y formativa.
  • Microevaluación realizada a través de la valoración de microtareas de los pares. Se lleva a cabo con insignias, “karmas”, etc. Los participantes acumulan “valor” otorgado por los compañeros y se puede valorar cualquier cosa (el abanico de cosas evaluables es mucho mayor que en la evaluación tradicional).

 

Anuncios

Hybrid days

Se acaba de lanzar el congreso Hybrid Days que es de las propuestas más interesantes que he visto en los últimos tiempos por la voluntad de innovación de sus propuestas.

Organizado por la UNED, Hybrid Days es un congreso virtual dedicado a ese espacio de hibridación “donde conocimiento y acciones se generan en un punto intermedio entre lo virtual y lo físico” abordado de forma transdisciplinar. El congreso tendrá lugar entre el 15 de ocutbre y el 30 de noviembre de 2011, aunque estas fechas son solo una parte puesto que incluye actividades pre y post congreso. Por el tipo de actividades que propone, por el llamamiento a la participación y por la duración del congreso se acerca más a un MOOC que a un congreso tradicional. Hybrid Days se articula en torno a eventos que pueden ser conferencias, seminarios, talleres y no-conferencias.

La gran novedad de la propuesta está en su apuesta por usar el crowdsourcing tanto en la organización del congreso como en la participación y en el sistema de badges (insignias) que desarrollará para incentivar y recompensar la participación.

Badges

La organización define así un badge:

“consiste en un símbolo que actúa como indicador de un logro, habilidad o cualidad. Su uso permite acreditar los aprendizajes y competencias adquiridas en entornos abiertos on-line”.

Últimamente el concepto ha sido puesto en órbita por la Funcación Mozilla y la P2P University que han empezado a desarrollar un sistema de badges para acreditar el aperndizaje en entornos abiertos de aprendizaje entre pares. En estos enlaces se puede encontrar más información sobre estos sistemas de badges:

Fundación Mozilla

An open badge system

Badges in social media. A social psychological perspective.

Los badges intentan ofrecer una respuesta a la necesidad de acreditar los conocimientos, competencias, participación que tienen lugar en los nuevos espacios informales de aprendizaje online. En definitiva una alternativa, o quizá mejor un complemento, a la acreditación formal de las instituciones educativas formales.

Hybrid days ofrece badges de acuerdo a diversos perfiles de participación: participante (en los debates, en las conferencias), traductor (de las comunicaciones, de las actas), evaluador (de las propuestas que se envíen al congreso) y colaborador (organizando eventos del congreso). Estos badges se irán acumulando en el perfil personal de cada participante en el congreso, certificarán el aperndizaje realizado durante el congreso y además podrán ser cangeables por créditos universitarios, becas y premios.

Crowdsourcing

La organización del congreso quiere también ceder parte de su trabajo a los participantes interesados. Para aprovechar los conocimientos y la dedicación de estos participantes ofrece la posibilidad de participar en la organización de formas diferentes: transcribir charlas, traducir, preparar subtítulos, moderar comentarios y debates u ofreciendo infraestructura para la realización de un evento. Dentro del crowdsourcing se incluye tanto a personas como a instituciones. Este trabajo también será reconocido por el sistema de badges.

Está claro que organizar un congreso online y complementarlo con una red social de interesados en el congreso que se organiza, por ejemplo, alrededor de una web no es nada nuevo. De hecho hay muchas propuestas así. También es cierto que muchas veces esa participación deseada no va más allá de que algunos interesados se den de alta en el sistema. Tenemos que ver cómo va a resultar todo, pero me parece que Hybrid Days hace una propuesta valiente para conseguirlo. Primero trabajando en abierto en la organización del congreso (propuestas, evaluación, descentralización) y segundo recompensando la partcipación mediante el sistema de badges. Todavía está por ver cómo de interesantes serán los eventos y de qué forma se incorporan las aportaciones de todos los participantes.

Enlaces de interes

Hybrid Days Web

Dossier del congreso

@hybrid_days

info@hybrid-days.com