Usando Puntuación Basada en Certeza

Nota: Esta documentación está basada en el estudio muy detallado de Certainty-Based Marking por Tony Gardner-Medwin.

Puntuación Basada en Certeza ( Certainty-Based marking, CBM )

• Después de cada respuesta, Usted dice qué tan seguro está de que su respuesta sea correcta.
• Esto es en una escala de 3 puntos: C=1 (bajo), C=2 (medio) o C=3 (alto)
• No nos confiamos en palabras como 'seguro' o 'muy seguro', porque estos conceptos significan cosas diferentes para personas diferentes
• El esquema de puntuación y el riego de castigo determinan cuando Usted debería de usar cada nivel de C:

Cómo funciona CBM

• Los niveles de certeza 1, 2, 3 siempre le dan puntos 1, 2, or 3 cuando Usted acierta
• Si Usted está equivocado, entonces, a menos que hubiera optado por la opción C=1, Usted perderá puntos: -2 en C=2 y -6 en C=3

¿ Porqué usar CBM ?

• Para hacer que los estudiantes piensen acerca de qué tan confiable es su respuesta
• Para motivar a los estudiantes qa que traten de entender los asuntos, y que no solamente reacionen inmediatamente a una pregunta
• Para desafiarlos: si un estudiante no se arriega a perder puntos si se equivoca, entonces es porque realmente no conoce la respuesta
• Si un estudiante es un pensador cuidadoso, pero no está muy seguro de sí mismo, ganará confianza
• es más justo - una respuesta correcta pensada y certera merece más puntos que una adivinanza afortunada
• Los estudiantes necesitan prestar atención si hacen respuestas equivocadas confianzudamente: ¡ pensar, refleccionar, aprender !
• El estudio eficiente requiere cuestionarse constantemente sobre cómo surgen nuestras ideas y que tan confiables son.

Cómo decidir sobre el mejor nivel de certeza

• If you're sure, obviously you do best with C=3. But you will lose twice over (-6) if you are actually wrong!
• If unsure, you should avoid any risk of penalty by choosing C=1
• In between, you are best to use C=2: you gain 2 or lose 2 depending on whether you are right.
• The graph below shows how the average mark at each C level depends on the probability that your answer will be right.
  • Suppose you think you only have a 50% chance of being right: The highest graph for 50% on the bottom scale is black, for C=1. So you will expect to boost your marks on average most by acknowledging your low certainty (C=1).
  • If you think you can justify your answer well, with less than an 80% chance of being correct, then the red graph is highest, for C=3. Opt for this.

• Note that you can't ever expect to gain by misrepresenting your certainty. If you click C=3 (the red line) when you aren't sure, you will expect to do badly - with very likely a negative mark on average. If you understand the topic well, and think your answer is very probably right, then you will lose if you opt for C=1 or C=2 rather than C=3. You do best if you can distinguish which answers are reliable and which uncertain.

Puntuaciones

Para mayor información sobre puntuaciones (relacionadas con la versión UCL de CBM, aunque también es relevante para Moodle) por favor vea test scores with and without CBM por Tony Gardner-Medwin.