Sugerencias al hacer preguntas de ensayo (de respuesta abierta)

Sugerencias para escribir preguntas de ensayo (de respuesta abierta), traducido y adaptado de Is This a Trick Question? A Short Guide to Writing Effective Test Qestions, by Ben Clay, Kansas Curriculum Center (2001)

1. Formule la pregunta de forma tal que lo que se pide esté definido claramente para el estudiante. Use palabras que orienten al estudiante hacia como quiere Usted que aborde la pregunta. Términos como discuta o explique pueden ser ambigus, Si Usted usa discuta, entonces dé instrucciones específicas acerca de cuales puntos deberían de ser discutidos..

Indeseable: Discuta la filosofía de Karl Marx.

Deseable: Compare a Marx y Nietzscheen sus análisis de los problemas subyacentes de su época en la sociedad europea del siglo 19.

2. Ponga atención en el número de ítems. Para obtener un muestreo más amplio del contenido del curso, use un número relativamente grande de preguntas que requieran respuestas más cortas (de media página), en lugar de unas pocas preguntas con respuestas muy largas (2-3 páginas).

3. Evite usar preguntas opcionales en una prueba de ensayo. Cuando los estudiantes contestan preguntas diferentes, en realidad están haciendo exámenes diferentes. Si hya cinco preguntas de ensayo y a los estudiantes se les dice que solamente cocontesten tres, entonces habrá siez diferentes exámenes posibles, lo que hace difícil el discriminar entre el estudiante que pudo responder correctamente a todas las cinco y aquel que solamente podría responder tres.

Es uso de preguntas opcionales también afectar la confiabilidad del puntaje. Si fuéramos a comparar estudiantes con fines d calificación, entonces todos los estudiantes deberían de hacer las mismas actividades. Otro problema es que los estudiantes podrían no estudiar todo el material del curso si supieran que van a tener una opción drespecto a las preguntas.

5. Escriba ítems de ensayo a diferentes niveles de aprendizaje. La meta es escribir ítem de ensayo que midan los proceso cognitivos superiores. El ítem debería de representar una situación que evalúa la habilidad del estudiante para usar el conocimiento con el fin de analizar, justificar, explicar, contrastar, evaluar y así sucesivamente. Trate de usar verbos que inciten al tipo de pensamiento que Usted quiere que el alumno demuestre. Los instructores a menudo tiene que usar su mejor juicio acerca de cual habiilidad cognitiva está midiendo cada pregunta. Pídale a un colega que lea las preguntas y que las clasifique de acuerdo a la taxonomía de Bloom.

6. Elija un modelo para puntaje. The major task in scoring essay tests is to maintain consistency, to make sure that answers of equal quality are given the same number of points. There are two approaches to scoring essay items: (1) analytic or point method and (2) holistic or rating method.

• Analytic: Before scoring, prepare an ideal answer in which the major components are defined and assigned point values. Read and compare the student’s answer with the model answer. If all the necessary elements are present, the student receives the maximum number of points. Partial credit is given based on the elements included in the answer. In order to arrive at the overall exam score, the instructor adds the points earned on the separate questions.

• Holistic: This method involves considering the student’s answer as a whole and judging the total quality of the answer relative to other student responses or the total quality of the answer based on certain criteria that you develop.

7. Prepare students to take essay exams.

Essay tests are valid measures of student achievement only if students know how to take them. Many college freshmen do not know how to take an essay exam, because they have not been required to learn this skill in high school. Take some class time to tell students how to prepare for and how to take an essay exam. Use old exam questions and let students see what an "A" answer looks like and how it differs from a "C" answer.

RECUERDE

• Make essay questions comprehensive rather than focused on small units of content.
• Provide clear directions as to the expectations.
• Allow students an appropriate amount of time. (It is helpful to give students some guidelines on how much time to use on each question, as well as the desired length and format of the response, such as full sentences, phrases only, outline, etc.)
• Inform students, in advance of answering the questions, of the proportional value of each item in comparison to the total grade.
• Require students to demonstrate command of background information by asking them to provide supporting evidence for claims and assertions.
• Students should be informed about how you treat such things as misspelled words, neatness, handwriting, grammar, etc
• Decide how to treat irrelevant or inaccurate information contained in students’ answers.
• Write comments on the students’ answers. Teacher comments make essay tests a good learning experience for students. Comments serve to refresh your memory should the student question the grade.
• Different scores may be assigned by different readers or by the same reader at different times.
• A context effect may operate; an essay preceded by a top quality essay receives lower marks than when preceded by a poor quality essay.
• The higher the essay is in the stack of papers, the higher the score assigned.
• Papers with strong answers to items appearing early in the test and weaker answers later will fare better than papers with the weaker answers appearing first.
• Scores are influenced by the expectations that the reader has for the students performance. If the reader has high expectations, a higher score is assigned than if the reader has low expectations.
• If we have a good impression of the student, we tend to give him/her the benefit of the doubt.
• Scores are influenced by quality of handwriting, neatness, spelling, grammar, etc.