Hinweis: Sie sind auf den Seiten der Moodle 1.9 Dokumentation. Die Dokumentation der aktuellsten Moodle-Version finden Sie hier: Tests effektiv durchführen.

Tests effektiv durchführen: Unterschied zwischen den Versionen

Aus MoodleDocs
Wechseln zu:Navigation, Suche
Keine Bearbeitungszusammenfassung
Keine Bearbeitungszusammenfassung
 
(4 dazwischenliegende Versionen desselben Benutzers werden nicht angezeigt)
Zeile 1: Zeile 1:
{{Zum Übersetzen}}
Siehe [[:en:Effective quiz practices]]
{{Test}}
{{Test}}
As we’ve seen, Moodle quiz engine is a powerful, flexible tool for monitoring and diagnosing student performance with certain types of knowledge. Using this tool effectively can boost your course’s effectiveness, and promote student performance. While a computer-scored quiz is a different performance than more open-ended assessments, it does give a valuable window onto student thinking, especially when you use good strategies, and a little creativity.
Wie Sie sicher schon bemerkt haben, sind Tests in Moodle ein mächtiges Werkzeug, um den Wissenstand der Lernenden zu ermitteln und Lernerfolgskontrollen durchzuführen. Wenn Sie Tests effektiv in Ihrem Kurs einsetzen, können Sie die Effektivität Ihres Kurses insgesamt steigern und den Lernerfolg Ihrer Teilnehmer unterstützen. Auch wenn computer-gestützte Test mit automatisierter Bewertung eine andere Art der Leistungsüberprüfung darstellen als "freiere" Prüfungsformen, bieten Sie doch wertvolle Einblicke in die Denkweise der Lernenden, insbesondere dann, wenn Sie gute Strategien und ein bisschen Kreativität bei der Gestaltung der Tests einsetzen.


=Quiz strategies=  
==Test-Strategien==
Of course, using the quiz engine effectively takes some work and practice. The first thing to do is to use effective question design strategies. If you ask good questions, you’ll get useful data about your students’ performance and understanding of the material. Of course, the converse is also true. There is a ton of literature about effective assessment design available. I’ll just highlight a few of the most important ideas.
Natürlich erfordert es einen gewissen Aufwand und ein gewisses Maß an Erfahrung, wenn man Tests effektiv nutzen möchte. Der erste Punkt sind effektive Strategien zur Gestaltung von Testfragen. Wenn Sie "gute" Fragen stellen, erfahren Sie viel über den  Wissensstand und den Grad des Verständnisses des Lernstoffs seitens der Lernenden. Ebenso gilt umgekehrt: Wenn Sie "schlechte" Fragen stellen, erfahren Sie wenig. Es gibt Berge von Literatur darüber, wie man Lernerfolgskontrollen effektiv gestaltet. Ich möchte hier nur die wichtigsten Ideen aufzeigen.
#Tie each question to a course goal. After all, you want to know whether your students are achieving the goals of the course, so why not ask them directly?
#Verbinden Sie jede Frage mit einem Lernziel des Kurses. Letztendlich möchten Sie wissen, ob Ihre Teilnehmer ein Lernziel erreicht haben - warum also nicht direkt fragen?
#Try to ask multiple questions about each important idea in the class. This gives you more data points about student understanding.
#Versuchen Sie, mehrere Fragen zu jedem wichtigen Thema des Kurses zu stellen. Dadurch gewinnen Sie mehr Anhaltspunkte über den Wissensstand und das Verständnis der Lernstoffs seitens der Lernenden.
#When writing a multiple-choice question, be sure each wrong answer represents a common mis-conception. This will help you diagnose student thinking and eliminate easy guessing.  
#Wenn Sie Multiple-Choice-Fragen entwickeln, stellen Sie sicher, dass jede Falschantwort auf einem typischen Fehler oder Mißverständnis beruht. So können Sie die Gedankengänge der Lernenden besser analysieren und "einfaches Raten" vermeiden.
#Write questions requiring your students to think at different levels. Include some recall questions, some comprehension questions and some application and analysis questions. You can determine where students are having problems in their thinking. Can they recall the material, but not apply it?
#Entwickeln Sie Fragen, die Ihre Teilnehmer zum Denken auf verschiedenen Ebenen anregen. Verwenden Sie eine Mischung aus "Merkfragen" zum einfachen Wissensabruf, Verständnisfragen, anwendungsorientierte Fragen und Analysefragen. Dann können Sie feststellen, wo Ihre Teilnehmer Probleme haben, z.B. ob Sie den Lernstoff wiedergeben, aber nicht anwenden können.
#Test your questions. After you’ve established an initial question bank, use the system reports to determine which questions are useful, and which aren’t. As you write new questions, give them a lower point value and throw in a few to establish their reliability.
#Testen Sie Ihre Fragen. Wenn Sie eine Fragen-Datenbank aufgebaut haben, nutzen Sie die Ergebnisanalysemöglichkeiten von Moodle, um herazszufinden, welche Fragen nützlich sind und welche nicht. Wenn Sie neue Fragen erstellen, geben Sie ihnen zunächst weniger Punkte, um erst ihre Zuverlässigkeit zu testen.


Once you’ve got a few well-written test banks, be sure to use the quiz reports and statistics to monitor your classes performance. The detailed reports and statistics available to you are valuable tools for understanding student understanding of the material.
Sobald Sie einige "gute" Fragen-Datenbanken entwickelt haben, nutzen Sie die Test-Berichte und Ergebnisanalysen, um den Leistungsstand Ihrer Teilnehmer zu kontrollieren. Moodle stellt wertvolle Werkzeuge zur Analyse der Ergebnisse bereit, um eine Vorstellung vom Wissens- und Kenntnisstand der Lernenden zu gewinnen.  


=Creative quiz uses=
==Kreative Nutzung von Tests==
With the Moodle quiz engine, it’s easier to utilize educationally sound assessment strategies which would be too difficult to implement with paper and pencil. Most people think of tests as an infrequent, high-stakes activity, like mid-terms and finals. Better strategies involve frequent, low-stakes assessments you and your students can use to guide their performance during the course of the semester.  
Mit Moodle Tests ist es einfacher, bestimmte Arten der Lernerfolgskontrolle einzusetzen, als dies "mit Papier und Stift" möglich wäre. Viele Menschen verbinden mit Tests relative selten vorkommendee und mit hohem Einsatz verbundene Aktivitäten wie Zwischenprüfungen oder Jahresabschlussprüfungen. Bessere Strategien verwenden Tests als häufige, mit relative wenig Aufwand verbundene Kontrollen, die es sowohl Lehrenden als auch Lernenden in regelmäßigen Abständen ermöglichen, den Wissens- und Kenntnisstand zu überprüfen.  


Creating a series of small mini-tests gives you a very flexible system for gauging performance and keeping students engaged in the class. Here are a few ideas for quick quizzes you can use as part of a larger assessment strategy.
Die Nutzung einer Reihe von Mini-Tests gibt Ihnen ein flexibles System, den Leistungsstand zu messen und die Teilnehmer im Kurs aktiv und engagiert zu halten. Im folgenden finden Sie einige Vorschläge für solche kleinen Tests, die Teil einer umfangreicheren Strategier zur Lernerfolgskontrolle sein können.  


==Chapter Checks==
===Leseverständnis-Tests===
Getting students to complete reading assignments has to be one of the hardest motivational tasks in education. Reading is critical to understanding most material, and fundamental to success in many classes. The problem for most students is there is no immediate reward or punishment for procrastinating on a reading assignment. If you haven’t done the reading for a class discussion, you can either keep quiet, or, as I used to do occasionally, wing it by skimming in class. If you have a lecture course, there’s almost no need to do the reading as the lecturer usually covers most of the material in class anyway.  
Es ist eine der schwierigsten Motivationsaufgaben im Bildungsbereich, die Lernenden anzuhalten, Leseaufgaben vollständig zu absolvieren. Das Lesen ist die Grundvoraussetzung für das Verstehen des Lernstoffs und in den allermeisten Fällen fundamental wichtig für den Lernerfolg. Das Hauptproblem für die meisten Lernenden besteht darin, dass es beim Lesen keine unmittelbare Belohnung oder Bestrafung wegen Aufschiebens gibt. Wenn Sie z.B. das Material nicht gelesen haben, auf dessen Grundlage eine Diskussion geführt werden soll, können Sie sich still verhalten oder improvisieren, indem Sie während der Diskussion das Material durchblättern bzw. überfliegen. Oder z.B. im Fall einer Vorlesung ist es häufig nicht nötig zu lesen, da der Lehrende ohnehin das Meiste im Vortrag präsentiert.  


Creating a little mini-test for each reading assignment solves a number of problems. First, it encourages students to do the reading so they can do well on the quiz. Second, it gives the students feedback on how well they understood the reading assignment. Third, it give you data about what aspects of the reading students found confusing, and which they have already mastered so you can focus your class activities.
Wenn Sie jedoch für jede Leseaufgabe einen Mini-Test kreieren, lösen Sie gleich mehrere Probleme. Erstens motivieren Sie Ihre Teilnehmer zum Lesen, damit Sie den test überhaupt durchführen können. Zweitens erhalten die Teilnehmer ein Rückmeldung darüber, inwieweit sie das Gelesene verstanden haben. Drittens liefert Ihnen das Ergebnis des Test Anhaltspunkte darüber, wo es Verständnisprobleme gab und was bereits gut verstanden wurde, so dass Sie in der nächsten Stunde entsprechend darauf reagieren können.


For a reading mini-test, I would recommend setting a limited time quiz students can only take once. Because it’s a low-stakes activity you want students to use for self-assessment, I would also display feedback and correct answers. If you’re concerned about students sharing answers after they’ve taken the quiz, randomize the question and answer order. If you have a test bank, make some of the questions random as well. As an additional assignment, students should write down one question about a question they got wrong, and bring it to class.
Für solch eine Mini-Test zu Leseaufgaben empfehle ich einen zeitbegrenzten Test, bei dem nur ein Versuch erlaubt ist. Da es sich um eine für den Teilnehmer mit wenig Aufwand verbundene Aktivität zur Selbstkontrolle handelt, würde ich auch bei Feedback geben und die richtige Antwort anzeigen. Wenn Sie befürchten, dass die Lernenden die Lösungen austauschen, mischen Sie Fragen und Antworten und/oder verwenden Sie Zufallsfragen. Als zusätzliche Aufgabe können Sie die Teilnehmer auffordern, zu einer Testfrage, die sie falsch beantwortet haben, eine Frage zu formulieren und in die nächste Stunde einzubringen.


==Test Practice==
===Test-Praxis===
They key to effective practice is to have a realistic practice environment. Many students worry about tests, especially high-stakes tests, because they have no idea what to expect. What question format will you use? How detailed will the questions be? What should they study?
Der Schlüssel zu einer effektiven Test-Praxis ist eine realistische Übungsumgebung. Viele Lernende machen sich Sorgen wegen Online-Tests, weil sie nicht wissen, was sie erwartet. Welche Fragetypen werden verwendet? Wie detailliert werden die Fragen sein? Was sollen sie lernen?


You can help alleviate test anxiety by creating a practice test students can take to help answer these questions. These tests are usually based on old questions similar to the current test questions. Use last years final as an example test, which will force you into the practice of writing new questions every year. This is a good idea anyway, as you can be sure someone has a copy of last year’s test they are sharing with others.
Sie können diese Sorgen abmildern, indem Sie Übungstests anbieten. In solchen Übungstests können Sie alte Fragen aus früheren Prüfungstests verwenden, die den eigentlichen Prüfungsfragen ähneln. Wenn Sie alte Prüfungstests für Übungszwecke nutzen, werden Sie außerdem gezwungen, sich immer wieder neue Fragen auszudenken und so schrittweise eine große Fragen-Datenbank aufzubauen, aus der Sie schöpfen können. Außerdem ist die Gefahr groß, dass unter den Teilnehmern Ihre alten Testfragen kursieren, so dass Sie diese ohnehin nicht in der Prüfung verwenden sollten.


To set up a practice test, I’d create a zero point test with questions from the year before in random order with random answers. I would also allow students to take the test as many times as they’d like so they can test themselves as much as they need. Display feedback, but not correct answers so it presents more of a challenge.  
In einem Übungstest empfehle ich die Verwendung der Prüfungsfragen vom letzten Jahr, in zufälliger Reihenfolge und gemischten Antworten, ohne Bewertung. Außerdem würde ich beliebig viele Versuche zulassen, so dass die Teilnehmer so lange üben können, wie sie möchten. Ich würde Feedback anzeigen, aber nicht die richtigen Antworten - dann ist der Test eine größere Herausforderung.  


==Data gathering==
===Sammlung von Daten===
As an expert, you know a lot about your field. Your challenge as a teacher is to translate your knowledge for a novice who doesn’t share your conceptual structure or experience. An example or lecture you think is brilliant may leave your students completely confused. It can be hard to tell what students really understand and what’s leaving them baffled.
Als Experte wissen Sie viel über Ihr Fachgebiet. Ihre Herausforderung als Lehrender besteht darin, Ihr Wissen den Lernenden zu vermitteln, die normalerweise nicht über Ihre Erfahrungen verfügen. Ein Beispieloder ein Vortrag, den Sie brilliant finden, kann für Ihre Lernenden völlig unverständlich sein. Oft ist es schwierig herauszufinden, was Ihre Lernenden wirklich verstanden haben und was nicht.


A data-gathering quiz is similar to a chapter check, but it takes place after a class meeting or lecture. Your goal is to quickly get some feedback on student understanding of a lecture. What did they really understand? What do you need to spend more time on? I’ve found many instructors have trouble gauging what students find difficult, and what the students find so easy they are bored.  
Ein Test zur Sammlung von Daten ist ähnlich wie ein Leseverständnis-Test, aber er findet ''nach'' einer Präsenzstunde oder einem Vortrag statt. Der Zweck eines solchen Tests ist, ein schnelles Feedback zum Grad des Verständnisses der Stunde bzw. des Vortrags zu bekommen. Was haben die Teilnehmer aus dem eben Gehörten wirklich verstanden? An welcher Stelle muss noch einmal nachgearbeitet werden? Häufig fällt es schwer abzuschätzen, was die Lernenden wirklich schwer finden und was so leicht ist, dass es sie langweilt.


Setting up a post-class data-gathering quiz is similar to creating a chapter check. Set the quiz for a limited time, like a day or two before the next meeting. Allow them to take it once and display feedback and correct answers.  
Ein Test zur Sammlung von solchen Informationen im Anschluss an eine Präsenzstunde wird wie folgt konfiguriert: Er findet ein bis zwei Tage vor der nächsten Stunde statt und ist zeitbegrenzt. Es wird nur ein Versuch erlaubt. Außerdem werden das Feedback und die richtigen Antworten angezeigt.


=Quiz security and cheating=
==Sicherheit und Schummeln bei Tests==
Of course, online testing also presents another chance for the cheaters in your classes to try to game the system. Most online quizzes are meant to be taken at home, or at least outside of class. Students can download the questions and print them out. They can take the tests with other students, or while reading their textbooks.
Natürlich bieten Online-Tests neue Möglichkeiten zu  schummeln. Die meisten Online-Tests sind zur Durchführung zu Hause gedacht, zumindest aber außerhalb der Präsenzstunde. So können Teilnehmer die Fragen herunterladen und ausdrucken. Sie können die Tests gemeinsam bearbeiten oder ihre Unterlagen verwenden.


Fortunately, you can counter many of these strategies, making them more trouble than they are worth to the students. Let’s look at a few strategies for countering most cheating schemes
Zum Glück können Sie vielen dieser Möglichkeiten entgegenwirken, und so erreichen, dass sie mehr Arbeit machen als Nutzen bringen. Im folgenden werden einige Gegenmaßnahmen für die am häufigsten vorkommenden Schummeleien vorgestellt.  


===Printing and sharing questions===
===Ausdrucken und Verteilen von Testfragen===
If you display feedback and correct answers, students can print the results page and share it with their friends. Or they can simply print the questions themselves directly from the quiz. The key to discouraging this behavior is to randomize the question order and the answer order. It makes the printouts a lot less useful. Creating larger question banks and giving tests with random subsets is also an effective strategy. If students can only print a small number of questions at a time, they will need to view the test again and again, then sort the questions to eliminate duplicates.  
Wenn Sie bei Ihren Tests das Feedback und die richtigen Antworten anzeigen lassen, dann können die Teilnehmer diese Seiten ausdrucken und untereinander verteilen. Oder sie können die Testfragen selbst ausdrucken. Um dieses Verhalten zu vermeiden, sollten Sie die Fragen und Antworten mischen. Dann sind die Ausdrucke weniger hilfreich. Eine andere effektive Strategie ist das Anlegen von großen Fragen-Datenbanken und das Verwenden von Zufallsfragen. Dann können die Teilnehmer nur wenige Fragen auf einmal ausdrucken, sie müssen den Test ständig wiederholen, um nach und nach möglichst viele verschiedene Fragen zu sehen, und sie müssen die mehrfach auftretenden Fragen eliminieren.  


<blockquote>Assume there will be printed copies of your questions available to students who want them. Most instructors don’t realize students frequently have copies of old paper based tests, and electronic test delivery is another way for students to get copies of the questions. I know one professor who had over 1100 questions in his online test bank. At the end of the semester, he confiscated a printout from a student. It had every question with the correct answer, neatly formatted and divided by textbook chapter. We decided if students wanted to memorize 1100 questions and answers to the level where they could answer a small number of them displayed at random, then they would have learned more than if they had just studied. Of course, we used timed quizzes and other strategies to minimize using the print-out as a reference manual.</blockquote>
<blockquote>Stellen Sie sich vor, es gibt Ausdrucke von all Ihren Testfragen. Viele Lehrende wissen nicht, dass solche Kopien Ihrer alten Tests kursieren. Und Online-Tests bieten eine weitere Möglichkeit, an solche Kopien heranzukommen. Ich kenne einen Professor, der über 1100 Fragen in seiner Datenbank hatte. Am Ende des Semsters konfiszierte er einen Ausdruck von einem Studenten. Dieser Ausdruck enthielt alle Fragen mit den richtigen Antworten, und das Ganze war fein säuberlich formatiert und nach Themen sortiert. Wir entschieden, dass jemand, der versucht, diese 1100 Fragen auswendig zu lernen, um dann eine kleine Teilmenge zufällig ausgewählter Fragen im Test korrekt beantworten zu können, auf jeden Fall mehr gelernt hat, als jemand, der nur "einfach so" studiert hat. Natürlich haben wir trotzdem zeitbegrenzte Tests und weitere Strategien verwendet, um die Nutzung von Unterlagen als Nachschlagewerk zu minimieren.</blockquote>


===Using the textbook===
===Verwendung von Unterlagen===
Students will frequently look up the answer to questions in the textbook or a reading. If you are giving a chapter check quiz, then this is what you want them to do. Otherwise, you need to come up with creative ways of making the textbook less directly useful. Timed quizzes are the single most effective tool for eliminating this strategy. A timed quiz requires the students answer the questions in a certain amount of time. If you give enough questions and make the time short enough, they won’t have time to look up all the answers. I usually give about 30 seconds per multiple-choice question. If they answer them faster and have time to look up some answers afterward, I figure they knew enough to deserve to look up an answer or two.
Bei Online-Tests werden die Teilnehmer häufig ihre Unterlagen nutzen, um die Testfragen zu beantworten. Bei einem Leseverständnis-Test wollen Sie genau dies erreichen. In anderen Situationen müssen Sie sich Test-Strategien ausdenken, bei denen die Unterlagen wenig hilfreich sind. Zeitbegrenzte Tests sind dabei ein effektives Mittel der Wahl. Bei einem solchen Test haben die Teilnehmer nur eine begrenzte Zeit zur Verfügung: Wenn Sie also die Anzahl der Fragen groß genug und die verfügbare Zeit knapp genug wählen, dann schaffen es die Teilnehmer nicht, in den Unterlagen nachzuschlagen. Ich gebe als  Faustregel 30 Sekunden pro Multiple-Choice-Frage. Wenn ein Teilnehmer schneller ist und dafür Zeit übrig hat, um die eine oder andere Frage nachzuschlagen, dann geht das in Ordnung.


Asking students to apply their knowledge to novel situation can also make a difference. Synthesis and application questions can’t be looked up. Students have to understand the material and apply it creatively to answer the questions. So while they may take the time to review the text, they will still need to try to understand what they’ve read to successfully answer the question.
Eine andere Strategie ist das Stellen von anwendungsorientierten Fragen, bei denen die Teilnehmer ihr Wissen in einer neuen Situation anwenden müssen. Synthese- oder Anwendungsfragen können nicht nachgeschlagen werden. Stattdessen müssen die Teilnehmer den Stoff verstehen und das erworbene Wissen kreativ anwenden, um diese Fragen zu beantworten. Selbst wenn sie also Zeit haben, noch einmal nachzulesen, müssen sie dennoch verstanden haben, was sie gelesen haben, um die Fragen erfolgreich zu beantworten.


===Working with friends===
===Mit anderen zusammenarbeiten===
If your students are on the same campus, they may get together in a lab and try to take the quiz together. This is an easy strategy to thwart with random question order, random answer order and questions randomly pulled from a test bank. If my screen doesn’t look like yours, then it’s harder for us to quickly answer all of the questions. A timed quiz also makes it harder for the two of us to cheat if we have different questions we only have a short amount of time to answer.
Wenn Ihre Teilnehmer sich auf demselben Campus befinden, dann könnten sie sich zusammen schließen und den Test gemeinsam absolvieren. Diese Strategie können Sie dadurch vereiteln, dass Sie Fragen und Antworten mischen bzw. Zufallsfragen nutzen. Wenn mein Bildschirm anders aussieht als deiner, ist es schwieriger, gemeinsam alle Fragen zu beantworten. Zusätzlich können Sie als Trainer eine Zeitbegrenzung für den Test verwenden. Auch dann wird es schwerer, verschiedene Fragen in der Kürze der Zeit zu beantworten.


===Have someone else take the test===
===Jemand anderes absolviert den Test===
The old adage goes “On the Internet, no one knows you’re a dog”, and no one knows who is actually taking the test. Students will sometimes pay classmates, or others who have taken the course in the past, to take online quizzes for them. There are two ways to counter this strategy. One, have an occasional proctored exam where students need to show ID. If they haven’t taken the quizzes or done the work until then, they will do poorly on the proctored exam. To eliminate current classmates from taking each others quizzes, only make them available for a short time. You could require everyone take the test within a 2 or 4-hour block. If the test is properly randomized, it will be very difficult to take it more than once during the testing period. The test taker will worry about their own grade first, then about their employers grade.
Ein altes Sprichwort sagt: "Geh ins Internet, und niemand weiß, dass du ein Hund bist." So weiß man auch nicht, welche Person tatsächlich einen Test absolviert. Manchmal bezahlen Teilnehmer andere, damit diese für sie den Test durchführen. Es gibt es folgende Möglichkeiten, dem zu begegnen. Sie können gelegentlich Tests unter Aufsicht durchführen, bei denen die Teilnehmer sich ausweisen müssen. Wenn jemand die Online-Tests nicht selbst durchgeführt hat, wird er vermutlich bei den Präsenz-Tests schlecht abschneiden. Um zu verhindern, dass Kursteilnehmersich gegenseitig helfen, können Sie die Zeitspanne, in der der Test verfügbar ist, sehr kurz halten, z.B. nur 2-4 Stunden. Wenn die Testfragen hinreichend gut gemischt oder zufällig ausgewählt sind, dann wird es schwierig, den Test in der kurzen Zeit zweimal durchzuführen. Ein Kursteilnehmer wird zunächst bemüht sein, selbst ein gutes Resultat zu erzielen, bevor er den Test für jemand anderes noch einmal absolviert.


Obviously, there are many strategies students can use to cheat. While it would be naïve to assume there isn’t cheating, the vast majority of your students want to succeed on their own merits. The anonymity of the online environment may open up new avenues for the cheaters, but it’s not really much different from your face-to-face classes. A few people will go to great lengths to cheat, but most will be honest as long as it’s not too easy to get away with it. A few precautions will eliminate most of the easy cheats, and the classic strategies will work for the others.
Offensichtlich gibt es viele Strategien zu schummeln, und es ist naiv zu glauben, dass es niemand tut. Dennoch wird die Mehrheit der Lernenden bestrebt sein, durch eigene Leistung erfolgreich zu sein. Die Anonymität einer Online-Umgebung kann neue Wege auch für Schummler eröffnen, aber im Grunde ist es kein großer Unterschied zu Präsenz-Prüfungsumgebungen. Einige wenige werden große Anstrengungen unternehmen, um erfolgreich zu schummeln, aber die Mehrheit wird ehrlich sein, solange es nicht zu einfach ist zu mogeln. Einige wenige Maßnahmen (s.o.) helfen, diese "einfachen Schummeleien" zu unterbinden, und die klassischen Strategien helfen bei den anderen Fällen.




[[Category:Lernaktivität]]
[[Category:Trainer]]
[[Category:Test]]
[[Category:Test]]


[[en:Effective quiz practices]]
[[en:Effective quiz practices]]

Aktuelle Version vom 14. August 2008, 20:32 Uhr


Wie Sie sicher schon bemerkt haben, sind Tests in Moodle ein mächtiges Werkzeug, um den Wissenstand der Lernenden zu ermitteln und Lernerfolgskontrollen durchzuführen. Wenn Sie Tests effektiv in Ihrem Kurs einsetzen, können Sie die Effektivität Ihres Kurses insgesamt steigern und den Lernerfolg Ihrer Teilnehmer unterstützen. Auch wenn computer-gestützte Test mit automatisierter Bewertung eine andere Art der Leistungsüberprüfung darstellen als "freiere" Prüfungsformen, bieten Sie doch wertvolle Einblicke in die Denkweise der Lernenden, insbesondere dann, wenn Sie gute Strategien und ein bisschen Kreativität bei der Gestaltung der Tests einsetzen.

Test-Strategien

Natürlich erfordert es einen gewissen Aufwand und ein gewisses Maß an Erfahrung, wenn man Tests effektiv nutzen möchte. Der erste Punkt sind effektive Strategien zur Gestaltung von Testfragen. Wenn Sie "gute" Fragen stellen, erfahren Sie viel über den Wissensstand und den Grad des Verständnisses des Lernstoffs seitens der Lernenden. Ebenso gilt umgekehrt: Wenn Sie "schlechte" Fragen stellen, erfahren Sie wenig. Es gibt Berge von Literatur darüber, wie man Lernerfolgskontrollen effektiv gestaltet. Ich möchte hier nur die wichtigsten Ideen aufzeigen.

  1. Verbinden Sie jede Frage mit einem Lernziel des Kurses. Letztendlich möchten Sie wissen, ob Ihre Teilnehmer ein Lernziel erreicht haben - warum also nicht direkt fragen?
  2. Versuchen Sie, mehrere Fragen zu jedem wichtigen Thema des Kurses zu stellen. Dadurch gewinnen Sie mehr Anhaltspunkte über den Wissensstand und das Verständnis der Lernstoffs seitens der Lernenden.
  3. Wenn Sie Multiple-Choice-Fragen entwickeln, stellen Sie sicher, dass jede Falschantwort auf einem typischen Fehler oder Mißverständnis beruht. So können Sie die Gedankengänge der Lernenden besser analysieren und "einfaches Raten" vermeiden.
  4. Entwickeln Sie Fragen, die Ihre Teilnehmer zum Denken auf verschiedenen Ebenen anregen. Verwenden Sie eine Mischung aus "Merkfragen" zum einfachen Wissensabruf, Verständnisfragen, anwendungsorientierte Fragen und Analysefragen. Dann können Sie feststellen, wo Ihre Teilnehmer Probleme haben, z.B. ob Sie den Lernstoff wiedergeben, aber nicht anwenden können.
  5. Testen Sie Ihre Fragen. Wenn Sie eine Fragen-Datenbank aufgebaut haben, nutzen Sie die Ergebnisanalysemöglichkeiten von Moodle, um herazszufinden, welche Fragen nützlich sind und welche nicht. Wenn Sie neue Fragen erstellen, geben Sie ihnen zunächst weniger Punkte, um erst ihre Zuverlässigkeit zu testen.

Sobald Sie einige "gute" Fragen-Datenbanken entwickelt haben, nutzen Sie die Test-Berichte und Ergebnisanalysen, um den Leistungsstand Ihrer Teilnehmer zu kontrollieren. Moodle stellt wertvolle Werkzeuge zur Analyse der Ergebnisse bereit, um eine Vorstellung vom Wissens- und Kenntnisstand der Lernenden zu gewinnen.

Kreative Nutzung von Tests

Mit Moodle Tests ist es einfacher, bestimmte Arten der Lernerfolgskontrolle einzusetzen, als dies "mit Papier und Stift" möglich wäre. Viele Menschen verbinden mit Tests relative selten vorkommendee und mit hohem Einsatz verbundene Aktivitäten wie Zwischenprüfungen oder Jahresabschlussprüfungen. Bessere Strategien verwenden Tests als häufige, mit relative wenig Aufwand verbundene Kontrollen, die es sowohl Lehrenden als auch Lernenden in regelmäßigen Abständen ermöglichen, den Wissens- und Kenntnisstand zu überprüfen.

Die Nutzung einer Reihe von Mini-Tests gibt Ihnen ein flexibles System, den Leistungsstand zu messen und die Teilnehmer im Kurs aktiv und engagiert zu halten. Im folgenden finden Sie einige Vorschläge für solche kleinen Tests, die Teil einer umfangreicheren Strategier zur Lernerfolgskontrolle sein können.

Leseverständnis-Tests

Es ist eine der schwierigsten Motivationsaufgaben im Bildungsbereich, die Lernenden anzuhalten, Leseaufgaben vollständig zu absolvieren. Das Lesen ist die Grundvoraussetzung für das Verstehen des Lernstoffs und in den allermeisten Fällen fundamental wichtig für den Lernerfolg. Das Hauptproblem für die meisten Lernenden besteht darin, dass es beim Lesen keine unmittelbare Belohnung oder Bestrafung wegen Aufschiebens gibt. Wenn Sie z.B. das Material nicht gelesen haben, auf dessen Grundlage eine Diskussion geführt werden soll, können Sie sich still verhalten oder improvisieren, indem Sie während der Diskussion das Material durchblättern bzw. überfliegen. Oder z.B. im Fall einer Vorlesung ist es häufig nicht nötig zu lesen, da der Lehrende ohnehin das Meiste im Vortrag präsentiert.

Wenn Sie jedoch für jede Leseaufgabe einen Mini-Test kreieren, lösen Sie gleich mehrere Probleme. Erstens motivieren Sie Ihre Teilnehmer zum Lesen, damit Sie den test überhaupt durchführen können. Zweitens erhalten die Teilnehmer ein Rückmeldung darüber, inwieweit sie das Gelesene verstanden haben. Drittens liefert Ihnen das Ergebnis des Test Anhaltspunkte darüber, wo es Verständnisprobleme gab und was bereits gut verstanden wurde, so dass Sie in der nächsten Stunde entsprechend darauf reagieren können.

Für solch eine Mini-Test zu Leseaufgaben empfehle ich einen zeitbegrenzten Test, bei dem nur ein Versuch erlaubt ist. Da es sich um eine für den Teilnehmer mit wenig Aufwand verbundene Aktivität zur Selbstkontrolle handelt, würde ich auch bei Feedback geben und die richtige Antwort anzeigen. Wenn Sie befürchten, dass die Lernenden die Lösungen austauschen, mischen Sie Fragen und Antworten und/oder verwenden Sie Zufallsfragen. Als zusätzliche Aufgabe können Sie die Teilnehmer auffordern, zu einer Testfrage, die sie falsch beantwortet haben, eine Frage zu formulieren und in die nächste Stunde einzubringen.

Test-Praxis

Der Schlüssel zu einer effektiven Test-Praxis ist eine realistische Übungsumgebung. Viele Lernende machen sich Sorgen wegen Online-Tests, weil sie nicht wissen, was sie erwartet. Welche Fragetypen werden verwendet? Wie detailliert werden die Fragen sein? Was sollen sie lernen?

Sie können diese Sorgen abmildern, indem Sie Übungstests anbieten. In solchen Übungstests können Sie alte Fragen aus früheren Prüfungstests verwenden, die den eigentlichen Prüfungsfragen ähneln. Wenn Sie alte Prüfungstests für Übungszwecke nutzen, werden Sie außerdem gezwungen, sich immer wieder neue Fragen auszudenken und so schrittweise eine große Fragen-Datenbank aufzubauen, aus der Sie schöpfen können. Außerdem ist die Gefahr groß, dass unter den Teilnehmern Ihre alten Testfragen kursieren, so dass Sie diese ohnehin nicht in der Prüfung verwenden sollten.

In einem Übungstest empfehle ich die Verwendung der Prüfungsfragen vom letzten Jahr, in zufälliger Reihenfolge und gemischten Antworten, ohne Bewertung. Außerdem würde ich beliebig viele Versuche zulassen, so dass die Teilnehmer so lange üben können, wie sie möchten. Ich würde Feedback anzeigen, aber nicht die richtigen Antworten - dann ist der Test eine größere Herausforderung.

Sammlung von Daten

Als Experte wissen Sie viel über Ihr Fachgebiet. Ihre Herausforderung als Lehrender besteht darin, Ihr Wissen den Lernenden zu vermitteln, die normalerweise nicht über Ihre Erfahrungen verfügen. Ein Beispieloder ein Vortrag, den Sie brilliant finden, kann für Ihre Lernenden völlig unverständlich sein. Oft ist es schwierig herauszufinden, was Ihre Lernenden wirklich verstanden haben und was nicht.

Ein Test zur Sammlung von Daten ist ähnlich wie ein Leseverständnis-Test, aber er findet nach einer Präsenzstunde oder einem Vortrag statt. Der Zweck eines solchen Tests ist, ein schnelles Feedback zum Grad des Verständnisses der Stunde bzw. des Vortrags zu bekommen. Was haben die Teilnehmer aus dem eben Gehörten wirklich verstanden? An welcher Stelle muss noch einmal nachgearbeitet werden? Häufig fällt es schwer abzuschätzen, was die Lernenden wirklich schwer finden und was so leicht ist, dass es sie langweilt.

Ein Test zur Sammlung von solchen Informationen im Anschluss an eine Präsenzstunde wird wie folgt konfiguriert: Er findet ein bis zwei Tage vor der nächsten Stunde statt und ist zeitbegrenzt. Es wird nur ein Versuch erlaubt. Außerdem werden das Feedback und die richtigen Antworten angezeigt.

Sicherheit und Schummeln bei Tests

Natürlich bieten Online-Tests neue Möglichkeiten zu schummeln. Die meisten Online-Tests sind zur Durchführung zu Hause gedacht, zumindest aber außerhalb der Präsenzstunde. So können Teilnehmer die Fragen herunterladen und ausdrucken. Sie können die Tests gemeinsam bearbeiten oder ihre Unterlagen verwenden.

Zum Glück können Sie vielen dieser Möglichkeiten entgegenwirken, und so erreichen, dass sie mehr Arbeit machen als Nutzen bringen. Im folgenden werden einige Gegenmaßnahmen für die am häufigsten vorkommenden Schummeleien vorgestellt.

Ausdrucken und Verteilen von Testfragen

Wenn Sie bei Ihren Tests das Feedback und die richtigen Antworten anzeigen lassen, dann können die Teilnehmer diese Seiten ausdrucken und untereinander verteilen. Oder sie können die Testfragen selbst ausdrucken. Um dieses Verhalten zu vermeiden, sollten Sie die Fragen und Antworten mischen. Dann sind die Ausdrucke weniger hilfreich. Eine andere effektive Strategie ist das Anlegen von großen Fragen-Datenbanken und das Verwenden von Zufallsfragen. Dann können die Teilnehmer nur wenige Fragen auf einmal ausdrucken, sie müssen den Test ständig wiederholen, um nach und nach möglichst viele verschiedene Fragen zu sehen, und sie müssen die mehrfach auftretenden Fragen eliminieren.

Stellen Sie sich vor, es gibt Ausdrucke von all Ihren Testfragen. Viele Lehrende wissen nicht, dass solche Kopien Ihrer alten Tests kursieren. Und Online-Tests bieten eine weitere Möglichkeit, an solche Kopien heranzukommen. Ich kenne einen Professor, der über 1100 Fragen in seiner Datenbank hatte. Am Ende des Semsters konfiszierte er einen Ausdruck von einem Studenten. Dieser Ausdruck enthielt alle Fragen mit den richtigen Antworten, und das Ganze war fein säuberlich formatiert und nach Themen sortiert. Wir entschieden, dass jemand, der versucht, diese 1100 Fragen auswendig zu lernen, um dann eine kleine Teilmenge zufällig ausgewählter Fragen im Test korrekt beantworten zu können, auf jeden Fall mehr gelernt hat, als jemand, der nur "einfach so" studiert hat. Natürlich haben wir trotzdem zeitbegrenzte Tests und weitere Strategien verwendet, um die Nutzung von Unterlagen als Nachschlagewerk zu minimieren.

Verwendung von Unterlagen

Bei Online-Tests werden die Teilnehmer häufig ihre Unterlagen nutzen, um die Testfragen zu beantworten. Bei einem Leseverständnis-Test wollen Sie genau dies erreichen. In anderen Situationen müssen Sie sich Test-Strategien ausdenken, bei denen die Unterlagen wenig hilfreich sind. Zeitbegrenzte Tests sind dabei ein effektives Mittel der Wahl. Bei einem solchen Test haben die Teilnehmer nur eine begrenzte Zeit zur Verfügung: Wenn Sie also die Anzahl der Fragen groß genug und die verfügbare Zeit knapp genug wählen, dann schaffen es die Teilnehmer nicht, in den Unterlagen nachzuschlagen. Ich gebe als Faustregel 30 Sekunden pro Multiple-Choice-Frage. Wenn ein Teilnehmer schneller ist und dafür Zeit übrig hat, um die eine oder andere Frage nachzuschlagen, dann geht das in Ordnung.

Eine andere Strategie ist das Stellen von anwendungsorientierten Fragen, bei denen die Teilnehmer ihr Wissen in einer neuen Situation anwenden müssen. Synthese- oder Anwendungsfragen können nicht nachgeschlagen werden. Stattdessen müssen die Teilnehmer den Stoff verstehen und das erworbene Wissen kreativ anwenden, um diese Fragen zu beantworten. Selbst wenn sie also Zeit haben, noch einmal nachzulesen, müssen sie dennoch verstanden haben, was sie gelesen haben, um die Fragen erfolgreich zu beantworten.

Mit anderen zusammenarbeiten

Wenn Ihre Teilnehmer sich auf demselben Campus befinden, dann könnten sie sich zusammen schließen und den Test gemeinsam absolvieren. Diese Strategie können Sie dadurch vereiteln, dass Sie Fragen und Antworten mischen bzw. Zufallsfragen nutzen. Wenn mein Bildschirm anders aussieht als deiner, ist es schwieriger, gemeinsam alle Fragen zu beantworten. Zusätzlich können Sie als Trainer eine Zeitbegrenzung für den Test verwenden. Auch dann wird es schwerer, verschiedene Fragen in der Kürze der Zeit zu beantworten.

Jemand anderes absolviert den Test

Ein altes Sprichwort sagt: "Geh ins Internet, und niemand weiß, dass du ein Hund bist." So weiß man auch nicht, welche Person tatsächlich einen Test absolviert. Manchmal bezahlen Teilnehmer andere, damit diese für sie den Test durchführen. Es gibt es folgende Möglichkeiten, dem zu begegnen. Sie können gelegentlich Tests unter Aufsicht durchführen, bei denen die Teilnehmer sich ausweisen müssen. Wenn jemand die Online-Tests nicht selbst durchgeführt hat, wird er vermutlich bei den Präsenz-Tests schlecht abschneiden. Um zu verhindern, dass Kursteilnehmersich gegenseitig helfen, können Sie die Zeitspanne, in der der Test verfügbar ist, sehr kurz halten, z.B. nur 2-4 Stunden. Wenn die Testfragen hinreichend gut gemischt oder zufällig ausgewählt sind, dann wird es schwierig, den Test in der kurzen Zeit zweimal durchzuführen. Ein Kursteilnehmer wird zunächst bemüht sein, selbst ein gutes Resultat zu erzielen, bevor er den Test für jemand anderes noch einmal absolviert.

Offensichtlich gibt es viele Strategien zu schummeln, und es ist naiv zu glauben, dass es niemand tut. Dennoch wird die Mehrheit der Lernenden bestrebt sein, durch eigene Leistung erfolgreich zu sein. Die Anonymität einer Online-Umgebung kann neue Wege auch für Schummler eröffnen, aber im Grunde ist es kein großer Unterschied zu Präsenz-Prüfungsumgebungen. Einige wenige werden große Anstrengungen unternehmen, um erfolgreich zu schummeln, aber die Mehrheit wird ehrlich sein, solange es nicht zu einfach ist zu mogeln. Einige wenige Maßnahmen (s.o.) helfen, diese "einfachen Schummeleien" zu unterbinden, und die klassischen Strategien helfen bei den anderen Fällen.