小テスト統計レポート

移動先: 案内, 検索

小テスト統計レポートは、小テストをクリックして歯車メニューから統計にアクセスするか、ブーストベース以外のテーマを使用している場合は、 管理 > 小テスト管理 > 受験結果 > 統計 にアクセスして表示できます。

このレポートは、小テストの統計的(心理測定的)分析とその中の問題を提供します。このレポートの上部には、小テスト全体の概要が記載されています。次のセクションでは、すべての問題を表形式で表示する分析を示します。このセクションには、個々の問題を編集したり、特定の問題の詳細な分析にドリルダウンしたりするためのリンクがあります。このレポートの最後のセクションは、正解率(ファシリティ指数)と識別率指数の棒グラフです。

完全なレポート(概要、およびすべての問題の詳細な分析)は、小テスト構造分析テーブルと同様に、さまざまなフォーマットでダウンロードできます。

統計レポートを見る理由

小テストの統計には非常に技術的な情報がたくさんあります。これは、データサイエンティストや数学者の場合に最適ですが、そうでない場合でも、小テストが学生にどの程度役立っているかを知るのに役立つ非常に役立つ情報があります。あなたがすべての技術を理解していない場合。

'壊れた' 問題を見つける

すべてがうまく機能している場合、通常は、小テスト全体で高い評価を得た学生が各問題を正しく理解する可能性が高くなります。問題を作成するときに間違えた場合、たとえば、誤って間違った回答を正しいとマークするように設定した場合、全体的なマークが高い優秀な学生は正しい答えを選択して、間違ってマークされています。これは、'識別指数' 列に表示されます。数が少ない場合は問題がある可能性があります。これを引き起こす可能性があるのは壊れた問題だけではないので、調査する必要がありますが、それは心配な兆候です。そのため、Moodleはこの列の低い値を強調表示して目立たせます。

ヒント:'識別指数' 列を見下ろしてください。数が少ない場合は、その問題を調べてください。

'壊れた' 問題を見つけた場合は、さまざまなオプションがあります。問題を編集してから小テストを再評価して問題を修正できる場合があります(ただし、問題を受験した後は慎重に編集してください)。または、小テストの編集ページに移動して、その問題にマークを設定することもできます。 0まで(ゼロウェイト)。

ランダムなバリアントが公平であることを確認する

小テストを作成するときにランダム化を使用する方法はたくさんあります。 100個のセットから10個の問題を選択するトピックレビュー小テストのようなものがある場合もありますが、ここで検討したいのは、小テストの '問題' ごとに、いくつかの異なるが類似したバージョンがある場合です。'同じ' 問題の。 形成的小テストの場合、学生が練習する機会が増えるので、これは良いことです。 総括小テストの場合、コピーの変更が少なくなるので便利です。これは、'問題1のバリアント' などのさまざまなカテゴリからランダムに選択するか、 計算問題STACKなどの問題タイプを使用して作成できます。内部ランダムバリアント、またはその両方があります。 (詳細については、こちらをご覧ください。)

これを行う場合、特にこれをクレジットのために行う場合は、おそらくそれが '公正' であることを確認する必要があります。 1つのバリアントが他のバリアントよりもはるかに難しくなることは望ましくありません。これを確認するには、小テストの特定の場所に表示されたさまざまな問題をすべて表示する補助行を確認してください。特に 'ファシリティ指数' を見てください。これは基本的に何人の人がその問題を正しく理解したかです。これらの数値がバリアントごとに大きく異なる場合、それは小テストが不公平である可能性があることを示しています。

ヒント:バリアントを使用している場合は、'ファシリティ指数' 列を調べて、特定の問題のすべての異なるバリアントが同様のファシリティ指数を持っていることを確認してください。

1つの問題に大きなばらつきがある場合は、重みをゼロにすることができます。また、将来小テストを再利用する場合は、そのバリアントを削除して、新しいバリアントを追加することを検討してください。

もちろん、このようなバリアントがある場合は、すべての異なるバリアントの識別指数をチェックして、どのバリアントもそのように壊れていないことを確認する必要があります。

学生が特定の問題にどのように答えているかを理解する

小テストで特定の問題を設定するときは、通常、特定のスキルまたは少しの知識をテストすることを目的として設定します。しかし、それがあなたが実際に測定しているものであると確信できますか?

この例として、オープン大学の '科学者のための数学' コースがありました。そこでは、学生が方程式のいくつかの数字を代入できることをテストし、その答えを電卓で計算することになっている問題がありました。 OUの科学テストの標準的な方法として、学生は小数点以下の桁数の正しい数に答える必要がありました(すでに教えられ、評価されています)。しかし、学生が出した答えを見ると、多くの学生が電卓で正しいことを明確に計算しているのに、小数点以下の桁数が多すぎるために間違っているとマークされていることがわかりました。 (http://oro.open.ac.uk/39669/ Jordan, 2014年)

統計レポートを使用すると、この種の分析が非常に簡単になります。以下で説明するように、特定の問題の詳細をクリックすると、そのページの下部に、与えられたさまざまな回答、正しいか間違っているか、各結果を出した学生の数が表示されます。

上記のチェックのいくつかが潜在的な問題を浮き彫りにしている場合、これは探し始めるのに良い場所です。

この情報を使用するもう1つの方法は、記述や数値など、より自由形式の問題タイプを使用している場合、複数の学生が同じ間違いを犯していることに気付く場合があります。次に、問題をバックエンドで編集して、その回答を出した学生に具体的なフィードバックを追加します。

ヒント:特に自由形式の問題を使用する場合は、回答の分析を見て、学生が実際にどのような回答をしているのかを確認してください。

全体的な小テスト統計

このレポートの情報に関する詳細は次のとおりです。

小テスト情報

このセクションでは、テスト全体に関する基本的な情報をいくつか示します。次のように表示されます。

  • 小テスト名
  • コース名
  • 開始日と終了日(該当する場合)
  • 最初の/段階的な受験総数
  • 最初/すべての受験の平均点
  • 評点の中央値 (最高評点の受験)
  • 標準偏差 (最高評点の受験)
  • 評定分布のSkewnessおよびKurtosis
  • 内部一貫性の係数(Cronbach Alphaと呼ばれることもあります)-これは、小テストのすべての項目が基本的に同じものをテストしているかどうかの尺度です。したがって、テキストの一貫性を測定します。これは、有効性の下限です。ここでは数値が大きいほど良いです。
  • エラー率 - グレードの変動は2つの原因によるものです。まず、テスト対象が他の学生より優れている学生がいます。次に、ランダムなバリエーションがあります。小テストの評定は主に学生の能力によって決定され、ランダムな変動が最小限に抑えられることを願っています。エラー率は、変動のどれだけがランダムであるかを推定するため、低いほど良いです。
  • 標準誤差 - これは誤差率から導き出され、各テストグレードにどれだけのランダムな変動があるかの尺度です。したがって、標準誤差が10%で、学生の得点が60%の場合、実際の能力はおそらく50%から70%の間にあります。
小テスト情報セクションの例

小テスト構造分析

このセクションでは、小テストのすべての問題とさまざまな統計を表形式で一覧表示します。

  • 問題# - 問題番号(位置)、問題タイプアイコン、プレビューおよび編集アイコンを表示します
  • 問題名 - 名前は、この問題の詳細な分析へのリンクでもあります(以下の小テスト問題統計を参照)。
  • 受験 -この問題を受験した学生の数。
  • ファシリティ指標 - 問題に正しく答えた学生の割合。
  • 標準偏差 - この問題の評点にはどの程度のばらつきがありましたか。
  • 当てずっぽうの評点 -学生がランダムに推測することによって得られる評点
  • 意図された/有効加重 -意図された加重は、単に小テストを編集するときに設定したものです。問題1が小テストの合計10点のうち3点の価値がある場合、意図された加重は30%です。有効加重は、結果から、この問題による実際の変動の量を推定する試みです。したがって、理想的には、有効加重は意図された加重に近い必要があります。
  • 識別指数 - これは、この問題のスコアと小テスト全体のスコアの間の相関関係です。つまり、良い問題として、この問題で高得点を獲得した学生が、小テスト全体で高得点を獲得した学生と同じであることを願っています。数値が大きいほど良いです。
  • 識別率 - 識別インデックスに類似した別の指標。
ランダムな問題が使用される場合、テーブルにはランダムな問題の行が1つあり、その後に、このランダムな問題の代わりに選択された実際の問題ごとに1つの行が続きます。
小テストの問題が小テストごとにランダム化されると、小テストモジュールがデフォルトの位置を決定します。
小テスト統計計算は、これらすべての量の詳細を示します。
統計構造分析セクションの例

小テスト統計チャート

グラフの例

小テストの問題の統計

ナビゲーション > 小テストの名前 > 受験結果 > 統計(問題のタイトルをクリックしてください) 1つの問題の統計を1ページに表示することができます。このビューでは、小テストの受験者の何パーセントが各回答を選択したか(回答の分析)もわかり、問題に関する基本的な情報が得られます。

  • 問題情報 - 問題、小テストの名前、問題、問題のタイプ、小テスト内の位置、および問題自体に関する基本情報。このページにはプレビューアイコンと編集アイコンがあります。
  • 問題の統計 - これは、この問題に関連する小テスト構造分析のテーブル行の情報を繰り返します。
  • レポートオプション - すべての受験でレポートを実行するか、各学生による最初の受験のみでレポートを実行するかを選択できます。レポートで使用されている計算の一部は、複数回の受験を許可する小テストには適用されない可能性がある仮定に基づいています。

 :ヒント: 統計 の計算には時間がかかります。レポートには計算された値が保存され、最大15分間再利用されます。したがって、統計がどのくらい最近計算されたかが表示され、すぐに再計算するためのボタンが表示されます

個々の問題の回答の分析

これにより、問題の各部分に与えられたさまざまな回答の頻度分析が得られます。分析の詳細は問題の種類によって異なり、すべての問題の種類がこれをサポートしているわけではありません。たとえば、作文問題の回答を分析することはできません。

個々の問題の回答の統計情報

関連項目