ラーニングアナリティクスの指標
- アナリティクスモデルの学習
- 教師向け
- 研究者向け
概要
モデルには、複数の指標(予測子)を含めることができます。概念的には、指標はデータセットから値を収集して集計し、ターゲットと組み合わせて、選択した機械学習アルゴリズムを使用して予測を行います。指標はモデル間で再利用することも、新しいモデル専用に作成することもできます。ただし、指標を選択する前に、予測しようとしているターゲットを理解することをお勧めします。
モデルで使用するには、指標を中央に配置してスケーリングする必要があります。 Moodle学習分析では、指標は-1から1の範囲に変換された値を返す必要があります。この範囲のすべてを使用する必要はありません。0から1にスケーリングすると、一部の指標の方が意味があります。0は欠測値を示します。
データポイントの処理方法には、指標に影響を与える重要な仮定が含まれます。特に、指標ーは絶対的である場合があります。つまり、コンテキスト内の他のサンプルが何であっても、指標の値は同じままです。つまり、指標は、コンテキスト内の他のサンプルとサンプルを比較します。
現在、Moodleはアナライザー(モデルのターゲットによって制御される)に従ってモデルの利用可能な指標をフィルタリングしません。ただし、すべての指標がすべてのターゲットで機能するように設計されているわけではありません。たとえば、ユーザに関する指標は、コース設計に関するモデルではうまく機能しません。将来的には、Moodleはターゲットに一致する指標を選択する方法についてより多くのガイダンスを提供する可能性があります。
一般的な指標
- 終了日以降のコースアクセス - ユーザが終了日以降にコースにアクセスした場合、このバイナリ指標は1に設定されます。
- 開始日前のコースアクセス - ユーザが開始日より前にコースにアクセスした場合、このバイナリ指標は1に設定されます。
- すべての書く動作 - ユーザがサイトの任意の場所で 書き込み アクション(保存されたコンテンツ)を完了した場合、このバイナリ指標は1に設定されます。
- コースにおけるすべての執筆活動 - ユーザが登録済みコースで 書き込み アクション(保存されたコンテンツ)を完了した場合、このバイナリ指標は1に設定されます。
- すべての読む動作 - この指標は、ユーザがアクセス(読み取り)したコンテンツの量を-1から1のスケールで推定します。
- 活動期限 - ユーザに活動の期限があり、まだ送信されていない場合、このバイナリ指標は1に設定されます。
- 完了トラッキング有効 - コースで完了追跡が有効になっている場合、このバイナリ指標は1に設定されます。
- 学生登録 - コースに登録されている学生がいない場合、このバイナリ指標は1に設定されます。
- 教師参加可否 - コースに登録されている教師がいない場合、このバイナリ指標は1に設定されます。
- ユーザプロファイル完了 - ユーザーがプロファイル記述をどれだけ完了したかに応じて、-1から1の範囲の値を返します。
- ユーザフォーラム追跡 - ユーザがフォーラム追跡をオンにしている場合、このバイナリ指標は1に設定されます。
Community of Inquiryの指標
学生のエンゲージメントについてのCommunity of Inquiry(探求コミュニティ)モデルに基づく一連の指標が提供されています。これらの指標は、 認知の深さ と 社会的幅 2つのタイプに分けられます。 Moodleコアの活動ごとに、各タイプの1つの指標が実装されています。コース全体の潜在的な認知の深さと社会的幅を推定する2つのコースレベルの 潜在的な 指標もあります。
サードパーティの活動プラグインでは、あらゆるタイプの指標を追加するために、メンテナによるサポートが必要です。
選択した活動モジュールの潜在的な指標レベル
認知的プレゼンスと社会的プレゼンスを介したエンゲージメントの可能性は、プレゼンスを教えるための重要な要素の1つである インストラクショナルデザイン を構成します。 この図は、すべてのコア活動と選択した非コア活動の潜在的な認知の深さと社会的幅を示しています。
潜在的な認知の深さと社会的幅によって各活動を分類することにより、その活動インスタンスでの多くの学習者のアクションの履歴がなくても、学習者がサポートする(そしておそらく期待される)エンゲージメントのレベルを予測できます。各軸に沿った上位レベルにはすべての下位レベルが含まれることに注意してください。つまり、学生とすべてのピア(社会的幅3)が関与する活動には、レベル1(学生のみ)とレベル2(学生+1)が自動的に含まれます。多くの場合、特定のレベルは、活動のパラメータ設定を分析することによってのみ決定できます。
認知の深さ
認知の深さは、Community of Inquiryの理論的フレームワーク内の構成概念 認知的存在 の尺度です。認知的存在は、“探究のコミュニティの特定の構成の参加者が持続的なコミュニケーションを通じて意味を構築できる程度”(Garrison, Anderson & Archer, 2000, p 89)を指します。認知的存在は通常、手動の内容分析による研究で決定されてきました。これらの指標では、学生に提供される活動のタイプ、および学生がその活動への認知的関与を示す程度に基づいて、この構成を定義します。深さのレベルは0から5の範囲で、0は学習者が活動を見たことがないことを示します。潜在的な認知の深さのレベルは次のとおりです。
- 学習者は、活動の詳細を表示しました
- 学習者は、活動にコンテンツを送信しました
- 学習者は、活動に関するインストラクターまたはピアからのフィードバックを確認しました(自動フィードバックを含む)
- 学習者は、活動内のインストラクターまたはピアにフィードバックを提供しました
- 学習者は、コンテンツを改訂および/または活動に再送信しました
このモデルは、認知深度の潜在的な最大値を各活動モジュールに割り当てることから始まります。たとえば、割り当てモジュールでは、 最大 認知深度5が許可されます。
潜在的なレベルが割り当てられると、コースに登録された各学生は、到達した潜在的な深さの割合に基づいて評価されます。たとえば、活動がレベル3(フィードバックの閲覧)までしかサポートしておらず、学生がレベル3に達した場合、学生は可能な認知深度レベルの100%で参加しており、指標の値は1です。学生がその活動を閲覧していない場合、認知深度は0であり、指標の値は-1です。学生が活動を閲覧して答えを送信したが、フィードバックは閲覧しなかった場合、それは(この活動の潜在的な深度3のうち)認知深度レベル2に当たるため、指標は 0.33 となります。
コースレベルの認知深度指標
- コースの潜在的な認知の深さ -潜在的な関与の尺度としてコース内のすべての活動から計算されます
コース登録レベルの認知深度指標
次の認知深度指標には1つのレベルがあり、0%(閲覧していない)または100%(閲覧した)を示します。
- ブック認知的
- フォルダ認知的
- IMSパッケージ認知的
- ラベル認知的 (コースのその部分が表示された場合に表示されたと見なされます)
- ページ認知的
- ファイル認知的
- URL認知的
次の認知深度指標には2つのレベルがあり、0%(閲覧していない)、50%(閲覧した)、または100%(少なくとも1人の他の参加者と対話した)を示します。
- 投票認知的 (結果が表示されない場合)
- データベース認知的
- フィードバック認知的
- 用語集認知的
- 調査認知的
- Wiki認知的
次の認知深度インジケーターには3つのレベルがあり、0%(閲覧していない)、33%(閲覧した)、67%(提出した)、または100%(提出し、フィードバックを閲覧した)を示します。
- 投票認知的 (結果が表示可能な場合)
- LTI認知的
- SCORM認知的
次の認知深度インジケーターには4つのレベルがあり、0%(閲覧していない)、25%(閲覧した)、50%(提出した)、75%(提出し、フィードバックを閲覧した)、または100%(インストラクターまたはピアにフィードバックを提供した)を示します。
- チャット認知的
- フォーラム認知的
次の認知深度指標には4つのレベルがあり、0%(閲覧していない)、20%(閲覧した)、40%(提出した)、60%(提出し、フィードバックを閲覧した)、80%(インストラクターまたはピアにフィードバックを提供した)、または100%(改訂し、再提出した)を示します。。
- 課題認知
- レッスン認知的
- 小テスト認知的
- ワークショップ認知的
社会的幅
社会的幅は、調査コミュニティの理論的枠組み内の構成概念 社会的存在 の尺度です。これは、“参加者がグループまたは学習コースを識別し、信頼できる環境で意図的にコミュニケーションを取り、個々の個性を投影することによって、個人的で感情的な関係を徐々に発展させる能力” と定義されています(-global.com/chapter/communities-inquiry-online-learning/11779 Garrison, 2009, p 352)。過去には、社会的存在は通常、コース後の調査と手動の談話分析によって測定されていましたが、このプロセスを自動化する試みが増えています。このモデルは、参加者が他の人とコミュニケーションをとる機会の幅を調べることにより、社会的幅 として社会的存在を実装します。幅のレベルは0から5の範囲で、0は学習者が誰とも対話していないことを示します。潜在的な社会的広がりのレベルは次のとおりです。
- 学習者は、この活動の他の参加者と対話していません(たとえば、ページを読んだことがあります)
- 学習者は少なくとも1人の他の参加者と対話しました(たとえば、課題を提出したか、フィードバックを提供する自己採点小テストを試みました)
- 学習者は、ディスカッションフォーラム、Wiki、データベースなどへの投稿など、この活動の複数の参加者とやり取りしました*
- 学習者は、コミュニケーションの少なくとも1つの ボレー で参加者とやり取りしました*
- 学習者は、クラス外の人々と交流しました。たとえば、本物の実践コミュニティ*
*まだ実装されていません
このモデルは、各活動モジュールに社会的幅の潜在的な最大値を割り当てることから始まります。たとえば、課題モジュールでは、最大2つのソーシャル幅が許可されます。これらのレベルがコア活動モジュールに割り当てられる方法の詳細については、以下を参照してください。
潜在的なレベルが割り当てられると、コースに登録された各学生は、到達した潜在的な深さの割合に基づいて評価されます。たとえば、活動がレベル3までしかサポートしておらず、学生がレベル3に達した場合、学生は社会的幅の可能なレベルの100%で参加しています。
注:現在、Moodleはソーシャル幅レベル2までの指標のみを提供します。すべての "リソース" の最大ソーシャル幅は1です。活動はサポートされている社会的幅が異なります。この機能は、Moodleの将来のバージョンで拡張される予定です。
コースレベルの社会的幅の指標
- コースの潜在的な社会的幅 -コース内のすべての活動から計算
登録レベルの社会的幅の指標
次の社会的幅の指標には1つのレベルしかなく、0%(表示されていない)または100%(表示されている)のいずれかを報告します。
- ブック社会的
- データベース社会的
- フォルダ社会的
- 用語集社会的
- IMSパッケージ社会的
- ラベル社会的
- ページ社会的
- ファイル社会的
- 調査社会的
- URL社会的
- Wiki社会的
次の社会的幅の指標には2つのレベルがあり、0%(表示されていない)、50%(表示されている)、または100%(少なくとも1人の他の参加者と対話)を報告します。
- 課題社会的
- チャット社会的
- 投票社会的
- フィードバック社会的
- フォーラム社会的
- レッスン社会的
- LTI社会的
- 小テスト社会的
- SCORM社会的
- ワークショップ社会的