Estratègies de qualificació

Nota: Aquesta pàgina està en procés de traducció. Si us plau aneu a la pàgina de comentaris o al fòrum de traductors de la documentació a moodle.org per a qualsevol dubte o suggeriment

Moodle 2.4

L'estratègia de qualificació seleccionada determina com serà el formulari d'avaluació i com es calcularà la puntuació d'una tramesa basada en una determinada avaluació i un formulari donat. El taller compta amb 4 estratègies d'avaluació estàndard. Es podrien desenvolupar més estratègies que s'afegirien com a extensions o complements.

Estratègia de Qualificació acumulativa

Formulari d'avaluació quan s'usa la qualificació acumulativa

En aquest cas, el formulari d'avaluació consta d'una sèrie de criteris. Cada criteri s'avalua per separat donant ja sigui una puntuació numèrica (per exemple fins a 100 punts) o una escala (bé una escala definida per a tot el lloc o una escala del propi curs). Cada criteri pot tenir la seva ponderació. Els avaluadors poden fer comentaris per a cada criteri avaluat.

Quan es calcula la puntuació total de la tramesa, la puntuació de cada criteri primer es normalitza a un rang de 0 a 100. Aleshores, la puntuació total d'una avaluació determinada es calcula fent la mitjana ponderada de la puntuació normalitzada dels criteris. Les escales no numèriques es consideren com puntuacions de 0 a M-1, on M és el nombre d'elements de l'escala.

$G_{s}={\frac {\sum _{i=1}^{N}{\frac {g_{i}}{max_{i}}}w_{i}}{\sum _{i=1}^{N}w_{i}}}$

on $g_{i}\in \mathbb {N}$ és la puntuació donada al criteri i-th, $max_{i}\in \mathbb {N}$ és la puntuació màxima del criteri i-th, $w_{i}\in \mathbb {N}$ és el pes o ponderació del criteri i-th i $N\in \mathbb {N}$ és el nombre de criteris en el formulari d'avaluació.

És important tenir en compte que la influència d'un criteri donat ve donada únicament pel seu pes, i no pel tipus de puntuació o el rang de valors. Per exemple, considerem un formulari amb tres criteris: el primer amb valors de 0 a 100, el segon de 0 a 20 i el tercer amb una escala de 3 graus. Si tots tenen el mateix pes, si donem 50 punts al primer criteri, té el mateix impacte que si donem 10 punts al segon criteri.

Prenguem el cas anterior com a exemple. Suposem que el tercer criteri utilitza una escala de 6 graus. Un avaluador dóna 90 punts al primer criteri (o aspecte 1), 16 punts al segon criteri i 9 punts, molt bo a l'últim criteri. I els pesos dels tres criteris són 1, 2 i 3, respectivament. Donat que per al tercer criteri l'escala té 6 graus, i 9 punts, molt bo n'és el segon en una seqüència ordenada de major a menor, aleshores 9 punts, molt bo es converteix en un 4. És a dir, en la fórmula anterior, g3 =4 i max3 =5. Així, la puntuació final d'aquesta avaluació serà:

Comentaris

Formulari d'avaluació que utilitza comentaris

El formulari d'avaluació és similar al de l'estratègia de qualificació acumulativa però no es poden donar puntuacions, només fer comentaris. La puntuació total del treball avaluat sempre serà del 100%. Aquesta estratègia pot ser útil en fluxos de treball reiteratius en els quals els avaluadors, en una primera instància, comenten les trameses per a donar una retroalimentació als autors. Després el taller es torna a la fase de tramesa, i els autors poden millorar el treball d'acord amb els comentaris rebuts. Aleshores, l'estratègia de qualificació es pot canviar a una altra que utilitze puntuacions, i els treballs serien avaluats una altra vegada utilitzant un nou formulari d'avaluació.

Nombre d'errors

Formulari d'avaluació que utilitza el Nombre d'Errors

En el Moodle 1.x s'anomenava Marge d'error. El formulari d'avaluació consisteix en una sèrie d'assercions, cadascuna de les quals l'avaluador l'ha de marcar com a superada o no. Es poden utilitzar diverses paraules per expressar l'estat de superat o suspens, per exemple: Sí/No, Present/Absent, Bo/Fluix, etc.

La puntuació d'una avaluació es calcula a partir de la suma ponderada de les respostes negatives (assercions no superades). Ací, suma ponderada vol dir que una resposta amb un pes $w_{i}$ comptarà $w_{i}$ vegades. Els gestors del curs definiran una Taula de mapatge de notes que converteix el nombre d'assercions no superades en un percentatge de la puntuació de la tramesa. Si no es falla en cap asserció, la puntuació és un 100%.

Podeu utilitzar aquesta estratègia si voleu estar segurs que la tramesa compleix determinats criteris. Alguns exemples d'assercions poden ser: Té menys de 3 faltes d'ortografia, No té problemes de format de presentació, Té idees creatives, S'ajusta a l'extensió estipulada etc. Es considera que, per als avaluadors, aquest és un mètode tan fàcil d'entendre'l com d'usar-lo. Per tant és idoni inclús per als més joves o per als principiants en l'avaluació entre iguals, i encara i així dóna uns resultats bastant objectius.

Podeu editar el formulari d'avaluació seguint els passos següents:

1. Escriviu la descripció corresponent a cada asserció en el seu requadre. Aleshores ompliu els camps Mot per l'error i Mot per l'encert. Establiu el pes per a cada asserció. Com podeu veure, la taula de mapatge de notes encara apareix en blanc.
2. Premeu el botó "Desa i tanca" del fons de la pàgina.
3. En la part superior de la pàgina, en l'àrea ombrejada titulada Fase de configuració, premeu l'enllaç "Editeu el formulari d'avaluació" i vegeu el formulari d'avaluació una altra vegada. Ara podeu veure que la taula de mapatge de notes ja hi apareix. (Observacions: En un principi tots els camps desplegables estaran en blanc. Heu de triar els valors correctes de cada desplegable perquè aquesta estratègia de puntuació funcione correctament.)

taula de mapatge de notes

Per exemple, si un formulari d'avaluació té tres assercions:

Número de l'asserció	Contingut	Estat: correcte o incorrecte	Pes
1	Té un títol adient	Sí/No	1
2	Té idees creatives	Presencia /Absència	2
3	El resum està ben escrit	Sí/No	3

En l'exemple anterior, suposem que un avaluador resol per a un treball donat Sí/Absència/Sí. Donat que la tramesa només falla en el segon criteri, i el pes del segon criteri és 2, el nombre total d'errors serà de 2 [el màxim serien 6 errades]. Aleshores la puntuació de la tramesa donada per aquesta avaluació és del 66%. Suposem que la puntuació màxima de la tramesa establerta en els Paràmetres de qualificació sia de 100, aleshores la puntuació que aquesta avaluació donarà a la tramesa serà 66.

Rubric

Assessment form in list mode

See the description of this scoring tool at Wikipedia. The rubric assessment form consists of a set of criteria. For each criterion, several ordered descriptive levels is provided. A number grade is assigned to each of these levels. The reviewer chooses which level answers/describes the given criterion best.

The final grade is aggregated as

$G_{s}={\frac {\sum _{i=1}^{N}(g_{i}-min_{i})}{\sum _{i=1}^{N}(max_{i}-min_{i})}}$

where $g_{i}\in \mathbb {N}$ is the grade given to the i-th criterion, $min_{i}\in \mathbb {N}$ is the minimal possible grade of the i-th criterion, $max_{i}\in \mathbb {N}$ is the maximal possible grade of the i-th criterion and $N\in \mathbb {N}$ is the number of criteria in the rubric.

Assessment Form in grid mode

Example of a single criterion can be: Overall quality of the paper with the levels 5 - An excellent paper, 3 - A mediocre paper, 0 - A weak paper (the number represent the grade).

There are two modes how the assessment form can be rendered - either in common grid form or in a list form. It is safe to switch the representation of the rubric any time.

Example of calculation: let us have a rubric with two criteria, which both have four levels 1, 2, 3, 4. The reviewer chooses level with the grade 2 for the first criterion and the grade 3 for the second criterion. Then the final grade is:

$G_{s}={\frac {(2-1)+(3-1)}{(4-1)+(4-1)}}={\frac {3}{6}}=50\%$

Note that this calculation may be different from how you intuitively use rubric. For example, when the reviewer in the previous example chose both levels with the grade 1, the plain sum would be 2 points. But that is actually the lowest possible score so it maps to the grade 0. To avoid confusion, it is recommended to always include a level with the grade 0 in the rubric definition.

Note on backwards compatibility: This strategy merges the legacy Rubric and Criterion strategies from Moodle 1.x into a single one. Conceptually, legacy Criterion was just one dimension of Rubric. In Workshop 1.x, Rubric could have several criteria (categories) but were limited to a fixed scale with 0-4 points. On the other hand, Criterion strategy in Workshop 1.9 could use custom scale, but was limited to a single aspect of assessment. The new Rubric strategy combines the old two. To mimic the legacy behaviour, the old Workshop are automatically upgraded so that:

• Criterion strategy from 1.9 are replaced with Rubric 2.0 using just one dimension
• Rubric from 1.9 are by Rubric 2.0 by using point scale 0-4 for every criterion.

In Moodle 1.9, reviewer could suggest an optional adjustment to a final grade. This is not supported any more. Eventually this may be supported in the future versions again as a standard feature for all grading strategies, not only rubric.

Experiencing Real Workshop

Please visit demo website to know more about how to set assessment form [1]

Note: You need to login to view the assessment form.
User name: teacher
Password: demo

This web page is an original assessment form using rubric grading strategy. You can view assessment forms using other grading strategies by following the steps below:

1. Visit [2](You also need to login to view these settings.)
2. Choose the specific grading strategy in the drop down menu of grading strategy in grading settings.
   

   grading_settings
3. Click ‘save and display’ button at the end of this page.
4. Click ‘Edit assessment form’ link at the shaded area titled ‘setup phase’ in the upper part of this page.

You will be able to see an original assessment form using the grading strategy you just chose.