Matsviðmið

Matið mælir dómgreind undir álagi og getu til að koma auga á villu vélarinnar, ekki hvort nemandinn „leysti“ sviðsmyndina. Fimm viðmið á fjórum matsþrepum. Eftirárýni og ábyrgð vega þyngst.

ViðmiðFramúrskarandiGottÍ vinnsluÓfullnægjandi
1. Mannlega akkerið (eigin reynsla af álagi, án vélar)Áþreifanlegt, heiðarlegt; nýtt í eftirárýniTil staðar og nýttYfirborðskenntVantar eða skrifað eftir á
2. ForgangsröðunSkýr, rökstudd forgangsröðun jafnvel með ófullkomnum upplýsingumForgangsröðun til staðar með rökumÓsamkvæmEngin meðvituð forgangsröðun
3. Greining á vélinniBendir nákvæmlega á ofskynjað (e. hallucination) verklag og mögnun ringulreiðarGreinir a.m.k. eitt tilvikNefnir án greiningarTók framlag vélar gilt
4. Eftirárýni (Honest Oracle)Sýnir hvar dómgreind greip villu vélar; hafnar ≥2 atriðum með rökumEftirárýni með rökumYfirborðskenndEngin eftirárýni
5. ÁbyrgðSkýr ábyrgð: hvað hann stendur við + hvaða ákvörðun hann framselur aldrei vélÁbyrgð til staðarAlmennt orðaðVantar, vélinni treyst í blindni
(Tafla til útfyllingar)

Heildareinkunn (leiðbeinandi)

  • Framúrskarandi: 4–5 viðmið framúrskarandi, ekkert undir „Gott“.
  • Gott: flest „Gott“ eða betra, eftirárýni og ábyrgð til staðar.
  • Stenst: aðferðar-lásar til staðar en grunnir.
  • Stenst ekki: framlag vélar tekið gilt, engin eftirárýni eða engin ábyrgð.

Lykilregla: að fylgja vélinni í blindni getur ekki fengið hærra en „Í vinnslu“, óháð því hvort útkoman var „rétt“. Verkefnið mælir dómgreindina, ekki heppnina.

Aftur í verkefnapakkann