Slik gjennomføres en vurdering

Protokollen er skrevet for menneskelig vurdering av videoopptak. At den samtidig er en kravspesifikasjon for maskinell skåring, er en bieffekt — ikke formålet.

Øktkortet

Uten kontekst er en økt ikke skårbar. Følgende må følge opptaket:

Om dyret: art, alder, treningserfaring, dagsform, siste måltid.

Om økta: hva som skulle trenes, hvor langt ekvipasjen var kommet, hvilket kriterium som gjaldt, og hva som var planen.

Om oppsettet: sted, forstyrrelsesnivå, hvem som var til stede, hvilket utstyr.

Grunnen er enkel. En kriterieheving kan bare vurderes mot hva kriteriet var. En forsterkervalg kan bare vurderes mot hva dyret jobber for. Uten øktkortet skårer du din egen gjetning.

Opptaksstandarden

Kravene er utledet av hva som faktisk skal måles.

Markøren må høres — ellers kan ingen timing skåres. Hendene må være i bildet — ellers faller hele leveringskategorien bort. Dyret må være helt synlig — ellers kan responsen ikke bedømmes. Og bildefrekvensen må være høy nok til at 0,3 sekunder lar seg avlese.

Hvor mye dårligere opptak som fortsatt gir brukbar skåring, er et empirisk spørsmål. Kravene over er et utgangspunkt, ikke en målt terskel.

Observerbarhet per ferdighet

Ikke alle ferdigheter lar seg se i ett opptak.

Noen krever flere økter — retensjon kan ikke skåres på én dag. Noen krever plandokumentet — lag 3 vurderes ikke på video. Og noen krever intervjuet — nivå 6 finnes ikke uten det.

Registeret angir for hver ferdighet hva som skal til.

Grensetilfeller

Ferdigheten forekom ikke i økta. Da står den som ikke observert. Ikke som lav.

Ferdigheten forekom én gang. Én forekomst gir ikke grunnlag for nivå 3, som krever det store flertallet av forsøkene. Noter det som observert, uten skår.

To observatører er uenige. Da er kriteriet for upresist. Uenigheten er informasjon om systemet, ikke om treneren — og den skal føres tilbake.

Hva som ikke lar seg skrive ennå

Hvor mange forsøk som kreves for hvert nivå. Det avhenger av ferdigheten, og tallene finnes ikke.

Hvor lang en representativ økt er. Trolig ulik per lag.

Og terskelen for opptakskvalitet i praksis.

Alle tre er empiriske spørsmål. De står åpne, og de er merket som åpne.