Distraktørtipset

Det er vanskelig å lage spørsmål av høy nok kvalitet, særlig i forbindelse med summativ bruk. Svein Magne Sirnes har skrevet boka "Flervalgsoppgaver – konstruksjon og analyse" (Fagbokforlaget 2005), og tar opp blant annet tematikken rundt hvordan en kan lage gode spørsmål. Et veldig nyttig tips som er fullt mulig å gjennomføre i praksis i for eksempel it´s learning, Moodle eller Fronter, er det såkalte "distraktørtipset". Det gjennomgås og eksemplifiseres her.

En distraktør er et alternativ som er feil. For å lage et godt flervalgsspørsmål er første bud at kandidatene ikke kan eliminere bort alternativer basert på at de høres usannsynlige ut. Gitt at du skal lage et spørsmål med 4 alternativer, så blir ufordringen å lage 3 gode distraktører som ikke kan avfeies uten å ha kunnskap om fagfeltet. Eksempel:

Hva er hovedstaden i Norge?

1. Oslo (riktig)
2. Stockholm
3. Alta
4. Kautosjokk

Dersom dette spørsmålet stilles til en som ikke bor i Norge, kan kanskje Stockholm være en god distraktør, mens Alta og Kautosjokk er lett å eliminere bort basert på at disse (for mange) er totalt ukjente stedsnavn. Forsøket på en humoristisk vri i alternativet "Kautosjokk" avslører også at dette er galt alternativ. Det er for øvrig ikke uvanlig å se humoristiske alternativer i flervalgsspørsmål!

Den som lager spørsmålet, har det riktige svaret klart for seg, men har i eksempelet over hatt problemer med å lage gode distraktører. Dette er en vanlig problemstilling for mange lærere.

Distraktørtipset til Sirnes går ut på å bruke studentenes forståelse til å lage gode distraktører. Ved å formulere spørsmålet som et vanlig fritekstspørsmål, vil mange svar gå igjen med tanke på meningsinnholdet. Noen svarer riktig, men en del svarer feil. Poenget er at hyppige forekomster av samme feilaktige svar, vil være en god distraktør i et tilsvarende flervalgsspørsmål!

Prosessen med å lage et flervalgsspørsmål med gode distraktører, blir da som følger:

• Formuler spørsmålet på fritekstform i første omgang.
• Fang opp resultatene. Identifiser meningsinnholdet i gale svar som ofte går igjen og tell opp frekvensen.
• Gjør om spørsmålet til flervalgsform, og bruk hyppige forekomster av gale svar som utgangspunkt for å lage distraktører. Disse distraktørene utgjør nå sannsynlige misforståelser.

Som eksemplifisert i figuren under, stiller først læreren et fritekstspørsmål som besvares av alle (steg 1). Spørsmålet er "Hva vil du si er årsaken til at bladibladibla..." Deretter kan læreren identifisere svar som går igjen (steg 2). Merk at det er de konseptuelle svarene, ikke nøyaktig ordlyd, som er viktig her. Som vist i figuren, er ett svar at "Det er nok aaa tror jeg", og læreren trekker ut at det konseptuelle blir aaa, noe som samsvarer med det en annen har svart konseptuelt sett. Nå er det lett for læreren å kunne omformulere det opprinnelige spørsmålet til flervalgsform, med gode distraktører (steg 3).

Merk at selv om bare én kandidat har svart ccc, kan det likevel gi læreren en idé om en god distraktør. Det er selvsagt en fordel at mange tar testen for å få et best mulig grunnlag for å fange opp gode distraktører! De fleste testverktøy i dagens LMS-systemer tillater bruk av såkalte åpne spørsmål (fritekst), men steg 1 og 2 kan også gjennomføres ved å hente inn svar fra vanlige skriftlige oppgaver, muntlige samtaler, spørreundersøkelser, diskusjonsforum og så videre.

Du står fritt til å bruke eksemplene fra denne tipsserien i egen undervisning. Svend Andreas Horgen har holdt mange foredrag og kurs om digitale tester (og pedagogisk bruk av IKT generelt), og underviser blant annet et nettbasert fag om IKT og læring hvor digitale tester inngår som pensum. Dersom du synes denne tipsserien er nyttig, så må du gjerne spre en lenke til andre. Har du innspill, tanker, erfaringer eller andre idéer, så legg gjerne igjen en kommentar!

Tips: Digitale tester og LMS

Det er mange måter å bruke digitale tester på pedagogisk. I dag starter jeg opp en serie av pedagogiske tips knyttet til LMS-systemet it´s learning og digitale tester. Jeg skal prøve å skrive slik at tipsene vil kunne ha verdi for brukere av andre LMS-systemer også, selv om skjermbilder typisk vil komme fra it´s learning. Det er ganske enkelt fordi jeg daglig bruker it´s learning som faglærer ved HiST.

Torsdag holdt jeg et dagsseminar for 40 lærere ved Nadderud vgs. i Bærum om hvordan en kan lage gode tester og bruke digitale tester på en god pedagogiske måte (med konkrete eksempler fra it´s learning). Etter noe teori og eksempler, hadde vi en praktisk sesjon etter lunsj (på 2 timer), hvor deltakerne fikk prøve verktøyet selv. Det nye testverktøyet i it´s learning er ennå ikke feilfritt. Likevel er det spennende og verdt å bruke, og bugsene forsvinner trolig snart. Det er spesielt flott å kunne bruke tilbakemeldinger i alternativer. Når du lager et spørsmål, vil du kunne skrive inn en tilbakemeldingstekst på hvert eneste alternativ i hele testen (kan også være blanke).

Bruk av tilbakemeldinger gir gode muligheter for formativ bruk, særlig når det gjelder veiledning. Når du skal formulere en tilbakemelding til et spørsmål (om du vil for hvert av de gale alternativene), så er det lett å falle for å oppgi svaret med andre ord enn det som står i alternativene. Prøv heller å gi et hint som gjør det lettere å finne svaret (og som kan hjelpe studenten/eleven til å lære noe i prosessen). Tenk at hintet skal brukes for å finne svaret, og gi læring underveis. Her er noen eksempler på formuleringer som kan brukes som tilbakemelding:

• Dette er ikke helt riktig, se boka kapittel 8, eksempelet om XYZ og prøv igjen.
• Feil, du må tenke gjennom hva som er kjernen i teori X og teori Y for å se hva som er riktig svar.
• Tenk praktisk, prøv å lage et konkret eksempel basert på teorien, så ser du kanskje hva svaret er.
• Tenk generelt, prøv å generalisere eksemplene fra lærestoffet og se om du finner ut hva som er riktig svar.
• Det stod en interessant artikkel i Aftenposten her om dagen som kanskje kan sette deg på riktig spor. Se (lenke til webside her) og prøv deretter på nytt.
• Wikipedia har en veldig god artikkel om dette. Søk etter X og prøv igjen.
• Her er et bilde, kanskje det setter deg på riktig spor. Prøv igjen!
• Riktig svar, men har du tenkt over hvorfor? Det er spennende, se ressurs X for nærmere forklaring.

Eksempel på galt svar (øverst), og riktig svar (nederst) med tilhørende tilbakemeldinger. Poenget her er måten tilbakemeldingene er formulert på.

Neste tips kommer om noen dager :-)

Du står fritt til å bruke eksemplene fra denne tipsserien i egen undervisning. Svend Andreas Horgen har holdt mange foredrag og kurs om digitale tester (og pedagogisk bruk av IKT generelt), og underviser blant annet et nettbasert fag om IKT og læring hvor digitale tester inngår som pensum. Dersom du synes denne tipsserien er nyttig, så må du gjerne spre en lenke til andre. Har du innspill, tanker, erfaringer eller andre idéer, så legg gjerne igjen en kommentar!

Hvorfor iPhone?

Etter å ha brukt dippedungsen i en uke ca, mener jeg at iPhone er et helt unikt produkt. Den er veldig bra. Jeg har ikke brukt Windows Mobile mer enn gjennom sporadisk, tungvindt vedlikeholdsarbeid på konas Dell-PDA, så entusiasmen min over at iPhone nok er den mest avanserte løsningen per dags dato, kan være noe feilslått. Overgangen fra min gamle Nokia 1100 (med svart-hvittskjerm og lommelykt som hovedtrekkplaster) er selvsagt stor, og kan også forsterke inntrykket i feil retning. Likevel mener jeg å være relativt nøytral når jeg setter godsiden til. Konklusjonen min bør dermed være troverdig nok: iPhone er et knallbra produkt og verdt hver krone. Hvorfor det? Her ser du noe av hvordan jeg tenker og hva jeg legger vekt på.

Alt jeg ikke gidder å ta opp

Media har skrevet side opp og ned om telefonen. Den har kamera, verdens beste film- og musikkavspiller, et topp brukergrensesnitt som er touchbasert, akselerasjonsmåler, GPS, 3G, stor skjerm, en kjempebra mobil nettleser, og alt det der. Det sier jeg altså ikke mer om her, men det teller unektelig positivt!

Svakheter, men likevel veldig bra

iPhone har svakheter. Ars Technica har kjørt en grundig analyse, og selv kan jeg helt ærlig peke på opptil flere ting jeg misliker. Blant annet synes jeg det er tullete at en ikke kan redigere en tidligere sendt SMS-melding for å sende en ny utgave av denne til noen andre. Noe slikt trenger jeg ofte, for eksempel ifbm julehilsener, og det blir nå noe slitsomt å få til. En ser heller ikke hvor mange tegn som er brukt på en melding. Tullball fra Apple, for slike småting kunne de fikset. Været fungerer foreløpig bare for Oslo. Det positive er at slikt er lett å fikse i en software update, og evt. 3.partsprogramvare. Tross små irritasjonsmomenter og en noe kort batteritid, så er iPhone likevel det beste kjøpet jeg har gjort, og kunne gjøre på mobilfronten, i hele år. Jeg tror ikke at jeg har valgt feil plattform heller når jeg satser på Mac og iPhone med et ønske om å være mest mulig produktiv og kreativ, og samtidig trives best, men det er en annen diskusjon og egentlig personlig preferanse.

Analyse av underliggende teknologier er viktig

Jeg har lest en god del om iPhone. Noen kritiske og noen positive, men mest analytiske artikler som peker på negative og positive ting. AppleInsider er ikke redde for å kritisere Mac og Apple, og det renommerte Ars Technica er meget grundige i sine analyser. Disse kildene anbefales derfor på det sterkeste for å gi økt innsikt i underliggende teknologier, og et nokså nøytralt bilde av tingenes tilstand.

Det er ikke vanskelig å se at "alle" skriver om iPhone. De seriøse skriver mer inngående og analyserer i dybden, enn media for øvrig. Det er i grunnen ganske lærerikt å se ulike drøftinger av iPhone, og det er liten tvil om at Apple har brukt veldig avanserte teknologiske løsninger for å få til en så sømløs opplevelse som mulig. Etter å ha lest mye om teknologi sitter jeg igjen med ett hovedinntrykk: Det er enormt gjennomtenkte teknologiske løsninger, som samtidig byr på kjempestore utfordringer, som ligger bak. Målet er lett: En så god brukeropplevelse som mulig. Det er for eksempel interessant å lese hvordan Apple og Microsoft har gjort synking på deres plattformer forskjellig, og hvorfor en sentralisert synk-service på datamaskinen er smartere enn ActiveSync (Cloud sync and mobile push).

iPhone er sannsynligvis billigere i brukskostnader. AppleInsider har tenkt "nytte" og kjøpte programmer for $32 for å fylle ut den funksjonaliteten som allerede kom med iPhone, til å bli ekstra nyttig. For å oppnå tilsvarende funksjonalitet, måtte de faktisk ut med $444 på Windows Mobile! Som de selv skriver:

$110 of popular titles that are completely unnecessary on the iPhone, including a memory manager for optimizing the tiny bit of RAM installed on those phones, a system cleanup and maintenance tool, a file backup utility, and interface patches for correcting problems in Windows Mobile itself.

Altså: iPhone er mer funksjonsrik, det en trenger følger med som standard, og Windows Mobile-løsninger er svakere teknisk sett, og (nødvendig/anbefalt) programvare er dyrt.

Mobile Me

Jeg er spesielt imponert over hvor bra MobileMe fungerer, det som også omtales "Exchange for the rest of us". Hensikten er å holde kontakter, adresser, e-post og liknende i synk umiddelbart mellom enhetene. Det koster noen hundrelapper i året. Med MobileMe viser Apple hva Cloud Computing går ut på, noe som er i startgropen og snart tar av. Tjenesten hadde en dårlig start med oppstartsproblemer første uke, men nå funker det knall og det viser seg å være den mest avanserte og billigste pakken av sin art på markedet. Microsoft er trolig hungrige etter å klare å tilby noe liknende.

Det er også modig at Apple viser følgende melding til brukere av Internet Explorer 7:

IE7 har kjente kompatibilitetsproblemer med MobileMe og andre moderne webstandarder, hvilket affekterer Web 2.0-applikasjoner som MobileMe...

Tradisjonelt har man laget webløsninger/websider til å passe med IE, og så varslet fra om at og en bør bruke IE for de som har andre nettlesere/plattformer. Det er jo nettopp derfor Microsoft enda ikke har giddet å støtte alle webstandarder. Microsoft er kompetente nok (tror jeg) til å klare å lage en nettleser som støtter standarder, men de vil ikke. Det er mildt sagt kritikkverdig, og jeg synes det er modig og riktig av Apple å gi Microsoft et knallhardt spark på dette området. Opera har for øvrig sparket mye før, og det er bra. Ja til en Internet Explorer 8 som støtter alle webstandarder, for det er en kjentsak at ca 85% av verden bruker IE, og for at standarder skal slå gjennom (noe alle brukere burde mene er bra) så må IE bruke standarder.

Hva med andre konkurrerende plattformer?

Det er fort å henge seg opp i hardware, og da finner en raskt ut at andre har bedre kamera og batteritid. Det er spesielt interessant og viktig å se sammenlikninger mellom iPhone OS og Windows Mobile som plattform/system, for eksempel denne som viser ulike aspekter i både favør og disfavør av iPhone. Analysen rundt den geniale Apple Store bør leses (spesielt avsnittet "iPhone SDK vs. other smartphone platforms" er opplysende).

Min konklusjon

Bortsett fra det faktum at den er multi-touchsensitiv, er det helt klart flere ting å sette fingeren på med iPhone. Svakt kamera, batteritid, noen irritasjonsmomenter her og der. Dette gjelder vel også med de fleste andre produkter, ingen har hittil et 100% perfekt produkt.

iPhone fremstår likevel som enormt brukervennlig, funksjonell, morsom og lekker, og veldig responsiv tatt i betraktning at en forstår kompleksiteten i å lage en slik dings. Forstår en det ikke, er den fortsatt veldig responsiv! Virkelig en dings du vil ha i lomma. Det viktigste argumentet mitt, er at nesten hver dybde-artikkel jeg har lest, påpeker at Apple på mange områder har laget et produkt og et økosystem som er langt foran konkurrentene. Det er imponerende etter min mening, da de andre (Palm, Blackberry, Symbian, Microsoft, ...) har konkurrert i mange år (10+) mens Apple har hatt iPhone i 1 år og 2 måneder! Det er trygt å satse på iPhone, den forsvinner ikke om et år. Tvert imot.