Het "multiple-choice" tentamen "Trillingen en balancering"januari 1968Citation for published version (APA):Janssen, J. D. (1968). Het "multiple-choice" tentamen "Trillingen en balancering" januari 1968: een objectievestudietoets contra een mondeling examen. (DCT rapporten; Vol. 1968.001). Technische Hogeschool Eindhoven.

Document status and date:Gepubliceerd: 01/01/1968

Document Version:Uitgevers PDF, ook bekend als Version of Record

Please check the document version of this publication:

• A submitted manuscript is the version of the article upon submission and before peer-review. There can beimportant differences between the submitted version and the official published version of record. Peopleinterested in the research are advised to contact the author for the final version of the publication, or visit theDOI to the publisher's website.• The final author version and the galley proof are versions of the publication after peer review.• The final published version features the final layout of the paper including the volume, issue and pagenumbers.Link to publication

General rightsCopyright and moral rights for the publications made accessible in the public portal are retained by the authors and/or other copyright ownersand it is a condition of accessing publications that users recognise and abide by the legal requirements associated with these rights.

• Users may download and print one copy of any publication from the public portal for the purpose of private study or research. • You may not further distribute the material or use it for any profit-making activity or commercial gain • You may freely distribute the URL identifying the publication in the public portal.

If the publication is distributed under the terms of Article 25fa of the Dutch Copyright Act, indicated by the “Taverne” license above, pleasefollow below link for the End User Agreement:www.tue.nl/taverne

Take down policyIf you believe that this document breaches copyright please contact us at:openaccess@tue.nlproviding details and we will investigate your claim.

Download date: 28. Feb. 2021

H e t f fX4ult iple -Choic e it - tentamen

$ ' T r i l l i n g e n en Ba lancer ing" j a n u a r i '1968; een o b j e c t i e v e s t u d i e t o e t s c o n t r a

een mondeling examen

D r e k e J.D. Janssen @E - 68/1

Inhoud

1 . Inleiding 2. De test: algemene gegevens en resultaten 3 . De grens voldoende - onvoldoende 4, Het vaststellen van de cijfers in een tien-puntsschaal S e Rog enige gegevens van de test en de items

6, Is vooraf een schatting te geven van de ?'moeilijkheidt9 van een item?

7 . Xet mondeling examen 8. Vergelijking van de resultaten van de M.C.-test en het

mondeling onderzoek 9* De reacties van de studenten op de Hi.C.-test

I O . Conclusies en voorstellen

Blz o

1 -

4 15 18 79 23

25

30

41

43

Bijlage I Vragenlijst bij het tentamen "Trillingen en Balanc erin&* o

- 3 -

P r o p o r t i e

8, Was de i n s t r u c t i e v a n Ir. F.E. Veldpaus

goed o f s l e c h t a fgestemd op d i t type

tentamen ?

a. z e e r goed

b e goed

c o h e t g i n g wel

d , s l e c h t

e , z e e r s l e c h t

f. n i e t g e v o l g d

9. Hoe vond U i n h e t algemeen de formu-

l e r i n g d e r vragen?

a, zeer goed

b. goed

c . matig

d. s l e c h t

e , z e e r s l e c h t

IO. Voe lde U z i c h b i j deze t e s t r u s t i g e r

o f nerveuzer dan b i j klassieke s c h r i f -

t e l i j k e tentamens i n de mechanica?

a. v e e l r u s t i g e r

b e r u s t i g e r

c . even. r u s t i g

d. even nerveus

e , nerveuzer

Î. v e e l nerveuzer

0,00

o. 12 0.31 0e23 o. 15 O, 19

0,04

0.39 0,43 0*11

0.04

Opmerkingen:

- 2 -

Propor t i e

4, Hoe zoudt U de aard v a n de v r a g e n i n

h e t algemeen t yperen?

a. v e e l t e v e e l t h e o r i e

b. t e v e e l t h e o r i e

c e een goed evenwicht t u s s e n t h e o r i e

e n t o e p a s s i n g

d. t e v e e l t o e p a s s i n g

e. v e e l t e v e e l t o e p a s s i n g

5. Denkt U d a t Urn p r e s t a t i e s met deze t e s t

e e r l i j k e r o f minder e e r l i j k b e o o r d e e l d

worden dan met een klassiek s c h r i f t e l i j k

‘centamen (b,v. met 3 vraags tukken)?

a, v e e l e e r l i j k e r

b. e e r l i j k e r

c . h e t maakt geen v e r s c h i l

d. minder e e r l i j k

e . v e e l minder e e r l i j k

6. Vond U deze t e s t p r e t t i g e r o f v e r v e l e n d e r

dan Uw v r o e g e r e mechanica t e n t m e n s ?

a, v e e l p r e t t i g e r

b e p r e t t i g e r

c o h e t maakt geen v e r s c h i l

d v e r v e l e n d e r

e , v e e l v e r v e l e n d e r

7. Bias h e t c o l l e g e v a n Dr.Ire J-D. Janssen

goed o f s l e c h t a fges temd op d i t tyge

tentamen?

a. zeer goed

b. goed

c I h e t g i n g w e l

d. s l e c h t

e, z e e r s l e c h t

f. n i e t v a n t o e p a s s i n g

0.03 0.28

0652

0.17 0-00

0,07 0.25 0.11

0~36 0,21

0,00

0.28 0,00

O .34 0.38

0600

0.38

0-08 0.08

0.42

0-04

- 3 -

T.H.Z.

WE - 68/1

Het lWul t ip le -Choic e'' - t e n t amen

" T r i l l i n g e n en Ba lancer ing" j a n u a r i 1968 ;

een o b j e c t i e v e s t u d i e t o e t s c o n t r a een mondeling examen

I n l e i d i n g

Het vak r r T r i l l i n g e n en Ba lancer ing" (4.500) wordt i n h e t V-semester

gedoceerd gedurende twee uur p e r week door de schr i j ve r v a n deze no-

t i t i e s . H e t werd i n h e t na jaarssernekte

gegeven. I n voorgaande j a r e n maakten t r i l l i n g e n en b a l a n c e r i n g d e e l

u i t v a n h e t door Prof. E s m e i j e r gedoceerde - en t h a n s verdwenen - c o l l e g e : t ïTechnische Dynamica". Aan h e t c o l l e g e is een i n s t r u c t i e

toegevoegd v a n 2 uur p e r v e e r t i e n dagen.

De inhoud v a n h e t c o l l e g e stemt z e e r goed overeen met de inhoud v a n

h e t corresponderende d e e l van h e t v r o e g e r e c o l l e g e I1Technische Dyna-

mica", I n he t beg in v a n h e t semester werd nog n i e t gedacht a a n een

o b j e c t i e v e s t u d i e t o e t s , N e l werd ~ eg aar g e s t r e e f d h e t g e b i e d d o e l -

matig i n k l e i n e p a r t j e s t e s p l i t s e n , D e t h e o r i e werd a f g e l e i d aaa

de hand v a n en ige zogenaamde s tandaard-sys temen,

Bovendien werd v r i j v e e l t i j d besteed om de t h e o r i e t o e t e p a s s e n i n

andere v e r s c h i j n i n g rmen v a n een probleem, D i t waren s teeds een-

v o u d i g e voorbee lden . G e t r a c h t werd z o goed en d u i d e l i j k m o g e l i j k

o n d e r s c h e i d t e maken t u s s e n hypothesen en c o n c l u s i e s e Z o v e e l

werd verraeden om een bepaa lde stap i n h e t mathematisch model

t e maken met mechanica overwegingen, V e e l l i e v e r baseerden w i j ons

d a a r b i j op wiskundige gegevens en eigenschappen, @aar m o g e l i j k pro-

beerden w i j a c h t e r a f de v e r s c h i l y e n d e ( d e e l ) - r e s u l t a t e n u i t de m a -

themat i sche beschouwing physisch t e i n t e r p r e t e r e n ,

Het l eek ons doe lmat ig de eers te c o l l e g e - u r e n t e b e s t e d e n a a n - r e e d s

bekende - wiskunde en mechanica, l i d i j herhaa lden d e f i n i t i e s e n karak-

t e r i s t i e k e eigenschappen, Soms l e v e r d e n w i j h e t bewi j s i n andere

g e v a l l e n verwezen w i j s l e c h t s n a a r de c o l l e g e d i c t a t e n .

Op deze manier t r a c h t t e n w i j t e b e r e i k e n d a t ons b e t o o g n i e t t e l k e n s

onderbroken hoefde t e worden v o o r herha l ingen v a n inoudei* s t o f , W i j

menen d a t deze v p z e t gelilkt ise

Het c o l l e g e werd g e v o l g d door 25 à 35 personen. I n j a n u a r i 1968 deden

30 k a n d i d a t e n mee aan h e t tentamen (examen). Het merendeel v a n de

t en taminandi v o l g d e regelmatig h e t c o l l e g e . H i e r b i j moet aangetekend

worden d a t e r geen c o l l e g e d i c t a a t aanwezig is.

maal

* I n d i t r a p p o r t z i j n de begr ippen 'Itentamen" en "examen" synoniem, - 2 -

- 2 -

E i n d novegbes 1967 werd b e s l o t e n een o b j e c t i e v e s t u d i e t o e t s t o e t e

passen, Op advies van D r . PIeuwese, g r o e p o n d e r w i j s research, werd

gekozen v o o r de mult iple-choice-vorm met v ier a l t e r n a t i e v e n en met

een f t z e k e r h e i d s t o e t s F t , D i t w i l zeggen d a t ieder i tem bestaat u i t

een vraag, o p d r a c h t o f o n v o l l e d i g e bewer ing en v i e r antwoorden o f

a a n v u l l i n g e n . Een v a n deze v i e r a l t e r n a t i e v e n is j u i s t ; a l l e andere

z i j n o n j u i s t , B e h a l v e he t k i e z e n van h e t n a a r z i j n mening j u i s t e al-

t e r n a t i e f moet de k a n d i d a a t bovendien vermelden o f h i j zeker is v a n

z i j n antwoord o f n i e t , Een zeker antwoord d a t j u i s t is l e v e r t de kan-

d i d a a t 2 punten, een zeker antwoord d a t o n j u i s t is -1 punt, Een goed

antwoord waar de k a n d i d a a t n i e t z e k e r v a n w a s l e v e r t hem 1 punt ; een

f o u t antwoord zonder zekerheid i n g e v u l d en een o v e r g e s l a g e n vraag

l e v e r e n O punten. E n i g e t i j d v ó ó r h e t examen werden de k a n d i d a t e n

t i j d e n s h e t c o l l e g e d u i d e l i j k g e a t t e n d e e r d op de b e s t e e x a m e n s t r a t e g i e ,

Z i j werd bovendien e x p l i c i e t verrmield b i j de t e s t .

Beha lve o v e r de F ? m ~ l t i y l e = c h 0 i v u 9 f vma ( a f g e k o r t als M,C, is nog

even gedacht o v e r e e n "mult ip le - t rue- fa lse" vorm, Ilet b e l a n g r i j k s t e

v e r s c h i l met de M.C, vorm is d a t ieder der a l t e r n a t i e v e n j u i s t % z i j n , Ons bezwaar h i e r t e g e n is d a t de formuler ingen o n g e l o o f l i j k

p r e c i e s moeten z i j n , I n h e t onderhav ige vak r e s u l t e e r t d i t in h e t al-

gemeen i n zeer u i t v o e r i g e a l t e r n a t i e v e n .

B e s l o t e n werd een experiment u i t t e voeren om de r e s u l t a t e n v a n een

o b j e c t i e v e t e s t t e v e r g e l i j k e n met de r e s u l t a t e n v a n een mondeling

onderzoek, Er werd voor gezorgd d a t de 2 examinatoren voor c?e mon-

d e l i n g e tentamens op geen e n k e l e manier op de hoogte kwamen van de

H.Ce v r a g e n en de r e s u l t a t e n v a n de t e s t , D i t be tekende d a t twee

l e d e n van de g r o e p n i e t konden meewerken a a n de c o n s t r u c t i e van de

tes t . Van d r i e andere kon n i e t worden aangenomen d a t z i j vo ldoende

op de hoogte waren v a n c o l l e g e s t o f , Het g e v o l g is d a t d r i e mensen

beschikbaar waren om een gedeelte van hun t i j d t e bes teden a a n deze

t es t : de d o c e n t , de i n s t r u c t e u r en een w e t . medewerker,

Gedurende de eers te v e e r t i e n dagen v a n december I 9 6 7 c o n s t r u e e r d e de

docent 70 items, g e b r u i k makend v a n de taxonomie v a n Bloom. Deze

items werden v e r v o l g e n s met de i n s t r u c t e u r en de wet, medewerker be-

d i s c u s s i e e r d en g e c o r r i g e e r d . B e s l o t e n werd om 65 items i n d e t e s t op

t e nernen e n wel 47 o v e r t r i l l i n g e n en 1 8 o v e r b a l a n c e r i n g . De ver-

houding t u s s e n ' P t r i l l i n g e n f l en "balancering?' werd nagenoeg g e l i j k

~

- 3 -

- 3 -

gekozen aan de verhouding t u s s e n de c o l l e g e - u r e n d i e a a n h e t ene en

aan h e t andere o n d e r d e e l werden b e s t e e d .

Een k l e i n a a n t a l der items werd besproken met D r , Meuwese om t e ont-

dekken o f t y p i s c h e c o n s t r u c t i e f o u t e n werden gemaakt. D i t b leek n i e t

h e t geva l t e z i j n .

Het c o n s t r u e r e n van de items w a s v o o r s c h r i j v e r dezes een Tasc ine-

rende taak. Eet moeten v a s t s t e l l e n v a n de onderde len d i e v o o r een

item i n aanmerking komen, h e t c o n s t r u e r e n en formuleren v a n a a n t r e k -

k e l i j k e a l t e r n a t i e v e n en h e t werken met de Bloom-categorieën w a s

l ee rzaam en ui tdagend, Zwakke p l e k k e n i n h e t c o l l e g e en onderde len

d i e o n b e l a n g r i j k l i j k e n kwamen aan h e t l i c h t . Bovendien moest voor -

komen worden d a t het v e r w i j t gemaakt zou kunnen worden d a t alleeza

t h e o r i e en "weet jest' onderzocht werden.

G r o t e m o e i l i j k h e d e n hadden w i j met h e t v a s t s t e l l e n van de t i j d d i e

de s t u d e n t e n gemiddeld nod ig zouden hebben om de t e s t t e beantwoorden.

Genoemd werd de t i j d v a n 1 à. l , 5 minuut p e r i tem door iemand d i e reeds

e n i g e malen een M,C, t e s t g e b r u i k t had, Deze t i j d l e e k a a n z i e n l i j k t e

k o r t door de m o e i l i j k h e i d van de v r a g e n en de f t l ees t i jd" v a n h e t item.

t v i j b e s l o t e n 65 i t e m t e k i e z e n voor de 3 uur d i e de k a n d i d a t e n t e r

b e s c h i k k i n g werden ges te ld . Nemen w i j aan d a t de ffgemiddeldec' s t u d e n t

dan na ongeveer 2,s uur a l l e items beantwoord moet hebben dan b e t e k e n t

d a t v o o r de ftgemiddelde" s t u d e n t een t i j d v a n ongeveer 2,5 minuut per

i t e m b e s c h i k b a a r is. T i j d e n s he t laatste c o l l e g e werd h e t a a n t a l items bekend gemaakt. 6r

werd t e v e n s op gewezen d a t de t e s t een z e e r d i k pak p a p i e r (40 pag. ! )

zou z i j n . D i t om een schr ikrea t e voorkomen b i j het b e g i n v a n

h e t teritamea, Tevens we26 aan de s t u d e c t e c gevraagd om hun onedewer-

k i n g t e v e r l e n e n aan een k o r t e enquête na a f l o o p v a n de M.C. t e s t om

hun o p i n i e o v e r e n i g e zaken t e p e i l e n .

- 4 -

- 4 -

2, De t e s t : algemene gegevens en r e s n l t a t e n

De t e s t bes tond u i t 6 5 vragen: 47 over t r i l l i n g e n i 1 t / m 47) en 1 8

o v e r b a l a n c e r i n g (48 t/m 65) o

Aan de t e s t werd deelgenomen door 30 k a n d i d a t e n , aan w i e een rang-

nummer v a n 1 t o t en met 30 werd toegekend. A l l e a n a l y s e s w a a r b i j de

k a n d i d a t e n b e t r o k k e n waren werden anoniem u i t g e v o e r d . De k o p p e l i n g

v a n de naam v a n een k a n d i d a a t aan een nr, gebeurde i n een z o laat

m o g e l i j k s tadium om t e voorkomen d a t s t o r e n d e i n v l o e d e n v a n naam-

a s s o c i a t i e s een rol zouden s p e l e n .

Het u i t w e r k e n v a n de t e s t - r e s u l t a t e n gebeurde-door de g r o e p "Onder-

w i j s r esearch ! ! met behulp van de EL - X-8, Gebruik werd h i e r b i j ge-

maakt v a n programma A 02061603~ Je v a n L i e s h o u t N u l t i p l e - C h o i c e

met zekerhe idsaanduid ing . Eet o n d e r d e e l "Tr i l l ingen" h e t onderdee l

p lBa lancer ing t? en de t o t a l e t e s t werden na elkaar bewerkt en geana-

<_-. r j s e e r d o

D e t e s t f o r m u l i e r e n werden d insdag 9 J a n u a r i 1968 om ongeveer 1 ï 8 5 0 uttr

b i j de g r o e p "Onderwijs researchfP i n g e l e v e r d , Donderdagmiddag 11 jan-

u a r i 1968 naren a l l e r e s u l t a t e n bekend,

Wanneer h e t exper iment met h e t mondeling examen n i e t w a s u i t g e v o e r d

zou aan de k a n d i d a t e n nog vóór h e t week-end h e t r e s u l t a a t z i j n

meegedeeld! Er kan dus gesproken worden v a n een s n e l l e a f h a n d e l i n g

en een eminente se rv i ce v a n de groep "Onderwijs research",

T i j d e n s h e t maken v a n de t e s t w a s schr5.jver d e z e s s u r v e i l l a n t , IXén uur v6Ór h e t v e r s t r i j k e n v a n de t e r b e s c h i k k i n g g e s t e l d e t i j d v a n

3 uur b l e e k hem d a t een g r o o t g e d e e l t e v a n de g r o e p i n t i j d n o o d

d r e i g d e t e raken , Ne t goedvinden v a n de k a n d i d a t e n werd de beschik-

b a r e t i j d met een h a l f uur v e r l e n g d ,

In t a b e l I is v o o r i e d e r e proe fpersoon de s c o r e vermeld v o o r :

T r i l l i n g e n ( T i ? * ) , B a l a n c e r i n g (Ba.) en de t o t a l e t e s t (To. ) . Zowel

de s c o r i n g zonder zekerhe idsaanduid ing (aangeduid met ZZ), a ls d i e

- met z e k e r h e i d s a a n d u i d i n g (MZ) z i j n opgenomen,

Tabe l 11 bevat de f r e q u e n t i e v e r d e l i n g voor de v e r s c h i l l e n d e ondes-

de len , In T a b e l IV z i j n opgenomen de gemidde lde - sbor ing , h e t ge-

middelde met zekerheid beantwoorde items, de s t a n d a a r d d e v i a t i e s en

de s p r e i d i n g s g e b i e d e n .

I n T a b e l I11 is de c o r r e l a t i e m a t r i x opgenomen v o o r de s c o r e s b i j

_

- 5 -

- 5 -

Tr - Z.Z9 Ba - ZZ, To - ZZ, T r - MZ, Ba - MZ en To - MZ.

\Vi j constateren dat de gemiddelde score door de zekerheidsaanduiding betrekkelijk weinig toeneemt, De differentiatie tussen de kandidaten

wordt echter aanmerkelijk groter. Dit volgt uit de relatief grote toename van de standaarddeviatie wanneer de zekerheidsaanduiding wordt me e ger ekend o

Wij moeten dus concluderen dat de zekerheidstoets van grote beteke- nis is om een grote differentiatie tussen de kandidaten te verkrijgen,

~

( V o o r vervolg tek& zie pag. 9)

- 6 -

T a b e l I

- 6 -

R e s u l t a t e n p e r p r o e f p e r s o o n

Pr oe f p e r soon

I,

2.

3 . 4.

59 1

6, I

7. 8. 9.

IO, 11 ,

I

12.

6

14,

15. 169

17. 18. 19. 20 *

21 o

22 o

?3 0

2.4. 2 K -/ *

26. 27 6

28. 29 0

l e b i e d

zz

21

27 28

25 26 23 21

20

34 18

25

25 30 33 22

27 30 25 26 26 28

33 23 30 21

30 28

23 23 27

1-47 - -

r i l l i a

MZ

+ I 3 39 34 32 38 24

23 29 56 14

35 32 44

47 21

42 44

31 34

45 51 26

42

42 22

40 41 26 28

41

-47-+9L

?p1

r a n t a l seker e intw e

32 30 21

39 30 41 22

25 44 28

36 29 40 28

25 21

28

30 35 20

31 34 22

24

23 24 41

29 32 34

3-47

ZZ

3 5

10

5 12

5 5 6

11

6

9 7 9

10

7 8

12

0

10

I O

6 10

7 6

? O

10

9 7 2

8

3-1 8

l a n c e r i

MZ

---s + 6

13

5 21

O

7 4

1 8 2

10

4 10

13 10

8 17

O

16

15 5

12

10

9 12

14 10

6 O

12

.I 8-+36

>_

tan t a l ;eker e tntw .

12

7 1 1

I O

13 13

4 10

15 12

13 13 5

I 1

9 10

9 O

14

9 9

12

5 7

?6 12

11

9 2

10

1-1 8

zz

24

32 38 30 38 28 26 25

45 24

34 32 39 43 29 35 42

25 36 36 34 43 30 35 3? 40

37 30 25 35

0-65 -

T o t a a

I4Z

10

45 47 37 59 24 30 33 74

45 36 54 60

31 50 61

31 50 57 50 63 36 48

34 54 51 32 28

53

16

-65-+13C

t a n t a l : ekere m t w .

44

37 32 49 43 54 26

35 59 40

49

45 39 34 31 37 30 50

29 40 46 27 31 39 36 52 38 34 44

1-65

42

- 7 -

- 7 -

F r e q u e n t i e v e r d e l i n g s c o r e s

T a b e l I1

T r i l l i n g e n

s c o r e

1 8

20

21

22

23 25 26 27 28 55 30 34

f r e q .

1

1

3 1

4 4

3 3 3 4 2

1

s c o r e

+ 13 14 21

22

23 24 26 28 29 31 32 34 35 38 39 40 41 42 44

45 47 51 56

f r e q

I

1

1

1

1

1

2

1

1

1

2

2

I

1

1

I

2 3 , 2

1

1

1

1

B a l a n c e r i n g

ZZ

s c o r e

O

2

3 5 6 7 8 9

10

1 1

12

f r e q e

7

I

I

4 4 4 2

3 7 .I

2

s c o r e

- 3 - 0

+ 2

4

5 6 7 8 9

I O

12

13 14

15 16

17 18

21

f r e q o

I

3 i

2

2

2

I

I

1

5 3 2

1

1

1

1

1

1

Totaal

ZZ

s c o r e

24

25 26 28

29 30 37 32 34 35 36 37 38 39 40 42

43 45

f r eq ,

2

2

2

1

1

3 1

2

2

3 2

1

2

1

1

1

2

1

M:

s c o r e

I O

16 24 28

30 31 32 33 34 35 37 45 47 48

50

51

53 54 57 59 60

63 74

61

f r e q o

1

1

1

1

1

2

1

1

1

2

1

2

1

1

3 1

1

2

1

1

1

1

1

1

- 8 -

- 8 -

Tabe l I11

Gemiddelde s c o r i n g enz. van de PI.C.-test

Gemiddelde sc or i n g

S tandaard - d e v i a t i e

S p r e i d i n g s - gebied s c o r i n g

gemiddeld z a n t a l zekere antwoorden

S tandaard - d e v i a t i e zekere antwe

S p r e i d i n g s - g e b i e d zekere antwo or den

30.0

20 t o t 44 O t o t 16

T o t a a l

TO-ZZ

3344

6,O

24 t o t 45

TO-MZ

43.31. :/

1 4 . 5

10 t o t 7’

8.2

26 t o t 59

Tabe l I V

C o r r e l a t i e m a t r l x v o o r onderde len v a n de t e s t

- 9 -

De gemiddelde s c o r e w a s lager dan w i j vermacht hadden, Met name v i e l

ons t e g e n de toename v a n de s c o r e door de e x t r a winstpunten d i e t e

b e h a l e n waren met de zekerhe idsaanduid ing .

D e vrees zou kunnen b e s t a a n d a t h e t i n v o e r e n van de z e k e r h e i d s t o e t s

aarz le id ing zou kunnen z i j n v o o r een v e r k e e r d e meting, H e t i s w e l

r e d e l i j k om een met zekerheid gegeven antwoord meer t e honoreren dan

een onzeker goed gegeven antwoord, m a a r vermeden moet worden d a t h e t

z e k e r o f n i e t z e k e r z i j n v a n de k a n d i d a a t o v e r z i j n antwoord be lang-

r i j k e r wordt dan h e t b e g r i j p e n v a n en h e t opereren met de c o l l e g e s t o f ,

Anders gezegd: w i j w i l l e n primair de k e n n i s v a n en vaardigheid i n tri l - l i n g e n en b a l a n c e r i n g t o s e n en - n i e t h e t z e l f v e r t r o u w e n of de ze l f -

o v e r s c h a t t i n g v a n de k a n d i d a a t , B l i j k e n s t a b e l IV z i j n w e h i e r i n ge-

slaagd, Voor i e d e r der d e l e n is de c o r r e l a t i e t u s s e c de s c o r e , b e h a a l d

zonder zekerhe idsaanduid ing en d i e met zekerhe idsaanduid ing zeer hoog;

v o o r de t o t a l e t e s t is de c o r r e l a t i e f a c t o r 0,94,

D i t r e s u l t a a t is i n overeenstemming .met de u i t de l i t e r a t u u r bekende

gegevens

U i t t a b e l I11 v o l g t d a t h e t a a n t a l met z e r h e i d gegeven antwoorden

gemiddeld v o o r a l l e k a n d i d a t e n v r i j g r o o t is. B i j b a l a n c e r i n g is d i t

a a n t a l be t rokken op h e t t o t a l e a a n t a l v r a g e n i e t s lager dan b i j tr i l -

l i n g e n . Gemiddeld

met zekerheid beantwoord, t e r w i j l 54% van de ba lancer ingsprob lemen met

zekerheid werden beantwoord, W i j c o n s t a t e r e n v e r d e r ui t , deze t a b e l d a t

gemiddeld 55% van de t r i l l i n g s v r a g e n en 42% van de b a l a n c e r i n g s v r a g e n

goed z i j n beantwoord, Voor de h e l e t e s t werd gemiddeld 51% v a n de v ragen

goed, t e r w i j l 61% met zekerheid- werd beantwoord. H i e r u i t moet gecon-

door de k a n d i d a t e n 64% van de v r a g e n o v e r t r i l l i n g e n

c l u d e e r d worden d a t v o o r deze g r o e p s tudenten de v r a g e n a a n de m o e i l i j k e

k a n t waren, t e r w i j l de g r o e p bovendien r e d e l i j k v e e l moe i te had met de

z e k e r h e i d s t o e t s ,

W i j hadden reeds g e c o n s t a t e e r d d a t de i n v o e r i n g van de z e k e r h e i d s t o e t s

z o r g d r o e g voor een g r o t e r e s p r e i d i n g van de s c o r e s zonder d a t a f b r e u k

werd gedaan aan h e t d o e l v a n de t es t : h e t onderzoek n a a r h e t b e g r i p

v o o r t r i l l i n g e n en b a l a n c e r i n g , Het is i n t e r e s s a n t OM na t e gaan i n

h o e v e r r e h e t a a n t a l door een k a n d i d a a t met zekerheid beantwoorde

items c o r r e s p o n d e e r t met h e t a a n t a l door hem goed beantwoorde items.

Per k a n d i d a a t i e deze I n f o r m a t i e u i t t a b e l I t e v e r k r i j g e n , Een over -

z i c h t v o o r de h e l e groep v o l g t u i t de c o r r e l a t i e f a c t o r e n t u s s e n he t

- 1 1 -

- 11 -

a a n t a l z e k e r e antwoorden en de behaa lde s c o r e (met zekerhe idsaanduid ing)

z o a l s i n t a b e l V is vermeld , De i n deze t a b e l voorkomende a f k o r t i n g e n

betekenen: ZA-Tr: a a n t a l -- zekere antwoorden v o o r T r i l l i n g e n ; ZA-Br: aan-

t a l z e k e r e antwoorden v o o r B a l a n c e r i n g ; ZA-To: t o t a a l a a n t a l z e k e r e

a n t wo o r den e

T a b e l V

@or r e l a t iematr i x : a a n t a l z e k e r e a n t vroor den/scor e met z e k e r he i d

W i j c o n s t a t e r e n u i t t a b e l V d a t er een c o r r e l a t i e is t u s s e n h e t

a a n t a l met zekerheid gegeven antwoorden en de behaa lde s c o r i n g S , Voor

de t o t a l e t e s t is de c o r r e l a t i e f a c t o r 0 , 2 2 ; v o o r de twee onderde len

8, V i j moeten v a s t s t e l l e n d a t h e t "weten?9 en de "zekerheid h e t

t e weten" v r i j o n a f h a n k e l i j k e grootheden z i j n , Er is n o g a l vaak een - - - ~ - - 1 - ~ - - - ~

zeker antxonrd gegeven d a t F is,

Na deze c e n c l u s i e is h e t d e s t e p r e t t i g e r t e weten d a t de zekerhe ids -

t o e t s de waarde der t e s t n i e t h e e f t a a n g e t a s t .

De c o r r e l a t i e f a c t o r t u s s e n de s c o r i n g v o o r h e t o n d e r d e e l t r i l l i n g e n en

h e t o n d e r d e e l b a l a n c e r i n g is 0,60, Gezien de n i e t vo lmaakte betrouw-

baarhe id v a n be ide onderde len en h e t r e d e l i j k g r o t e v e r s c h i l i n onder-

werp moet deze c o r r e l a t i e als v r i j hoog worden aangemerkt. De cor reha -

t i e f a c t o r t u s s e n h e t a a n t a l zekere antwoorden b i j t r i l l r i n g e n en ba lan-

c e r i n g is laag (0.21). De hypothese a l s zou door de z e k e r h e i d s t o e t s

a l l e e n of v o o r n a m e l i j k iemand's z e l f v e r t r o u w e n worden gemeten l i j k t

n i e t houdbaar, Deze c o n c l u s i e is i n s t r i j d met de s u g g e s t i e v a n Roskam,

- 12 -

- 12 -

I n d i t verband moeten w i j w e l nog opmerken d a t m o g e l i j k e t i j d n o o d

b i j h e t o n d e r d e e l b a l a n c e r i n g v a n i n v l o e d geweest kan z i j n op h e t door

ons gevonden r e s u l t a a t o b e c o r r e l a t i e f a c t o r t u s s e n h e t p e r c e n t a g e kan-

d i d a t e n d a t een i t e m goed beantwoordde en h e t p e r c e n t a g e met z e k e r h e i d

gegeven antwoorden v o o r d a t i t e m , bedraagt O,S2 en is a a n m e r k e l i j k la-

ger dan d a t door van Naerssen werd gevonden.

Een b e l a n g r i j k e vraag v o o r i e d e r e t e s t is z i j n betrouwbaarheid . D i t w i l

zeggen de vraag i n h o e v e r r e t o e v a l l i g e f a c t o r e n z o a l s pech, o n d u i d e l i j k e

v r a g e n en "gemene" v r a g e n h e t p u n t e n - t o t a a l van een k a n d i d a a t b e i n v l o e d

kunnen hebben, De betrouwbaarheid kan worden u i t g e d r u k t met behulp van

de zogenaanide i n t e r n e c o n s i s t e n t i e van. de t e s t i n de vorm v a n de co-

e f f i c i g n t CY (Kuder-Richardson formule 20) d i e g e d e f i n i e e r d is als:

m ~

m o CY = - m- 1 var t w a a r b i j

13 : a a n t a l i t e m s

va r t : v a r i a n t i e v a n de

var[i. : v a r i a n t i e v a n ide item

Deze betrouwbaarheidscoëfficient is - z i e l i t e r a t u u r - een beneden-

g r e n s voor de werke l i jke betrouwbaarheid , E i j i t a gebaseerd op de hypo-

these d a t a l l e i t e m s v a n g e l i j k e waarde z i j n om &én hoedanigheid t e

meten, Een homogene t e s t met w e i n i g t c s l e c h t e ï i v ragen z a l e e n i i i t e r n e

c o n s i s t e n t i e i n de buur t v a n 1 b e z i t t e n . Door van Naerssen werd i n een

a a n t a l c o n c r e t e g e v a l l e n vas tges te ld d a t CY een v r i j goede b e n a d e r i n g

is voor de twee-he l f tenbetrouwbaarheid . H i e r b i j wordt de s c o r i n g v a n

een k a n d i d a a t v o o r de ene h e l f t v a n de t e s t v e r g e l e k e n net de s c o r i n g

v o o r de andere h e l f t . D e i n t e r n e c o n s i s t e n t i e is eveneens ongeveer

g e l i j k a a n de c o r r e l a t i e f a c t o r t u s s e n de s c o r i n g v a n de k a n d i d a t e n

wanneer z i j twee maal de t e s t zouden maken, onder de v e r o n d e r s t e l l i n g

d a t h e r i n n e n i n g s e f f e c t e n geen rol s p e l e n ,

I n t a b e l V I is v o o r i e d e r der onderde len de i n t e r n e c o n s i s t e n t i e weer-

~~

gegeven *

- '13 -

- 13 -

T a b e l V I I n t e r n e C o n s i s t e n t i e

I n t e r n e C o n s i s t e n t i e

D e i n t e r n e c o n s i s t e n t i e is - naar de mening v a n D r , Meuwrese - v o l -

doende g r o o t om de t e s t als betrouwbaar c r i t e r i u m - u i t e r a a r d afge-

z i e n van de inhoud - t e hanteren, D i t is o v e r i g e n s geen r e d e n om geen

pogingen i n h e t werk t e s t e l l e n de t e s t nog betrouwbaarder t e doen

z i j n ,

Door van Naerssen werd gevonden d a t de be t rouwbaarhe id v a n de t e s t

door de z e k e r h e i d s a a n d u i d i n g toenam, D i t e f f e c t c o n s t a t e r e n w i j ook

b i j h e t o n d e r d e e l t r i l l i n g e n ; b i j b a l a n c e r i n g d a a r e n t e g e n neemt de

betrBQv!baarheid - af, i N e l l i c h t is d i t t e v e r k l a r e n door t i j d g e b r e k b i j

de kandida ten , Een z e l f d e v e r k l a r i n g zou gegeven kunrzen worden v o o r

h e t onveranderd b l i j % e n van Ue i n t e r n e c o n s i s t e n t i e v o o r de t o t a l e

t e s t . Met behulp v a n de formule

waar b i j

rgl o betrouwbaarheid van de t e s t

rpl : g e s c h a t t e betrouwbaarheid v a n de tes t wanneer *

de t e s t K raaal z o v e e l items zou b e v a t t e n

K : de verhouding t u s s e n h e t a a n t a l items b i j ver-

a n d e r i n g v a n de l e n g t e der t e s t en h e t z a n t 2 1

items v a n de g e b r u i k t e t e s t

kan - i n a n a l o g i e met van Naerssen - worden nagegaan met h o e v e e l

p r i c e n t de t e s t zonder zekerhe idsaanduid ing - _ v e r l e n g d zou moeten z i j n ~

- 14 -

om e e n z e l f d e betrouwbaarheid t e v e r k r i j g e n als b i j de tes t met zeker-

he idsaanduid ing , W i j p a s s e n d i t t o e op h e t onderdee l t r i l l i n g e n en c o

c o n c l u d e r e n d a t een v e r l e n g i n g van 32% n o o d z a k e l i j k gewees t zou z i j n

( van Naerssen 21%, r e s p , 31%). I n p l a a t s v a n 47 vragen over t r i l l i n g e n zouden er dan dus 62 v r a g e n

o v e r t r i l l i n g e n ges te ld moeten z i j n .

- I 5 -

- 15 -

3. De g r e n s vo ldoende - onvoldoende

Er werd op v i e r manieren g e t r a c h t de g r e n s vo ldoende - onvoldoende

vas t t e s t e l l e n .

a. Kernitemmekhode

Er werden 8 items v a n t r i l l i n g e n en 4 v a n b a l a n c e r i n g aangewezen

als zogenaamde kernikems. D i t w i l zeggen d a t de docent v a n mening

w a s d a t k a n d i d a t e n d i e de s t o f j u i s t vo ldoende b e s t u d e e r d hadden

deze items zeker-goed zouden beantwoorden t e r w i j l de onvoldoende-

k a n d i d a t e n d i t n i e t zouden doen. Het gemiddelde p e r c e n t a g e zeker-

goed beankwoords kern-i tems zou een r e d e l i j k e p e r c e n t a g e voldoende-

kandida ten op l e v e r e n ,

I n t a b e l V I I z i j n de r e s u l t a t e n v a n d i t onderzoek opgenomene

T a b e l V I 1

p r o p o r t i e gemiddelde zeker-goed zeker-goed

I i

- 16 -

- 16 -

De r e s u l t a t e n maken ons i n z i e n s de kernitemmethode onbru ikbaar .

De s p r e i d i n g i n de p r o p o r t i e s is z e e r g r o o t , Er zouden s l e c h t s

3'7% v a n de k a n d i d a t e n s l a g e n . De gemiddelde m o e i l i j k h e i d van de

k e r n i t e m s is g r o t e r dan h e t gemiddelde van de t e s t ,

b o B e s t u d e r i n g v a n h e t r e s u l t a a t van de k a n d i d a t e n n a b i j de s c h e i d i n g

vo ldoende - onvoldoende,

H i e r b i j word t u i t g e g a a n van een b e p a a l d lpercentage onvoldoendes ,

De g e l e v e r d e p r e s t a t i e s van een a a n t a l kandida ten aai? w e e r s z i j d e n

v a n deze - h y p o t h e t i s c h e - g r e n s word t g e a n a l y s e e r d om t e b e s l i s s e n

o f de g r e n s op de j u i s t e p l a a t s gelegd is, V a l t deze b e s l i s s i n g

n e g a t i e f u i t dan wordt de g r e n s v e r l e g d en d e z e l f d e p r o c e d u r e her-

h a a l d o

Ook deze methode w a s v o o r ons onbruikbaar : d e e l s omdat n a u w e l i j k s

een t o t a a l indruk w a s .te v e r k r i j g e n , dee l s omdat de t e s t a a n de

m o e i l i j k e k a n t WELS, w a t r e s u l t e e r t i n een v r i j g r o o t a a n t a l f o u t i e v e

antwoorden. Ook kandida ten met een r e l a t i e f hoge s c o r e mäken zodoende

een zwakke indruk,

W i j b e s e f f e n d a t de onbru ikbaarhe id v a n deze methode zowe l h e t g e v o l g

is van h e t nieuw z i j n van de vraagmethode als v a n een o n d u i d e l i j k en

n i e t a a n g e p a s t b e e l d van de d o e l s t e l l i n g e n v a n h e t onder

6. Q

Vóór de t e s t wordt vas tges te ld h o e v e e l p r o c e n t v a n de k a n d i d a t e n

moeten worden afgewezen, D i t kan b i j y o o r b e e ï d gebeuren door de be-

s t u d e r i n g van h e t a a n t a l afgewezen k a n d i d a t e n b i j v o r i g e examens i n

h e t b e t r e f f e n d e vak. B e t f e i t d a t d i t vak de eers te maal geëxamineerd

werd b e l e t t e deze werkwi jze ,

I n plaats daarvan s t e l d e n w i j arbitrair een p e r c e n t a g e v a n 20% afge-

wezen k a n d i d a t e n vas t o U i t '$?psychologische overwegingen" v e r l a a g d e n

w i j d i t getal t o t 13%* Deze norm werd doorgevoerd , De k a n d i d a t e n 1 , 6, 10 en 29 werden af-

gewezen,

Een v a r i a n t van deze werkwijze, nu a l l e kandida ten bovendien mon-

d e l i n g geëxamineerd werden, is h e t p e r c e n t a g e afgewezen k a n d i d a t e n

g e l i j k t e s t e l l e n aan d a t b i j h e t mondeling. Er werden b i j h e t mon-

d e l i n g examen 8 kandida ten , d e i . 27% v a n h e t t o t a a l afgewezen,

W i j z u l l e n nog terugkomen op de redenen om deze norm n i e t t e han-

t e r e n .

- 17 -

- 1 7 -

d, Het v a s t s t e l l e n van de minimale s c o r e

Vóór de t e s t werd vas tges te ld d a t voor h e t h a l e n v a n een vo ldoende

c i j f e r minimaal 33 punten (met z e k e r h e i d ) g e s c o o r d moesten worden.

D i t a a n t a l werd v e r k r e g e n door de - n i e t gemot iveerde - werkwijze

h e t h e l e s c o r e g e b i e ü (-67 t o t +I301 t e t rans formeren naar een

t i en -punts schaa l (-65+ O 9 + 1 3 O - r 1 0 ) en een v i j f o f minder af t e wi jzen .

B i j deze g r o e p b e t e k e n t d i t d a t 8 kandida ten , dus 27% v a n de groep ,

wordt afgewezen, W i j w i j z e n op de overeenkomst v a n d i t r e s u l t a a t

met de r e s u l t a t e n v a n h e t mondeling examen,

- I8 -

- 18 -

4, B e t v a s t s t e l l e n van de c i j f e r s i n een t i en -puntsschaa l ,

Nu de s c h e i d i n g vo ldoende - onvoldoende gemaakt is, is de b e l a n g r i j k s t e

b e s l i s s i n g genomen, D e d o o r o n s gekozen g r e n s c o r r e s p o n d e e r t met h e t

nog j u i s t s l a g e n v a n de k a n d i d a a t d i e 30 punten behaald h e e f t . W i j

w i l l e n deze k a n d i d a a t een 6 geven i n de g e b r u i k e l i j k e puntenschaa l ,

De b e s t e k a n d i d a a t s c o o r d e 74 punten. W i j 1 waarderen d i t met "uitmuntend" (IO) <1 mede omdat de examinatoren b i j h e t mondeling r e s p e c t i e v e l i j k 59

De s n a l y s e v a n de f r e q u e n t i e v e r d e l i n g der s c o r e s ( z i e t a b e l 11) maakt

de vo lgende l i n e a i r e t r a n s f o r m a t i e r e d e l i j k ( z i e t a b e l VIII), T a b e l VI11

s c o r e c i j f e r

6

7 8 9 10

f r e q u e n t i e

3 1

- 19 -

- 19 -

5. Nog e n i g e gegevens v a n d e t e s t en de i t ems

I n h e t voorgaande ( h o o f d s t u k 2 ) z i j n r e e d s een a a n t a l gegevens vermeld

v a n de.M.C. t e s t , W i j w i l l e n h i e r nog een a a n t a l andere r e s u l t a t e n

vermelden, i n h e t b i j z o n d e r o v e r de i tems,

Voor i e d e r i t e m z i j n de vo lgende - s t a t i s t i s c h e - groo theden berekend.

a.

b.

C .

d.

e e

f ,

a a n t r e k k e l i j k h e i d der a l t e r n a t i e v e n ; d,w,z, h e t p e r c e n t a g e der

kandida ten d a t i eder d e r v i e s a l t e r n a t i e v e n gekozen h e e f t als

h e t j u i s t e antwoord

a a n t r e k k e l i j k h e i d der a l t e r n a t i e v e n met zekerhe idsaanduid ing ;

z i e a. Het v e r s c h i l met a is d a t v o o r i e d e r a l t e r n a t i e f boven-

d i e n ondersche id wordt gemaakt t u s s e n met en zonder zekerheid

beantwoorden

h e t p e r c e n t a g e k a n d i d a t e n d a t h e t i tem o v e r s l o e g

h e t p e r c e n t a g e k a n d i d a t e n d a t h e t item met zekerheid beantwoord

h e e f t ; d i t p e r c e n t a g e wordt i n de l i t e r a t u u r ( z i e v a n Naerssen)

de " s u b j e c t i e v e gemakkelijkheid" genoemd

de i t e m - t o t a a l c o r r e l a t i e ; h e t a a n t a l punten d a t de k a n d i d a t e n

v o o r h e t b e t r e f f e n d e item behaalden ( O o f 1 ) wordt g e c o r r e l e e r d

met de s c o r e (zonder zekerhe idsaanduid ing) van de k a n d i d a a t ,

De i t e m - t o t a a l c o r r e l a t i e s geven een indruk o v e r de homogeni te i t

v a n de t e s t ( t e s t homogeen wanneer er geen g r o t e o n d e r l i n g e ver -

s c h i l l e n t u s s e n de i t e m - t o t a a l c o r r e l a t i e s b e s t a a n ) . Verder be-

va t de i t e m - t o t a a l c o r r e l a t i e i n f o r m a t i e o v e r de nate waar in h e t

item de u i t e i n d e l i j k e v o l g o r d e d e r k a n d i d a t e n v o o r s p e l d e .

Ui tgaande van de hypothese d a t de t e s t &én-dimensionaal moet

meten, is een e i s h e t r e d e l i j k g r o o t z i j n v a n h e t g r o o t s t e ge-

d e e l t e v a n d e i t e m - t o t a a l c o r r e l a t i e s ,

Een hoge i t e m - t o t a a l c o r r e l a t i e w i l zeggen d a t d e - gekeken naar

de h e l e t e s t - goede k a n d i d a t e n de vraag goed beantwoorden ter -

w i j l de s l e c h t e k a n d i d a t e n de vraag f o u t beantwoorden

de i t e m - t o t a a l c o r r e l a t i e met zekerhe idsaanduid ing

deze g r o o t h e i d h e e f t deze l fde b e t e k e n i s a ls de onder e. vermelde,

a l l e e n moet nu a l l e i n f o r m a t i e be t rokken worden op a l l e gegetrens

me t zeker h e i d s aandui d i n g

p h i goed - zeker

deze g r o o t h e i d is een maat voor de c o r r e l a t i e t u s s e n h e t goed

beantwoorden en h e t zeker beantwoorden e n e r z i j d s en h e t f o u t be-

antwoorden gecombineerd met een onzeker antwoord a n d e r z i j d s ,

~~

- 20 -

- 20 -

De d e f i n i t i e v a n l u i d t :

zg*Of - zf*Og Y = d ( z g + z f 1 (zgi-og) (z f9Of) ( O f + O g )

met zg : a a n t a l zeker-goed gegeven antwoorden

zf : a a n t a l zeker - fou t gegeven antwoorden

Og : a a n t a l onzeker-goed gegeven antwoorden

O f : a a n t a l onzeker - fout gegeven antwoorden

Wanneer zg >> zf en O f »Og, dus wanneer h e t merendeel der k a n d i d a t e n

d i e een zeker antwoord gaven t e v e n s een goed antwoord gaven , t e r w i j l

h e t g r o o t s t e gedee l te van de onzekere an

Y' i n de b u u r t v a n 91, Wanneer zf >>zg en

as, dan li

= O wanneer h e t zeker be ntwoorden en h e t goed beantwoorden onaf-

i j k z i j n , dus b i j v o o r b e e l d wanneer zg = zf = O g = O f ,

r een v a n de grootheden zg, z f , O g o f O f meer dan b i j v o o r b e e l d

80% v a n h e t t o t a l e a a n t a l bedraag t is de waarde

k l e i n e o n d e r l i n g e w i j z i g i n g e n i n de a r e a a n t a l l e n g r o t e i n v l o e d

op Lp u i t o e f e n e n ,

Voorbee ld , S t e l z g = 80 als z g + zf + 02 + Of = 100

dan g e l d t b i j O f = 10

onbru ikbaar omdat

= Oo7S en b i j zf = 10 V = -0,l Of =

O t Y7 og = 10

zf =

og = 10

Door 10% van de k a n d i d a t e n van onzeker - fout over t e h e v e l e n n a a r zeker-

f o u t v e r a n d e r t y v a n 90.75 t o t -0-1,

U i t de onder a, en b o vermelde groo theden kan i n f o r a a t i e verkr

worden o v e r de v e r s c h i l l e n d e a l t e r n a t i e v e n b i j een item,

Soms za l dan geconc ludeerd worden d a t b e p a a l d e a l t e r n a t i e v e n d o o r hun

f o r m u l e r i n g mis le idend gewerkt hebben; soms kan de hypo these gemaakt

worden d a t h e t o n d e r w i j s (b ,v , een e v e n t u e l e s y l l a b u s ) op een b e p a a l d

o n d e r d e e l n i e t i n overeenstemming w a s met de ges te lde ( tentamen) e i s e n ,

B i j de onderhav ige t e s t hebben w i j h e r h a a l d e l i j k v e r r a s s e n d e in formatLe

verkregen . De indruk d i e men b i j een klassiek tentamen w e l overhoudt

d a t van bepaalde d e l e n v a n h e t vak door s t u d e n t e n n i e t s is be-

grepenf2 kan b i j g e b r u i k v a n een o b j e c t i e v e t e s t worden omgezet i n een

op de p r e s t a t i e s van een he le groep gefundeerde u i t s p r a a k ,

Bovenaien k r i j g e n w i j i n f o r m a t i e i n welke r i c h t i n g een c o r r e c t i e i n

h e t o n d e r w i j s g e z o c h t moet worden.

- 21 -

- 21 -

U i t c o volgt d a t b i j h e t onderdee l t r i l l i n g e n b i j n a s t e e d s door a l l e

k a n d i d a t e n de j u i s t e tentamen-techniek is g e v o l g d : g66n vraag over -

s l a a n , D e laatste items v a n b a l a n e e r i n g worden door een a a n m e r k e l i j k

p e r c e n t a g e d e r k a n d i d a t e n ( t o t 23%) o v e r g e s l a g e n . D i t w i j s t op t i j d -

nood e

W i j c o n s t a t e r e n v e r d e r d a t items d i e een v r i j u i t g e b r e i d e b e c i j f e r i n g

v e r e i s t e n , nog a l eens worden o v e r g e s l a g e n

I n t a b e l I11 z i j n e n i g e a l g e a e n e gegevens v o o r de i t e m - t o t a a l c o r r e l a -

t i e s , de phi-waarden en h e t p e r c e n t a g e met z e k e r h e i d gegeven antwoordenl

opgenomen, T a b e l X'bevat de c o r r e l a t i e - f a c t o r e n t u s s e n deze grootheden, _ ~ . .

T a b e l I X p e r c e n t a g e zeker

T a b e l X p C o r r e l a t i e m a t r i x

T o t a a l ,

- 22 -

- 22 -

De g r o t e s t a n d a a r d - d e v i a t i e s tonen aan d a t e r een g r o t e s p r e i d i n g

i s t u s s e n de gegevens v o o r de v e r s c h i l l e n d e v ragen , De gemiddelde

waarde v o o r de i t e m - t o t a a l c o r r e l a t i e s l i j k e n aan de lage k a n t (vg l ,

v a n Naerssen , d i e gemiddelde waarden v a n 0.23 en 0.24 vond). Voor een

verdergaande i n t e r p r e t a t i e v a n de h i e r vermelde r e s u l t a t e n z a l de

s t e u n v a n de groep onderwi j s research worden ingeroepen,

- 23 -

. 1 . 4-

- 23 -

6. Is v o o r a f een s c h a t t i n g t e geven v a n de "moei l i jkheid" v a n een item?

Om twee redenen is een onderzoek n a a r de v o o r s p e l b a a r h e i d v a n de

m o e i l i j k h e i d va.n een vraag b e l a n g r i j k . Op de e e r s t e plaats om vast

t e s t e l l e n i n h o e v e r r e a p r i o r i de m o e i l i j k h e i d van een item k a n

worden vas tges te ld . Op de tweede plaats is i n t e r e s s a n t om t e onder-

zoeken i n h o e v e r r e de meningen v a n v e r s c h i l l e n d e personen h i e r i n

overeenstemmen, B i j de klassieke tentamineer-methoden en zeker b i j

h e t mondeling examen is voor de b e o o r d e l i n g van de p r e s t a t i e s van een

k a n d i d a a t v a n b e l a n g hoe f9moei l i jk" of hoe "gemakkelijks' de examintor

de door hem g e s t e l d e vraag v i n d t - - 1 ' _ _ _

W i j voerden h e t vo lgende experiment u i t .

De d r i e mensen d i e meewerkten aan de c o n s t r u c t i e van de t e s t ( t e

weten: de d o c e n t , de i n s t r u c t e u r en een w e t . med.) gaven v Ó Ó r h e t

examen v o o r i e d e r i t e m aan h o e v e e l p r o c e n t van de kandida ten een

b e p a a l d i tem goed zou beantwoorden. Daarna werd door d i t team samen

nogmaals d i t p e r c e n t a g e vastgesteld.

N a d a t de mondelinge examens waren afgenomen en de examinatoren v a n

h e t mondeling de t e s t gemaakt hadden, gaven ook z i j een s c h a t t i n g

~ VEK h e t p e r c e n t a g e goede antwoorden p e r item. De examinatoren z u l l e n

worden aangeduid als- Ex.11 en Ex. 11. De zes a l d u s v e r k r e g e n s c h a t t i n g e n werden o n d e r l i n g en met de u i t de

t e s t berekende m o e i l i j k h e i d s g r a a d v e r g e l e k e n ( z i e t a b e l XI. Tevens

Eer6 de gemiddelde n o e i l i j k h e i d en de s t a n d a a r d d e v i a t i e berekend ( z i e

t a b e l XI).

T a b e l X

doc e n t

i n s t r u c t e u r

wet. rned.

team

ex . I

ex . I1 t e s t

C o r r e l a t i e m a t r i x m o e i l i j k h e i d s g r a a d

docent

- 0.47 0.36 0.82

0.53 0.36 0.36

i n s t r u c - wet .

- 0.49 - 0.71 0.69

tearr

=

- 0.60 0.47 0.40

ex. I

_r

- 0.58 0.62

ex. I1

- 0.36

t e s t (zonder zekerheid)

- 24 -

- 24 -

T a b e l X I M o e i l i j k h e i d s g r a a d

%ij c o n s t a t e r e n u i t t a b e l X d a t de c o r r e l a t i e t u s s e n geschatte moei-

l i j k h e i d en de w e r k e l i j k e i u o e i l i j k h e i d v r i j laag is, Door examinator I

werd de b e s t e v o o r s p e l l i n g gedaan, D i t kan w e l l i c h t v e r k l a a r d worden

u i t de algemene examen-ervaring d i e deze examinator b e z i t , M o g e l i j k

i s ook h e t f e i t d a t de s c h a t t i n g e n gemaakt werden nada t de h e l e g r o e p

h e t mondeling tentamen gepasserd w a s van i n v l o e d .

De c o r r e l a t i e t u s s e n de s c h a t t i n g e n van de deelnemers z i j n eveneens

laag. D i t w i l zeggen d a t p e r vraag de S c h a t t i n g e n van de v e r s c h i l l e n d e

mensen n o g a l eens f l i n k v a n elkaar v e r s c h i l l e n , W i j v r a g e n o n s af of

deze c o n c l u s i e n i e t t o t g e v o l g h e e f t d a t b i j v o o r b e e l d b i j een monde-

l i n g examen een v r i j g r o t e kans bes taa t d a t twee examinatoren een

t o t a a l v e r s c h i l l e n d e o p v a t t i n g hebben o v e r de m o e i l i j k h e i d v a n ges te lde

v r a g e n en dus o v e r de w i j z e waarop de b e o o r d e l i n g moet worden gerna&t*

Bovendien l i j k t d i t f e i t n a d e l i g t e werken b i j h e t v a s t s t e l l e n v a n kern-

items,

U i t t a b e l X I v o l g t d a t de t e s t m o e i l i j k e r was d a n verwacht werd, Een

g l o b a l e i n d r u k o v e r de m o e i l i j k h e i d w a s e c h t e r we l t e v e r k r i j g e n . De

d o c e n t en exo I b l i j k e n goed de s t a n d a a r d d e v i a t i e t e v o o r s p e l l e n , D i t

gegeven is een b e l a n g r i j k t e s t g e g e v e n i n verband met de d i s c r i m i n a t i e

d i e de t e s t t o t s t a n d moet brengen.

Het door Roskam g e s i g n a l e e r d e v e r s c h i j n s e l da t raaar z e l d e n e e n vraag

gemakkelijker w a s dan verwacht werd kan zeker n i e t v o o r i e d e r der

deelnemers aan d i t exper iment worden gehandhaafd.

- 25 -

- 25 -

7 * Het mondeling examen

Door a l l e 30 k a n d i d a t e n werd na de m u l t i p l e - c h o i c e t e s t o v e r " T r i l -

l i n g e n en Ba lancer ing" een mondeling onderzoek v a n nominaal 45 min,

afgenomen door twee examinatoren,

Z i j waren g e d e t a i l l e e r d op de hoogte v a n de op h e t c o l l e g e behandelde

s t o f , d o o r d a t z i j de b e s c h i k k i n g hadden o v e r u i t g e b r e i d e n o t i t i e s van

de docent en v a n de i n s t r u c t e u r , d i e a l l e c o l l e g e s g e v o l g d h e e f t , Z i j

konden bovendien besch ikken o v e r een geluidsopnanie van p r a c t i s c h de

gehele c o l l e g e s t o f , Van deze laa ts te f a c i l i t e i t w e r d geen g e b r u i k ge-

maakt.

De examinatoren waren n i e t op de hoog te v a n de M,C. items, Evenmin

b e s c h i k t e n z i j o v e r r e s u l t a t e n v a n deze t e s t ,

Het mondeling onderzoek gebeurde op de i n de g r o e p t e c h n i s c h e mecha-

n i c a g e b r u i k e l i j k e manier. D i t w i l zeggen d a t een bepaa lde k a n d i d a a t

door &én examinator aan de tand wordt g e v o e l d , De andere examinator

b e p e r k t z i c h t o t h e t p l e g e n van k l e i n e ingrepen i n de vorm v a n d e t a i l -

v r a g e n en h i n t s ,

I n h e t algemeen worden twee opeenvolgende k a n d i d a t e n n i e t door d e z e l f d e

examinator onderzocht ,

De examinatoren hebben v o o r i e d e r e k a n d i d a a t de b e s c h i k k i n g o v e r een

kaart waarop een a a n t a l gegevens vermeld s t a a n , D e b e l a n g r i j k s t e z i j n :

a, v o o r o p l e i d l n g (HeBeS., Gymnasium, H.a.S.> b. eindexamen c i j f e r s voor wiskunde, natuurkunde en scheikunde

c s jaar v a n 'ìe i n s c h r i j v i n g

d. een a a n t a l c i j f e r s voor de afgelegde examens; i n d i t geva l

i n h e t algemeen h e t P-examen en h e t Kl-exauzen. Ook examens

d i e e i n d i g e n i n een v e r l e n g i n g , nader onderzoek o f a f w i j z i n g

z i j n vermeld-

e , t i j d s t i p v a n s l a g e n v o o r deze examens

f , de behaa lde c i j f e r s voor de door de g r o e p v e r z o r g d e vakken,

I n h e t algemeen z i j n d i t i n d i t s tadium van de s t u d i e i n -

l e i d i n g t e c h n i s c h e mechan I, I1 en I11 g. o v e r de k a n d i d a a t gemaakte "karakteristieke?' opmerkingen

door examencommissies i n een eerder s tad ium van de s t u d i e

Het g e b r u i k v a n de kaart l i j k t m i j z e e r v e e l nade len t e b e z i t t e n , H e t

examen wordt begonnen met een f f vooroordee l f ' o v e r d.e k a n d i d a a t opge-

bouwd u i t c i j f e r s i n een e e r d e r s t ad ium behaa ld en u i t e n i g e opmerkingen

d i e door v o r i g e examencommissies gemaakt z i j n , Deze opmerkingen hebben

- 26 -

- 26 -

d e e l s b e t r e k k i n g op h e t beheersen van de s t o f , d e e l s op p e r s o o n l i j k -

hzidskenmerken, S i j deze laatste c a t e g o r i e moet n i e t u i t h e t oog ver-

l o r e n worden d a t z i j gemaakt z i j n door leken-psychologen!

B i j h e t v a s t s t e l l e n v a n de v o l g o r d e waar in de k a n d i d a t e n geëxamineerd

werden moest r e k e n i n g worden gehouden met examenzi t t ingen v a n andere

vakken, Over igens werd de i n d e l i n g w i l l e k e u r i g gemaakt.

De docent ( t e v e n s c o n s t r u c t e u r van de M.C. t e s t ) k r e e g toestemming

a ls '?toehoorder" b i j h e t mondeling examen aanwezig t e z i j n , Om b i j

de s t u d e n t e n misvers tanden t e voorkomen werd medegedeeld d a t de docent

op geen e n k e l e manier d e e l zou nemen aan de d i s c u s s i e o f de beoorde l ing ,

B i j 10 van de 30 k a n d i d a t e n v o l g d e de a u t e u r van d i t r a p p o r t h e t mon- d e l i n g onderzoek. H i j kreeg bovendien de b e s c h i k k i n g o v e r a l l e t i j d e n s

h e t n o n d e l i n g gemaakte n o t i t i e s . H i j w a s d a a r b i j n i e t op de hoogte van

de door de k a n d i d a a t behaalde s c o r e b i j de t e s t ,

Vragen

I n h e t algemeen wordt een v r a a g s t u k geschetst waarvoor e e n o p l o s s i n g

gevraagd wordt Meestal wordt een f i g u u r getekend waardoor he t probleem

min o f meer gekarakteriseerd is t e r w i j l mondeling een a a n t a l hypothesen

worden meegedeeld en - i n e n k e l e g e v a l l e n - een b e s c h r i j v i n g wordt ge-

geven v a n de c o n s t r u c t i e waarvan h e t v r a a g s t u k een s c h e m a t i s e r i n g is,

De v a r i a t i e i n de v r a a g s t u k k e n is n i e t buitengewoon g r o o t , I n h e t al -

gemeen k r i j g t iedere k a n d i d a a t s l e c h t s twee v r a a g s t u k k e n onder ogen,

De meeste h i e r v a n komen - e v e n t n e e l met een k l e i n e variatie - m h s t e n s

tweemaal v o o r - Het is mijn mening d a t v raags tukken d i e s l e c h t s eenmaal

t e r s p r a k e komen meestal door d e commissie b i j nader i n z i e n a ls minder

g e s c h i k t werden beschouwd.

Een a a n t a l problemen komen buitengewoon vaak t e r s p r a k e , U i j noeme

de 3 - c i l i n d e r l i j n m o t o r (5x1 een 2 - c i l i n d e r motor i n e n i g e v a r i a t i e s

(16x1, k r i t i s c h e t o e r e n t a l v a n een as met één puntmassa (4x1.

D e door de examinatoren g e s c h e t s t e f i g u r e n kunnen n o g a l eens gekwali-

f i c e e r d worden als o n v o l l e d i g . Z i j b e v a t t e n vaak s l e c h t s een gedeel te

van de i n f o r m a t i e .

Het komt v o o r d a t de k a n d i d a a t een vraag g e s t e l d wordt t e r w i j l n i e t

vo ldoende gegevens z i j n meegedeeld. Naderhand gee f t de examina tor dan

de ontbrekende i n f o r m a t i e e E i j een a a n t a l k a n d i d a t e n kunnen h i e r d o o r

- j u i s t a a n h e t b e g i n v a n h e t tentamen - w e l l i c h t misvers tanden worden

gewekt .

- 27 -

- 27 -

Ondanks h e t f e i t d a t een bepaald v r a a g s t u k a a n meerdere kandida ten

wordt v o o r g e l e g d , staat i n h e t g e h e e l n i e t vast hoe h e t "gesprekrf

z i c h verder o n t w i k k e l t . Wanneer door een k a n d i d a a t een onvolle,@ge

o f o n j u i s t e bewer ing wordt gedaan wordt h i e r o p door de examinator

meestal o n m i d d e l l i j k ingehaak t met een vraag o f een o p d r a c h t , Op d i t

k l e i n e g e b i e d word t dan v e r d e r g e v r a a g d t o t h e t moment d a t de kandi -

d a a t h e e f t aangetoond d a t h i j e l e m e n t a i r e begr ippen , gedoceerd i n

andere c o l l e g e s o f op de middelbare s c h o o l , op d i t o g e n b l i k n i e t kan

u i t l e g g e n o f t o t h e t moment d a t de examinator h e t vermoeden h e e f t d a t

h i j de basis w e l b e h e e r s t . Het is n o o d z a k e l i j k af t e spreken welke

b e t e k e n i s aan een examen o v e r een d e e l der t e c h n i s c h e mechanica toe -

gekend word t : onderzoeken w i j de k e n n i s o v e r h e t b e t r e f f e n d e dee l of

onderzoeken w i j de k e n n i s o v e r h e t b e t r e f f e n d e d e e l p l u s de h e l e of

g e d e e l t e l i j k e k e n n i s v a n a l l e voorgaande onderde len i n c k s i e f wiskunde

aspec ten? Wanneer d i t l a a t s t e a l t e r n a t i e f wordt gekozen moet d i t a a n

de s t u d e n t e n bekend worden gemaakt en moeten a l l e k a n d i d a t e n op h e t

a s p e c t v a n de V r o e g e r e kennis" worden g e t e s t , Mi jns i n z i e n s zou hier-

door een o n t z a g l i j k e verzwar ing van de mechanica-vakken i n h e t derde-

jaar b e w e r k s t e l l i g d worden,

De examinatoren s t e l l e n erg p r i j s op h e t nauwkeurig formuleren van de

antwoorden, Een onge lukk ige manier van u i tdrukken r o e p t t e l k e n s , i n t e r -

r u p t i e s op. D i t b e t e k e n t d a t de k a n d i d a a t i n z i j n gedachtengang wordt

onderbroken t e r w i j l h i j bovendien h e t r i s i c o l o o p t naar a a n l e i d i n g van

een gebrekkige f o r m u l e r i n g 'Fmoeili jke" v r a g e n t e moeten beantwoorden.

De examinatoren dwingen een k a n d i d a a t soms e e n weg t e v o l g e n , . d i e af-

wijkt v a n degene d i e op c o l l e g e is behandeld, Deze werkwijze is onder

omstandigheden zeker g e o o r l o o f d wanneer men z i c h vo ldoende r e a l i s e e r t

d a t d i t een m o e i l i j k e opgave ise

De gegeven h i n t s of als h i n t bedoe lde t u s s e n v r a g e n waren mi jns i n z i e n s

soms m o e i l i j k t e verwerken. Bovendien l i j k t m i j h e t opvangen van een

h i n t een hoog g e k w a l i f i c e e r d e vaard ighe id ,

De b e o o r d e l i n g

I n de meeste g e v a l l e n v i n d t e r w e i n i g d i s c u s s i e p l a a t s t u s s e n de exa-

minatoren o v e r de b e o o r d e l i n g .

A f en t o e wordt b i j de b e o o r d e l i n g een k a n d i d a a t v e r g e l e k e n met z i j n

voorganger , maar d i t g e b e u r t i n z e e r algemene bewoordingen,

Het is mijn mening d a t de t o t a a l i n d r u k v a n de k a n d i d a a t v a n d o o r s l a g -

gevende b e t e k e n i s is , w a a r b i j r e a c t i e s n e l h e i d , u i tdrukkingsvermogen,

- 28 -

- 28 -

k e n n i s v a n v r o e g e r behandelde s t o f tesamen met k e n n i s en i n t e l l e c t u e l e

v a a r d i g h e d e n op h e t b e t r e f f e n d e vakgebied 'in de beschouwing worden

betrokken:

De r e s u l t a t e n

I n t a b e l X I 1 geven w i j de f r e q u e n t i e v e r d e l i n g , h e t gemiddelde en de

s t a n d a a r d a f w i j k i n g v o o r de c i j f e r s v o o r de onderdelen t r i l l i n g e n I

b a l a n c e r i n g en h e t t o t a a l

Tabe l X I 1 F r e q u e n t i e v e r d e l i n g , enz, mondeling exameri,

Ba lanc e r i n T o t a a l

I n t a b e l X I 1 1 z i j n de c o r r e l a t i e f a c t o r e n vermeld d i e b l i j k e n t e be-

s t a a n t u s s e n de r e s u l t a t e n v o o r t l i n g e n , b a l a n c e r i n g en h e t t o t a a l

z o d s g e s c o o r d t i j d e n 5 he% mondeling exanera-

De d i f f e r e n t i a t i e d i e d e mondelinge t e s t teweeg b r e n g t is n i e t erg

g r o o t z o a l s b l i j k t u i t de g r o o t t e d e r s t a n d a a r d d e v i a t i e s , Voor h e t

t o t a a l is de s p r e i d i n g k l e i n e r dan voor d e a f z o n d e r l i j k e d e l e n z o a l s

ve rwacht kon worden u i t h e t f e i t d a t de examinatoren h e t e i n d c i j f e r

v a s t s t e l d e n u i t de d e e l c i j f e r s . H e t c i j f e r v o o r t r i l l i n g e n b l i j k t

i e t s hoger t e c o r r e l e r e n met h e t e i n d c i j f e r dan h e t c i j f e r voor ba-

l a n c e r i n g ,

De v e r g e l i j k i n g van deze r e s u l t a t e n met d i e v a n de o b j e c t i e v e t e s t

z u l l e n w i j nog nader bespreken,

- 29 -

- 29 -

Tabel XI11

C o r r e l a t i e m a t r i x T r i l l i n g e n , B a l a n c e r i n g , T o t a a l

(mondeling e x m e n )

- 30 -

- 30 -

8, V e r g e l i j k i n g van de r e s u l t a t e n van de M . C . - t e s t en h e t mondeling

onderzoek.

Z o a l s r e e d s bekend werd v o o r i e d e r e k a n d i d a a t l a n g s twee onafhanke-

l i j k e wegen een b e o o r d e l i n g vas tges te ld . De b e o o r d e l i n g van h e t mon-

d e l i n g vond p l a a t s door h e t v a s t s t e l l e n van d r i e c i j f e r s i n een IC-

p u n t s s c h a a l a één v o o r t r i l l i n g e n , één v o o r b a l a n c e r i n g en e e n t o t a a l -

c i j f e r . D i t c i j f e r b e v a t twee - i n wezen o n a f h a n k e l i j k e - i n f o r m a t i e s .

Aan i e d e r e k a n d i d a a t u i t de groep wordt een rangnummer toegekend (een

k a n d i d a a t b e o o r d e e l d met een 8 v o l d o e t b e t e r a a n de normen dan een

k a n d i d a a t d i e een 7 b e h a a l t ) e n bovendien wordt aangegeven of een

kand-idaat slaagt ~ of zakt (een k a n d i d a a t met c i j f e r 5 or" minder z a k t ) .

De s c o r i n g b i j de M.C.-test g e e f t r e c h t s t r e e k s de v o l g o r d e a a n , w a a r i n

de k a n d i d a t e n aan de normen vo ldoen , De b e s l i s s i n g vo ldoende - onvol -

doende v e r e i s t een extra p r o c é d % e v e n a l s de t r a n s f o r m a t i e n a a r een

t i e n - p u n t s s c h a a l ,

I n t a b e l X I V geven w i j nogmaals de door iedere k a n d i d a a t behaalde

s c o r e b i j t r i l l i n g e n , b a l a n c e r i n g en de t o t a l e t e s t ( s c o r e met zeker -

i n g ) . Bovendien bevat deze t a b e l v o o r deze d e l e n de c i j f e r s

v a n h e t mondeling examen, Voor de t o t a l e t e s t is bovendien voor i e d e r e

k a n d i d a a t een c i j f e r vermeld d a t v e r k r e g e n werd v o l g e n s de i n 3 e en 4, g e s c h e t s t e procedure

De twee laatste kolommen i n t a b e l KIV geven dus de c i j f e r s weer d i e

iedere k a n d i d a a t v e r k r i j g t op grond van de o b j e c t i e v e t o e t s en h e t

mondeling examen. Het gemiddelde v a n de o b j e c t i e v e t e s t is 7,O ( s t a n -

d a a r d d e v i a t i e 1.47), d a t v a n h e t mondeling is 6 , 2 ( s t a n d û a r d d e v i a t i e

7-39) "I

W i j w i l l e n op de e e r s t e plaats onderzoeken i n h o e v e r r e de vas tges te lde

r a n g o r d e s i n de g r o e p voor de twee examineermethoden met elkaar c o r r e s -

ponderen, D a a r t o e is de c o r r e l a t i e m a t r i x b e p a a l d v o o r de c i j f e r s van

h e t mondeling onderzoek en de s c o r e s van de EFC.-test met zekerheids-

aanduid ing ( z i e t a b e l XV).

- 31 -

Kandi-

daat n r

1

2

3 4

5 6 7 8 9 10

11

12

13 14

15 16 17 18

19 20

21

22

23 24-

25 26

27 28 29 30

~

- 31 -

T a b e l X I V

V e r g e l i j k i n g mondeling e n m u l t i p l e - c h o i c e examen

T r i l l i n g e n

M.C, met

zeker he i d

13 39 34 32 38 24

23 29 56 14

35 32 44

47 21

42 44

31 34

45 51 26 4-2

22

40 41

42

26 28 41

mond.

4 7 8 3 8 6

5 6 7 4

7 7 8

7 6 8 7 8

7 3 7 7 4 7 7 6 6

5 5 5

~

Balanc e r i n g

M.C. met

z e k e r h e i d

- 3 6

13 5

21

- 0

7 4

18

2

IO

4 10

13 10

8 17

O

16 15 5 12

10

9 12

14 IO

6 O

12

~

mond o

4 7 7 7 7 4

9 5 7 4 6 4 7 6

5 8 6 8 8 4

5 8 7 8 -

7 6

5 6 4

5

T o t a a l

N.C. met

z e k e r h e i d

IO

45 47 37 59 24

30 33 74

45 36 54 60

33 50 61

31 50 57 50 63 36 48 34 54 51

32 28

53

16

c i j f e r

u i t M. c e

4

7 7 6 8

5 6 6 10

4

7 6 8

9 6 8 9 6 8 8 8 9 6

7 6 8 8 6

5 8

mond e

c i j f e r

4 7 8 4

7 5 6 6

7 4

7 6 8

7 5 8 6 8 7 3 6 8 6 8 7 6 6 6 4

5

- 32 -

c B h

Y

IC

'i 9

B

c (r

Q (i

C e

h

3

Q h

h

8 h Q

h h(

e

n ir

z

Y

R

a h

I

h iri

a cn

B

r, ?

\ 2

4' k c1, b

\

- 32 -

T a b e l XV

C o r r e l a t i e m a t r i x v o o r h e t M.C. en h e t mondeling examen

Voor h e t u i r e i n d e l i j k e r e s u l t a a t is de c o r r e l a t i e f a c t o r t u s s e n de

r e s u l t a t e n v a n de M . C e - t e s t en h e t mondeling examen s l e c h t s 0,45. Voor de onder en t r i l l i n g e n en b a l a n c e r i n g is de c o r r e l a t i e nog

s l e c h t e r n l . 0,41 en 0.36, De c o r r e l a t i e f a c t o r v o o r de e i n d - c i j f e r s , vas tges te ld u i t de M.C.- t e s t en h e t mondeling examen v i n d e n w i j u i t e r a a r d een g e t a l i n de

buur t v a n 0 ,45 , Het b l i j k t t e z i j n : 0-47. U i t de g r a f i e k e n I, 11, I11 en I V v o l g t op een a a n s c h o u w e l i j k e m a -

n i e r d a t e r v r i j g r o t e v e r s c h i l l e n b e s t a a n t u s s e n de r e s u l t a t e n v a n

de twee beoordel ingsmethoden.

Ons i n z i e n s is de c o r r e l a t i e t u s s e n de twee examineermethoden t e laag.

&ij z u l l e n moeten v a s t s t e l l e n welke methode i n de t o e k o m t de voorkeur

moet k r i j g e n , H e t op een l i j n s t e l l e n v a n b e i d e metknoden l i j k t n a dik exper iment ongeöor lóö f

K i j merkten reeds op d a t b i j de o b j e c t i e v e t o e t s de b e s l i s s i n g v o l -

doende - onvoldoende een a p a r t e procedure v e r e i s t , Het f e i t da t op

grond v a n h e t mondeling a a n m e r k e l i j k meer kandida ten zouden zakken dan

op grond van d e door ons b i j d e M,C. gehanteerde norm moet ons n i e t v e r -

o n t r u s t e n . D e gekozen norm v o o r de M . C . - t e s t is w e l l i c h t a a n de l a g e

k a n t . I n de groep moet o v e r de keuze der norm nog i n t e n s i e f g e d i s c u s s i -

eerd worden, Het l i j k t ons e c h t e r n i e t o n r e d e l i j k v o o r deze g r o e p s t u -

denten , d i e z i c h tweemaal aan een onderzoek moest onderwerpen, een

s o e p e l e norm t e hanteren, De gekozen norm b l i j k t a c h t e r a f bovendien h e t

n i e t t e o n d e r s c h a t t e n v o o r d e e l t e b e z i t t e n d a t géén k a n d i d a a t werd af-

- 33 -

- 3 3 -

gewezen d i e op grond van z i j n mondeling tentamen geslaagd zou z i j n .

aanneer w i j , g e l e i d door h e t mondeling, 27% der k a n d i d a t e n zouden

hebben afgewezen, betekende d i t d a t b e h a l v e de kandida ten I , 6, 10 en

29 bovendien de k a n d i d a t e n 7 , 15, 18 e n 28 waren gezakt, Deze laatste

v i e r s t u d e n t e n behaa lden als c i j f e r op h e t mondeling: 6 , 5, 8 ( ! ) en 6,

Omdat b i j de o p z e t v a n ons experiment r e k e n i n g gehouden werd met een

d i s c r e p a n t i e t u s s e n o b j e c t i e v e t o e t s en mondeling examen, werd een

pog ing gedaan vast t e s t e l l e n hoe i n de g r o e p t e c h n i s c h e mechanica h e t

waarde -oordee l o v e r de M.C.-methode l u i d t ,

De i n s t r u c t e u r en de wet- medewerker d i e samen met de docent o v e r de

t e s t d i s c u s s i e e r d e n s tonden z e e r p o s i t i e f t e g e n o v e r de N.C, - tes t ,

De w e t . medewerker w a s bekend met deze vraagmethode omdat h i j i n ok-

t o b e r 7967 z e l f een d e r t i g t a l items c o n s t r u e e r d e i n h e t kader van een

b e g e l e i d i n g s e x p e r i m e n t i n de a f d e l i n g Vlerktuigbouwkunde,

De twee examinatoren d i e h e t mondeling examen afnamen s tonden open v o o r

h e t exper iment , Z i j waren n i e t g e d e t a i l l e e r d op de hoog te van de p r e c i e s e

gang van zaken b i j een M,C,-test, V66r de examens werd met hon s l e c h t s

i n zeer algemene bewoordin o v e r d-e t e s t v o r u i gesproken,

Nadat z i j de onderhav ige t e s t hadden gemaakt werd g e t r a c h t om van hen

v o o r i e d e r i tem e n i g e i n a t i e t e v e r k r i j g e n , Bovendien werd hen ora

e n i g e algemene u i t s p r a k e n gevraagd ,

Het w a s n i e t t e r e a l i s e r e n g e d e t a i l l e e r d de o p i n i e t e p e i l e n van de

andere medewerkers u i t de groep. B i t z a l na h e t t o t s t a i ld komen van d i t

rapport geprobeerd worden o

~- ~~

%ij z u i l e n de r e a c t i e s van de twee examinatoren t r a c h t e n weer t e geven,

Een werd gevraagd de t e s t t e maken en h i e r wa.xima.al 3 uur aan t e be-

s t e d e n (de s t u d e n t e n hadden de b e s c h i k k i n g o v e r 3 , 5 uur) .

I n t a b e l X V I z i j n e n i g e gegevens v a n de door hun b e r e i k t e r e s u l t a t e n

vermeld.

- 31. -

- 3 4 -

T a b e l X V I S c o r i n g examinatoren

V e r g e l i j k e n w i j de r e s u l t a t e n u i t t a b e l X V I met d i e u i t t a b e l 11 dan

c o n s t a t e r e n w i j d a t examinator I v o o r h e t t o t a a l met z e k e r h e i d 1 8 punten

meer s c o o r t dan d e b e s t e k a n d i d a a t , t e r w i j l examinator I1 4 k a n d i d a t e n

v ó ó r moet l a t e n gaan, Opmerkel i jk is d a t b i j h e t onderdee l b a l a n c e r i n g

be ide examinatoren minder punten s c o r e n d a t de b e s t e stu-dent , H i e r u i t

b l i j k t d a t ook d e examinatoren t i j d n o o d hadden. Examinator I merkte

na a f l o o p op d a t h i j 5 items, d i e h i j i n e e r s t e i n s t a n t i e had overge -

s l a g e n zonder meer g e g o k t h e e f t , H i j toonde v e r d e r a a n d a t - eveneens

wegens dr ingend t i j d g e b r e k - b i j de l a a t s t e i t e m s minder g e b r u i k werd

gemaakt v a n de zekerhe idsaanduid ing* B e i d e examinatoren vonden h e t

maken v a n de t e s t u i t e r s t vermoeiend, V b o r a l h e t t e l k e n s omschakelen

b i j de overgang naar een volgend- i t e m k o s t t e examinator 1 v e e l e n e r g i e .

W i j moeten c o n s t a t e r e n d a t h e t a a n t a l i t e r i s t e g r o o t w a s , zowe l v o o r de

t e r b e s c h i k k i n g g e s t e l d e t i j d a l s i n a b s o l u t e z i n , Een r e ë l e r a a n t a l

i tems is 40. D e goede s t u d e n t e n z i j n dan binnen 2 uur klaar,

M a h e t i n v u l l e n v a n de t e s t werd de examinatoren gevraagd de enque te t e

beantwoorden d ie w i j i n hoofds tuk 9 z u l l e n bespreken, Op d i t moment is

i n t e r e s s a n t t e vermelden d a t de t e s t v o l g e n s hun mening een goed even-

w i c h t b e z i t t u s s e n t h e o r i e en t o e p a s s i n g ,

D e s c h a t t i n g v a n de m o e i l i j k h e i d van de items was de vo lgende o p d r a c h t

aan de e x m i n a t o r e n . Deze r e s u l t a t e n z i j n r e e d s v e r w e r k t i n h o o f d s t u k 6

- 35 -

( z i e t a b e l X en X I ) . Examinator I benader t de r e s u l t a t e n van de groep

h e t b e s t e , Examinator I1 onderscha t de m o e i l i j k h e i d a a n z i e n l i j k . Ook

t u s s e n de twee examinatoren b e s t a a t nog a l e e n s g r o o t v e r s c h i l o v e r de

m o e i l i j k h e i d ( c o r r e l a t i e f a c t o r 03% W i j w i l d e n onderzoeken o f de t endens v a n de items door de examinatoren

g e a c c e p t e e r d kon worden, W i j "vertaalden! ' d i t door hen de vraag t e

s t e l l e n o f een i t e m geschikt w a s om i n de vorm v a n e e n "open" vraag

t i j d e n s een mondeling examen t e s t e l l e n , Aan i eder i tem moesten z i j

v o o r w a t "de gesch ik the id v o o r een mondeling onderzoek" b e t r e l t een

waarder ing i n een 7 -puntsschaa l toekennen ( l i z e e r s l e c h t b r u i k b a a r ;

7: z e e r goed b r u i k b a a r ) , Tabel XVII g e e f t de r e s u l t a t e n ,

Tabe l X V I I

G e s c h i k t h e i d v a n de items v o o r een mondeling onderzoek

U i t deze t a b e l c o n c l u d e r e n w i j d a t he t m e e r e i d e e l d-er v r a g e n "bruikbaar"

-U "zeer goed bru ikbaar" ( 7 ) is. Examinator 11 v i n d t i n h e t a l g e -

meen de v r a g e n o v e r b a l a n c e r i n g b r u i k b a a r d e r dan d i e o v e r t r i l l i n g e n ,

Door examinator I wordt geen v e r s c h i l g e c o n s t a t e e r d .

Hei is i n t e r e s s a n t na t e gaan hoe de c o r r e l a t i e is tassen de u.itsqsa.ken

v a n de twee examinatoren, Voor de d e l e n t r i l l i n g e n , b a l a n c e r i n g en de

t o t a l e t e s t z i j n de c o r r e l a t i e f a c t o r e n r e s p e c t i e v e l i j k : -0.15, 0,38 en 0 ,02 , B e s t a a t er v o o r h e t o n d e r d e e l b a l a n c e r i n g nog e n i g verband

t u s s e n de o p i n i e der examinatoren aangaande de g e s c h i k t h e i d van een

item, voor de t o t a l e t e s t is er i n h e t g e h e e l geen verband , t e r w i j l

b i j het o n d e r d e e l t r i l l i n g e n i n een a a n t a l g e v a l l e n de ene examinator

~~

een vraag g e s c h i k t a c h t , t e r w i j l de andere hem o n g e s c h i k t v i n d t , Een

m o g e l i j k e v e r k l a r i n g h i e r v o o r is d a t de "tendens" v a n s e n i t em door de

twee examinatoren v e r s c h i l l e n d wordt g e i n t e r p r e t e e r d , Een andere mo-

g e l i j k h e i d is d a t h e t team sat d i t a s p e c t b e t r e f t z e e r inhomogeen is.

Een v e r k l a r i n g h i e r v o o r i s w e l l i c h t t e v inden in -he t f e i t d a t de een

- 35 -

- 36 -

z e e r v e e l , de ander z e e r w e i n i g examen-ervaring b e z i t ,

Ook wanneer vas tges te ld is d a t de t endens van de items i n h e t a l g e n e e n

g e a c c e p t e e r d wordt v o o r een mondeling examen, is h e t n o o d z a k e l i j k n a

t e gaan i n h o e v e r r e een item door de aangeboden a l t e r n a t i e v e n en de fog- muler ing g e s c h i k t w a s h e t z e l f d e t e onderzoeken a ls op een mondeling

examen, N i j vroegen de examinatoren de k w a l i t e i t van de i tems t e be-

o o r d e l e n I n een 7 -puntsschaal ( I : zeer s l e c h t ; 7: z e e r goed) en v e r -

meldden e x p l i c i e t d a t g e l e t moest worden op de aangeboden a l t e r n a -

t i e v e n , de fo rmuler ing en de r e l e v a n t i e met b e t r e k k i n g t o t h e t vak

t r i l l i n g e n en b a l a n c e r i n g . I n t a b e l X V I I I z i j n de r e s u l t a t e n vermeld,

Tabe l X V I I I

K w a l i t e i t van de items v o l g e n s twee examinatoren

Door examinator I wordt de k w a l i t e i t gemiddeld b e t e r bevonden dan door

examina tor 11, Het onderdee l b a l a n c e r i n g l i j k t i e t s minder v a n kwali-

t e i t dan h e t g e d e e l t e t r i l l i n g e n . I n h e t algemeen is de b e o o r d e l i n g

z e e r p o s i t i e f ,

V e r g e l i j k e n w i j d e o p i n i e s van de twee examinatoren i n de vorm v a n de

c o r r e l a t i e f a c t o r dan c o n s t a t e r e n w i j v o o r t r i l l i n g e n , b a l a n c e r i n g e n en

h e t t o t a a l r e s p e c t i e v e l i j k -0 ,09, 0,10, - 0 ,02 , D i t b e t e k e n t d a t h e t

v a n de examinatoren b i j n a vo lmaakt o n a f h a n k e l i j k iso

Als s t a t i s t i s c h gegeven voor de k w a l i t e i t van een i t e m zouden de item-

t o t a a l c o r r e l a t i e - f a c t o r e n (met en zonder zekerhe idsaanduid ing) be-

schouwd. kunnen worden. H e t b l i j k t d a t v o o r t r i l l i n g e n e n de t o t a l e

t e s t een b i j n a p e r f e c t e o n a f h a n k e l i j k h e i d bes taa t t u s s e n deze fac -

t o r e n en de b e o o r d e l i n g d e r e x m i n a t o r e n o B i j b a l a n c e r i n g bes taa t er -een n e g a t i e v e c o r r e l a t i e ( r e s p e c t i e v e l i j k -0,21, -0.26, -0922, +0,10),

De g r o o t h e i d "phi-goed-zeker" en h e t p e r c e n t a g e met z e k e r h e i d gegeven

antwoorden c o r r e l e e r t i e t s hoger met h e t gegeven o o r d e e l o v e r de k w a -

- 37 '

- 37 -

l i t e i t der i t ems . Gro te v e r s c h i l l e n worden g e c o n s t a t e e r d t u s s e n de

twee examinatoren.

W i j menen d a t u i t h e t voorgaande b l i j k t d a t de v o o r s p e l b a a r h e i d v a n

de k w a l i t e i t van een item z e e r g e r i n g is, tenminste door mensen d i e

nog geen e r v a r i n g hebben met M.C. t e s t s . D i t f e i t z a l z e e r zeker een

zeer n a d e l i g e i n v l o e d u i t o e f e n e n op h e t v a s t s t e l l e n van de kerni tems.

Beha lve de t o t nu t o e vermelde i n f o r m a t i e werd a a n de examinatoren een

a a n t a l v r a g e n g e s t e l d . Hen werd gevraagd om een zo gepronceerd moge-

l i j k antwoord t e geven. O p de vraag: " B e s t r i j k t de t e s t op voldoende

w i j z e n de s t o f d i e i n h e t c o l l e g e behandeld is?" werd zonder meer ifjar'

geantwoord. D e examinatoren waren v e r d e r van mening d a t geen a s p e c t e n

o f onderde len v a n 'FTr i l l ingen en Ba lancer ing" t e v e e l of t e w e i n i g t e r

s p r a k e komen.

Examinator I1 maakte de aantekening d a t o e f e n i n g i n h e t o p z e t t e n v a n

b e w e g i n g s v e r g e l i j k i n g e n w a t meer t e r s p r a k e kan komen.

De verhouding t u s s e n h e t a a n t a l v r a g e n o v e r t r i l l i n g e n en o v e r ba lan-

c e r i n g werd goed gevonden. Volgens de examinatoren kan op grond van de

s c o r e s der k a n d i d a t e n i n h e t algemeen g e s t e l d worden d a t een k a n d i d a a t

d i e een hoger punten t o t a a l h a a l t dan een ander beter v o l d o e t a a n h e t

he le complex v a n e i s e n voor d i t vak ( v o l g e n s hun e i g e n normen!) dan d i e

ander.

Aan de examinatoren w e r d gevraagd aan t e geven h o e v e e l v r a g e n een kan-

d i d a a t tenminste goed moet beantwoorden om t e s l a g e n , h o e v e e l punten

h i j moet beha len (met z e k e r h e i d ) , w a t de s l e c h t s t e en de b e s t e kandi -

daat s c o o r t e n w a t de gemiddelde s c o r i n g is. I n t a b e l XIX z i j n deze

s c h a t t i n g e n e n de gegevens van de groep vermeld. . .

Tabe l X I X

S c h a t t i n g e n v a n de s c o r e s en de w e r k e l i j k e s c o r i n g

Exam. I1

- 3 8 -

Wanneer w i j de s c h a t t i n g e n u i t t a b e l X I X v e r g e l i j k e n met de d o o r de

examinatoren behaalde p u n t e n t o t a a l ( z i e t a b e l X V I > dan moeten w i j con-

s t a t e r e n da t z i j geen a l t e goede indruk hadden van hun e i g e n p r e s t a t i e ,

Het v a l t n i e t t e verwonderen d a t de s t u d e n t e n h i e r evenzeer a a n t e n

p r o o i v a l l e n en d a t z i j d i t a l s een n a d e e l v a n deze tentamenvorm z i e n .

Víij menen d a t de i n f o r m a t i e d i e ons door de examinatoren v e r s t r e k t is

een p a s i t i e v e i n t e r p r e t a t i e v a n hun s tandpunt t e n o p z i c h t e v a n __. deze

M . C . - t e s t t o e l a a t .

@ij menen bovendien aangetoond t e hebben hoe m o e i l i j k h e t is u i t s p r a k e n

t e doen o v e r m o e i l i j k h e i d s g r a a d en k w a l i t e i t v a n een item,

Het f e i t d a t de o p i n i e s van de twee examinatoren n o g a l eens v e e l ver-

s c h i l l e n d o e t b i j ons de vraag opkomen o f deze inhomogeni te i t n i e t v a n

i n v l o e d is b i j een mondeling examen.

Wanneer w i j nu de o o r z a a k t r a c h t e n op t e sporen v a n de v r i j lage c o r r e -

l a t i e t u s s e n de r e s u l t a t e n van de M.C.-test en h e t mondeling examen, dan

moeten w i j c o n s t a t e r e n d a t b i j h e t mondeling een a a n t a l f a c t o r e n een r o l

s p e l e n , d i e b i j de t e s t n i e t t e r s p r a k e kwamen, %ij noemen: de w i jze van

u i tdrukken , h e t opvangen van h i n t s , de; d i s c u s s i e t e c h n i e k en v o o r a l de

v o o r k e n n i s van de k a n d i d a a t , G e c o n s t a t e e r d e h i a t e n u i t de v o o r o p l e i d i n g

op h e t g e b i e d van de wiskunde en de mechanica wegen v o o r de examencom-

a i s s i e b i j z o n d e r zwaar, Z e t is n i e t o n r e d e l i j k de e i s t e s t e l l e n d a t de

voorgaande vakken b e h e e r s t moeten worden; w i j menen echter d a t d i k dan

e x p l i c i e t moet worden meeged-eeld, Een i m e n s e v e r z w a r i n g v a n h e t vak z a l

helt g e v o l g z i j n ( z i e ook hoofds tuk 7 ) + Bovendl n kan n i e t ontkend worden

t de norm b i j h e t mondeling examen n i e t erg e x p l i c i e t vast l i g t , De

opmerking van &&n van de examinatoren d a t h i j t e n g e v o l g e v a n h e t ex-

periment s t e e d s meer moei te had om u i t e i n d e l i j k de b e o o r d e l i n g i n d e

vorm v a n een c i j f e r vas t - t e s t e l l e n wijst i n d e z e l f d e r i c h t i n g ,

@ij w i l l e n nog e n i g e opmerkingen maken o v e r twee kandida ten . K a n d i d a a t

20 combineer t h e t c i j f e r 3 voor h e t n o n d e l i n g met een hoge s c o r e v o o r

de M . C . - t e s t ( 5 7 punten) , U i t t a b e l I b l i j k t d a t deze k a n d i d a a t s l e c h t s

z e e r w e i n i g items ( n l . 29) met z e k e r h e i d beantwoord h e e f t . De moge l i jk -

h e i d bes taa t d a t deze k a n d i d a a t op h e t mondeling er$ v e e l h inder h e e f t

ondervonden v a n z i j n n a t u u r l i j k e onzekerheid . Een andere m o g e l i j k h e i d

i s d a t z i j n onzekerhe id h e t g e v o l g was v a n h e t onvoldoende beheersen

van de s t o f . I n d a t geva l h e e f t h i j erg v e e l g e l u k b i j de IbI.C.-test

- 3 9 -

- 3 9 -

gehad o

Kandidaa t 1 8 b e h a a l t voor het mondeling exaaen 8, t e r w i j l h i j s l e c h t s

30 punten s c o o r t . Deze k a n d i d a a t is e r g traag, S l e c h t s 40 van de 6 5

items werden door hem beantwoord!

T i jdnood h e e f t deze k a n d i d a a t d a n i g p a r t e n g e s p e e l d , De commissie

mondeling l e t b i j h e t mondeling n a u w e l i j k s op h e t tempo wanneer de

g e l e v e r d e p e s t a t i e goed is.

- 43 P

- 41 -

9. De r e a c t i e s van de s t u d e n t e n op de M . C e - t e s t

O n m i d d e l l i j k na de t e s t werd de k a n d i d a t e n v e r z o c h t een k o r t e enquete

t e beantwoorden d i e anoniem werd i n g e l e v e r d . I n B i j l a g e I is deze

enquete vermeld. Bovendien is aangegeven de p r o p o r t i e v a n de kandi -

d a t e n d i e een b e p a a l d e o p i n i e bezaten. De fo rmuler ing d e r v r a g e n w a s

n i e t a l t i j d even g e l u k k i g , k i l i j menen d a t daardoor e c h t e r w e i n i g ver-

w a r r i n g gezaaid z a l z i j n . Door 29 v a n de 30 k a n d i d a t e n werd h e t en-

que te - fo rmul ie r i n g e l e v e r d .

Het is d u i d e l i j k d a t de t e r b e s c h i k k i n g ges te lde t i j d t e k o r t w a s . D i t

w a s ook de mening v a n de examinatoren.

Een t e s t v a n d i t t y p e mag 2 uur duren v o l g e n s h e t merendeel der s t u -

denten en v o l g e n s examinator I , -Examina tor I1 p r e f e r e e r t een duur v a n

3 UUPe

De t e s t was ook v o l g e n s de s u b j e c t i e v e mening van de s t u d e n t e n e n ex-

r I m o e i l i j k . Examinator I1 v i n d t de m o e i l i j k h e i d s g r a a d r e d e l i j k .

S tudenten e n examinatoren vonden d a t de t e s t een goed o v e r w i c h t t u s s e n

t h e o r i e en t o e p a s s i n g t o t s t a n d b r a c h t .

Opmerkel i jk is h e t f e i t d a t de s t u d e n t e n en examinator I1 de t e s t

B inder e e r l i j k v inden dan een klassiek s c h r i f t e l i j k tentamen, E x a n i n a t o r

1 - v i n d t de t e s t ee r l i j ker , W i j komen h i e r nog op t e r u g ,

De M.C. v o r a word t d u i d e l i j k v e r v e l e n d e r gevonden dan v r o e g e r e mechanica

tentamens* Het c o l l e g e w a s r e d e l i j k goed, de i n s t r u c t i e matig afgestemd

op h e t M,C, tenkamen.

De f o r m u l e r i n g der v r a g e n w a s matig t o t goed, D e b e i d e examinatoren oor-

dee lden de fo rmuler ing goed,

De meeste s t u d e n t e n en be ide examinatoren v o e l d e n z i c h t i j d e n s de t e s t

nerveuzer dan b i j vroegere tentamens.

Nadat de u i t s l a g v a n h e t tentamen i n de vorm v a n een c i j f e r a a n de

s tudenten w a s meegedeeld, w e r d hen gevraagd nog eens o v e r h e t e x p e r i n e n t

t e d i s c u s s i ë r e n . B i j deze b i jeenkomst verschenen 19 s tudenten , Hen werd

de gang v a n zaken meegedeeld. De g r o e p als g e h e e l w a s z e e r g e i n t e r e s s e k d .

Opmerkel i jk w a s d a t z i j nu de M . C , - t e s t e e r l i j k e r vonden dan een ander

examen ( ! ) + Hun u i t s p r a a k h i e r o v e r hangt dus k e n n e l i j k af van h e t c i j f e r

d a t z i j behaa lden o f dachten t e behalen. E r n s t i g e misvers tanden b l e k e n

nog t e b e s t a a n o v e r de w i j z e waarop u i t de s c o r i n g een c i j f e r werd vast-

g e s t e l d . Een u i t g e s p r o k e n gedachte w a s : i n t o t a a l z i j n Î 3 O punten t e

behalen, ( 1 ) 1 3 punten u i t de t e s t cor responderen met 1 punt .

- 42 -

- 42 -

W i j hopen d a t w i j de aanwezige s t u d e n t e n hebben kunnen o v e r t u i g e n d a t

s c o r e en c i j f e r n i e t o n v e r b r e k e l i j k gekoppeld z i j n , De meded-eling d a t

de twee examinatoren gemiddeld 80 van de 'I30 punten s c o o r d e n h e e f t hen

w e l l i c h t g e r u s t g e s t e l d o

I t ems waarvoor rekenwerk n o o d z a k e l i j k w a s worden - v o l g e n s één der

s t u d e n t e n - a l l e e n a l raet z e k e r h e i d beantwoord omdat z i j e r zo v e e l

t i j d aan hebben moeten bes teden , D e opmerking werd b e l u i s t e r d om de

t igemakke l i jks te?? en de *'moeilijke'? itemris i n groepen t e p l a a t s e n en om

een i n d e l i n g a a n de hand v a n d e hoofdstukken u i t he t c o l l e g e t e ge-

bruiken. B i j een a a n t a l items gaven de a l t e r n a t i e v e n a a n l e i d i n g t o t

Fr lees -b l indheidf '

W i j zouden w i l l e n p l e i t e n v o o r een a a n de s t u d e n t e n t e geven p a m f l e t

w a a r i n door de groep o n d e r w i j s r e s e a r c h - u i d e l i j k h e t v e r s c h i l t u s s e n

een M , C . - t e s t en een k l a s s i e k e b e o o r d e l i n g u i t e e n z e t ,

- 43 -

- 43 -

I O . C o n c l u s i e s en v o o r s t e l l e n

W i j z u l l e n geen p o g i n g doen a l l e c o n c l u s i e s u i t h e t voorgaande t e her-

h a l e n e

De voornaamste c o n c l u s i e aangaande de M , C . - t e s t is d a t h e t m o g e l i j k is

binnen r e d e l i j k e t i j d een vo ldoende betrouwbare t e s t t e c o n s t r u e r e n ,

De t e r u g k o p p e l i n g n a a r h e t o n d e r w i j s b i j h e t c o n s t r u e r e n v a n de t e s t

en h e t a n a l y s e r e n v a n de r e s u l t a t e n is v e e l g r o t e r en i n t e n s i e v e r dan

w i j hadden durven hopen,

D e v o o r s p e l b a a r h e i d v a n m o e i l i j k h e i d en k w a l i t e i t der v ragen w a s g e r i n g ,

D i t is w e l l i c h t de d i r e c t e o o r z a a k v a n h e t mislukken v a n de kun-items

methode

ggen v a n de g r e n s vo ldoende - onvoldoende bezorgde ons v r i j

g r o t e moe i l i j kheden ,

De s e r v i c e van de g r o e p o n d e r w i j s r e s e a r c h w a s uitnemend. Ons i n z i e n s

zou door deze g r o e p een pamf le t samengesteld- moeten worden om de

s tudenten b e t e r bekend t e maken met de werkwijze v a n een o b j e c t i e v e

t e s t , De t e s t w a s t e l a n g . Een a a n t a l v a n 40 items v a n het gepresen-

t e e r d e k a l i b e r v o o r 3 uur l i j k t r e d e l i j k . De geschatte i n t e r n e con-

s i s t e n t i e is dan: 0-52.

Het verband t u s s e n de b e o o r d e l i n g van mondeling en N,C.-test w a s

g e r i n g , Ons i n z i e n s z o g e r i n g d a t b e s l i s t moet worden welke methode

de voorkeur v e r d i e n t . Onze mening is d a t de M.C.-rnethode v o o r de

v66r-kandldaatsvakken t e p r e f e r e r e n is. W i j s t e l l e n v o o r d a t deze

methode i n stadia v o o r d e t e c h n i s c h e mechanica-vakken wordt ingevoerd .

Een werkwi jze d i e r e a l i s e e r b a a r is , zou kunnen z i j n :

j u n i 1968 : v o o r t g e z e t t e s t e r k t e l e e r

j a n , 1969 : t e c h n i s c h e mechanica I

j u n i 1969 : t e c h n i s c h e mechanica I1 j an , 1970 : t e c h n i s c h e mechanica 111

D i t b e t e k e n t d a t de s t u d e n t e n d i e i n september 1968 hun s t u d i e aan-

vangen vanaf h e t b e g i n i n de t e c h n i s c h e mechanica beoordee ld word-en

v i a een o b j e c t i e v e t o e t s -

%ij w i l l e n e i n d i g e n met e n i g e s u g g e s t i e s aan de g r o e p o n d e r w i j s r e s e a r c h ,

Het zou n u t t i g z i j n w a t meer i n f o r m a t i e t e v e r k r i j g e n o v e r de p r e s t a -

t i e s van de kandida ten . N a a s t de t o t a a l s c o r e met en zonder zekerheid

zouden w i j v o o r i e d e r e k a n d i d a a t de b e s c h i k k i n g w i l l e n hebben o v e r h e t

a a n t a l i tems d a t h i j met z e k e r h e i d beantwoord h e e f t . D e f r e q u e n t i e -

- 44 -

- 44 -

verdeling voor deze aantallen, het gemiddelde en de standaarddeviatie, zijn goed bruikbare gegevens, Zo mogelijk zouden wij voor iedere kandidaat zelfs willen beschikken

over het aantal items dat hij zeker-goed, zeker-fout, onzeker-goed en onzeker-fout beantwoord heeft en hoeveel items door hem zijn overge-

slagen, Het meedelen van deze informatie aan de examinandi-kan wellicht van groot nut zijn bij het accepteren van de beoordeling en het optima- liseren van de examen-strategie, In de tabellen voor de aantrekkelijkheid der alternatieven zou het juiste alternatief van een kenmerk voorzien moeten worden-(bijvoorbeeld

een "1.

Literatuur: Onderzoek van Onderwijs 1 en 2 (1964-1965)

o.a, Neuwese ( 1 page 39 ecvo Roskam (2 page 64 e.v,>

Onderzoek van wetenschappelijk onderwijs (1966) ooao Hoi'stee en Wijnen (pag, 171 e,v.)

Boerlijst (pag, 150 e,v.> van Naesssen !page 179 e,v.>

6 februari 1968

D r e k . J-D. Janssen.

B i j l a g e I

V r a g e n l i j s t b i j h e t tentamen

" T r i l l i n g e n en Ba lancer ing"

9 j a n u a r i 1968

D i t f o r m u l i e r bevat 10 v r a g e n om e n i g e i n f o r m a t i e t e v e r k r i j g e n o v e r

Uw r e a c t i e s op de t e s t ,

W i j v e rzoeken U de k l e i n e l e t t e r t e omcirke len d i e h o o r t b i j de mening

d i e h e t d i c h t s t a j n s l u i t b i j de Uwe,

Het s p r e e k t v a n z e l f d a t deze v r a g e n l i j s t anoniemn i n g e l e v e r d kan worden.

1 , Eat is Uw mening o v e r de t e r b e s c h i k k i n g

ges te lde t i j d v a n 3,5 uur voor deze t e s t ?

a, v e e l t e v e e l 0,07

b, t e v e e l 0 0 0 3

c e j u i s t goed Oe07 d. t e w e i n i g 0.38 e, v e e l t e w e i n i g 0045

2, Hoelang nag een t es t v a n d i t t y p e v o l g e n s

U duren?

a. minder dan I uur

b e 1 uur

c . 2 uur

d. 3 uur

e, meer dan 3 uur

3 . O p welke manier zoudt U de m o e i l i j k h e i d s -

graad v a n deze t e s t t yperen?

a. v e e l t e gemakkelijk

b e gemakkeli j k

c . wel goed

d. m o e i l i j k

e . v e e l t e m o e i l i j k

0,oo 0-14 oe55 0-21 0 , l O

0,oo 0,OO 0.28 0.62

0 , I O

- 2 -