Cookies op Tweakers

Tweakers maakt gebruik van cookies, onder andere om de website te analyseren, het gebruiksgemak te vergroten en advertenties te tonen. Door gebruik te maken van deze website, of door op 'Ga verder' te klikken, geef je toestemming voor het gebruik van cookies. Je kunt ook een cookievrije versie van de website bezoeken met minder functionaliteit. Wil je meer informatie over cookies en hoe ze worden gebruikt, bekijk dan ons cookiebeleid.

Meer informatie

Door , , reacties: 86, views: 15.898 •

Een deel van de digitale examens in het voortgezet onderwijs wordt voorlopig geschrapt, nadat examens van 200 leerlingen ongeldig zijn verklaard wegens haperende software. Wanneer de examens worden voortgezet, is onduidelijk.

Het College voor Examens heeft dat gemeld in een brief aan middelbare scholen. In het afgelopen jaar zijn digitale examens volgens het College 'onrustig' verlopen. Om die reden worden de eindexamens die op een vast tijdstip plaatsvinden, tijdelijk niet via de computer afgenomen, schrijft het College.

Dit jaar waren er op 20 scholen problemen, waardoor examens van 200 kandidaten geheel of gedeeltelijk ongeldig moesten worden verklaard. Het College vindt dat aantal groot. Bovendien leidden de bugs tot concentratieproblemen, bijvoorbeeld doordat examens abrupt werden beëindigd.

De software was niet stabiel genoeg. De Flash-applicaties waarmee de examens werden afgenomen, leidden tot storingen en de examensoftware werkte niet goed samen met ict-netwerken van scholen. Volgens het College bleek op sommige scholen 'de centrale processor-unit in het netwerk van de school te zijn volgelopen', maar wat daarmee wordt bedoeld, is onduidelijk. Het College was niet bereikbaar voor commentaar.

Reacties (86)

Nah, flash objecten in een examen, ik moest er even om grinniken.
Waar slaat dit dan op? Flash is gewoon een stuk software waarin je heel veel kan doen en nog goed kan afdichten tegen fraude (van leerlingen) ook!
Er zijn alternatieven, maar niet veel betere alternatieven als je het goed doet, het komt namelijk altijd op hetzelfde neer:
Je geeft een school de eisen waar de computers/netwerk aan moet voldoen, en dan werkt het.

Dat er 200 leerlingen een computer hadden waarbij de netwerkbeheerders die eisen (aan PC en netwerk) niet konden waarmaken, heeft niks te maken met Flash!

Scholen worden hard gepakt met bezuinigingen, een goede ICT omgeving die goed wordt onderhouden ondanks dat er soms duizenden leerlingen mee moeten kunnen werken (flexibel en toch veilig) is lastig op te zetten voor veel scholen. En dan kan het wel eens fout gaan bij een paar...
flash is denk ik wel de makkelijkste taal om te manipuleren en om met externe software wijzigingen aan te brengen
Flash is helemaal niet waterdicht en kan op elk systeem instabiel worden, heb nog nooit een device gehad waar flash niet eens is gecrasht.
Echter is mijn browser (chrome) op welk device dan ook nog nooit gecrasht.

Wat mogen al die ingewikkelde eisen dan wel niet helemaal zijn? Wat is er mis om een systeem te maken dat gewoon via de browser werkt en dat de enige eis een up to date browser is?
Begin a.u.b. niet met een webbased applicatie voor dergelijke zaken als examens. De meeste en grootste problemen die ik tegen kom in bedrijven op applicatie gebied zijn wel de iritante WEBbased rotzooi. Ga liever gewoon weer naar een dedicated stuk software veel minder problemen en de performance is x100. :)

[Reactie gewijzigd door _Dune_ op 16 juli 2012 18:23]

wat een non argument en nog eens compleet foutief ook, een dedicated applicatie ontwikkelen betekend poteren de ene school op linux de andere op Macintosh de volgende op xp en de laatste op windows 7. als er IETS is wat er dan prut opleverd is wel wanneer je een slecht stukje code bijv in vb.net of c# gaat proberen om te bouwen naar mono en dat soort meuk.

hou jij er bij komt dat websoftware prut is en slecht performt ontgaat mij geheel maar de grootste pakketen van software zoals google, ebay en office365 gaan op webtechnieken in een cluster dat je voor 100% kunt aanpassen op de wensen van zo'n webtoepassing, het enige dat je dan nog nodig hebt is een browser die de meest gangbare technieken ondersteunt zoals bijv jquery, html 4.1 en css2

het enige wat je dan nog zou kunnen overwegen is een aangepaste boot, image bijv een pxe linux zodat leerlingen in een compleet dichtgetimmerde omgeving zitten waar ze niets anders kunnen dan examens beantwoorden.
Nee dat betekend dat de school PC's aan bepaalde eisen moeten voldoen.

Bv .net 4.0 op windows 7 64 bit met 8 gb geheugen (noem maar iets).

Dit kan je dan makkelijk van te voren testen. (makkelijker dan flash based dingen die nog wel eens willen updaten etc etc).
Flash is absoluut niet goed af te dichten tegen fraude omdat het grotendeels clientside draait, zoals badboyqxy al zegt, het is bijvoorbeeld erg eenvoudig het geheugen te manipuleren met een tooltje.
wat een onzin, scholen hebben genoeg geld voor ict

daar komt bij dat alle scholen die mee deden, alvorens een test hebben
moeten doen om te zien of examentester in grote aantallen werkte op die
systemen.
anders mochten ze niet mee doen.

en wat blijkt, het probleem zat hem niet bij de scholen
maar bij cito zelf.
zij hadden te weinig bandbreedte, te weinig ervaring met examentester
en bovendien zat er een mega bug in dat examen programma
geen schoolleider/examen secretaris die wist wat de bedoeling was, laat staat dat die wisten wat te doen met problemen.

nee cito heeft dit aan zich zelf te wijten.
Flash gebruiken de ontwikkelaars om het de leerlingen makkelijker te maken, en vooral overzichtelijker omdat kinderen tegenwoordig vanaf 4 jaar al flash objecten kunnen verklaren.. ( lees iPad peuters die op een boek swipen ).

Maargoed, de examens zijn gewoon niet getest. En de gebruikte infrastructuur was niet bestand tegen dit soort examens.. kortom, de sysadmins hebben de documentatie en de minimale eisen niet doorgelezen.

En dit weet ik, omdat ook ik scholen moest voorbereiden op examens die via het internet verliepen. En ja, mij is het wel gelukt.. Zolang je maar de laatste flash versie gebruikt, en computers gebruikt die aan de eisen voldoen.
... ( lees iPad peuters die op een boek swipen )....
Flash werkt toch niet op een iPad :?
Dat de gebruikte infrastructuur niet bestand was tegen het examengeweld heeft niets te maken met de sysadmins. Scholen hebben een budget dat enorm wordt gekort en ondanks het informatietijdperk is de ICT wel het eerste waar op bezuinigd wordt.
Waar ligt dan de fout? Bij de opdrachtgevers en opdrachtnemers van deze software.
Je moet bij zulke maatsoftware die alleen in een schoolomgeving gebruikt wordt rekening houden met de hardware die daadwerkelijk bij de scholen staat waarbij deze proef wordt afgenomen. Desnoods laat je eerst iemand opnemen welke hardware er gebruikt gaat worden en zorg je dat je een testomgeving hebt draaien met deze systemen zodat als je de software schrijft, deze altijd goed werkt onder alle omstandigheden op deze computers.
Ook zorg je er bij zoiets voor dat de vragen gecached worden (versleuteld uiteraard) in de clientsoftware zelf bij elk onderdeel van het af te nemen examen waarna het volgende onderdeel rustig kan worden binnengehaald, de vragen rustig kunnen worden beantwoord en bij het afsluiten van het onderdeel sla je dan de vragen lokaal op waarna deze per onderdeel ook weer verstuurd worden naar een centrale opslag. Maarja, daar wordt bij de CITO nooit bij nagedacht. Dat is precies hetzelfde bij de digitale cito-toetsen van de basisscholen.
Het is natuurlijk onmogelijk om rekening te houden met de verscheidenheid aan systemen die de verschillende scholen hebben staan. Op een bij de tijd systeem zou de ExamenTester software gewoon prima moeten lopen. Wat betreft het beantwoorden van de vragen wordt dat ook gedaan zoals jij zegt. Het wordt eerst lokaal opgeslagen en daarna naar de local server verstuurd. Zo gaat het bijvoorbeeld ook met de Eindtoets software / digitale toetsen.
Nah, flash objecten in een examen, ik moest er even om grinniken.
echt he. wat een ontiegelijke mochool ben je als je flash in een toch wel redelijk belangrijk ding als een eindexamen verwerkt. Gewoon plain en simpel houden!
Ik werk als systeembeheerder met de digitale examens, en zo "bot" als dit moet je het echt niet zien.

De software die gebruikt wordt werkt met een lokale server (school) en een globale server (cito) je zet op de lokale software examen pakketten klaar, en deze kan je vervolgens aan gebruikers koppelen.
Op de werkstations van de leerlingen start je vervolgens een client applicatie die fullscreen always on top draaid, je kan vanaf hier dus niet terug naar je normale desktop omgeving, en ook dingen zoals alt-tab en de standaard hotkeys zijn afgevangen.
Cito raad aan om de computers ook al kant en klaar neer te zetten (dus met de software al open en klaar voor het examen), dus ook het nog snel even starten van een stukje software zit er voor de leerlingen niet in.
Tijdens de examens praat de client zowel met de lokale server voor tussentijds opslaan, als met de Globale server voor tussentijdse statistics en het direct doorsturen van antwoorden (naar mijn vermoeden voor fraude controle etc.

De examens zelf zijn gewoon vergelijkbaar met de papieren examens, alleen opgeleukt met filmpjes, geluidsfragmenten en zo nu en dan iets interactiefs waar flash voor wordt gebruikt, je moet hierbij denken aan bijvoorbeeld landkaarten waar je een lijn in moet tekenen, en deze met een digitale geo-driehoek opmeten.

Ik heb zowel met de Flexibele examens als met de vaste tijdstip examens gewerkt (beide de zelfde software, en beide op de zelfde types machines), en de problemen deden zich ook alleen voor met de vaste tijdstip examens. Wat mij dan ook meteen aan overbelasting bij het cito doet denken, en niet zo zeer aan problemen op de afname computers.

Hoe dan ook moet ik zeggen dat de software goed uitgewerkt is, erg robuust is uitgevoerd, prima fraude gevoelig is, en over het algemeen dus ook gewoon goed werkt. En misschien nog wel belangrijker, de leerlingen zijn er erg over te spreken, en ik als systeembeheerder ook.
Hoe dan ook moet ik zeggen dat de software goed uitgewerkt is
Ik was een examenkandidaat van dit jaar en ik moet zeggen dat er om de 10 minuten wel een leerling zijn vinger opstak omdat zijn computer vastliep en ja mijne is ook ongeveer 3-5x vastgelopen alles word hersteld maar bij mij liep mijn computer een keer vast toen ik een brief moest schrijven en was een stukje tekst weg, erg vervelend!

Maar goed ik heb de examens gehaald :)
gefeliciteerd :D

Maar @eXcyle ik snap je punt, maar flash crasht hier (thuis) toch wel minstens 1x per dag en dat terwijl ik niet zoveel browse :X
Bij ProRail (waar ik voor werk / niet bij werk :p) werken ze ook met Flash en java based applicaties en die crashen me toch iets te vaak, ook al staat er precies welke versies niet en wel compatible zijn. Voor belangrijke applicaties is flash en java gewoon niet de beste keus kwa stabiliteit.

[Reactie gewijzigd door ArcticWolf op 16 juli 2012 18:55]

Oh? Waar gebruikt ProRail de flash en java voor dan?
Niet voor de verkeerstorens e.d. afaik?
Het tussentijds opslaan is om de 5 minuten na het starten van een vraag, en op het moment dat je naar de volgende vraag gaat, dus ja de kans dat je iets kwijt bent is altijd aanwezig, ze hebben binnen redelijke grenzen wel hun best gedaan dit goed op te zetten.

De software zelf wordt voor de flexibele examens ondertussen al 4 jaar gebruikt (ik werk er zelf ook al 4 jaar mee), dit jaar was het voor het eerst ook voor de vaste tijdstip examens op grote schaal (vorig jaar was er een pilot met 2 vakken).

Het is dan ook voor het eerst dat ik zoveel heb mis zien gaan, maar doordat het een vast tijdstip examen was is dit ook voor het eerst dat er zoveel scholen tegelijk met hetzelfde examen bezig zijn, de flexibele examens zijn over een tijdspad van 2 week door de school zelf in te plannen.

Het symptomen was inderdaad gewoon software die vast leek te lopen, maar dit was over het algemeen gewoon een paar minuten wachten en alles ging weer verder waar het gebleven was, meer een hikje dan echt vastlopen dus
meer een hikje dan echt vastlopen dus
Ja en nee, inderdaad had ik af en toe een "hikje" maar soms sloot de examen af en moest ik docent bijhalen die dus afmeldde en daarna het examen opnieuw startte erg vervelend. En bij oefenexamens wilde de oefenexamen niet opstarten bleef je maar een foutmelding krijgen na 15 keer (?) proberen lukte het ongeveer wel.
We hebben het hier over examens. Daar hangt de toekomst van de leerling vanaf. Als techneut zou je misschien zeggen "ach dat hoort erbij", maar dat doet het natuurlijk niet. Een papieren examen loopt ook niet vast.
Op het moment dat er problemen zijn met zo'n examen tast dat direct de prestatie van de leerling aan, doordat deze uit de flow gehaald wordt, de concentratie op den duur weg is omdat steeds iemand weer wat heeft om hem heen, of zelf die geniale gedachte had en op wilde schrijven maar de computer haperde, etc. etc.
Dit moet gewoon vloeiend werken zonder vastlopers, en "binnen redelijke grenzen hun best gedaan" is gewoon niet goed genoeg.

Zeker op middelbare scholen is overigens de gemiddelde beschikbare computer uit het prehistorische tijdperk. Die hebben gewoon geen geld om een flink computerpark neer te zetten. Je kunt op je vingers natellen dat het gebruik van het resourcevretende Flash dan ook voor problemen gaat zorgen.
Daarnaast is het gewoon amateuristisch van de systeembeheerders van CiTo dat er capaciteitsproblemen met de vaste tijdstipexamens optreden. Het is een risico wat perfect te beheersen is als iemand gewoon aan fatsoenlijke planning en risicomanagement doet. In ieder geval ben ik al een tijdje geleden geslaag voor mijn examen, maar ik zou me bijzonder genaaid voelen in zo'n situatie.
"de centrale processor-unit in het netwerk van de school te zijn volgelopen" the fuck did I just read... dat slaat toch nergens op?
Bedoelen ze met deze afschuwelijke zin dat de applicaties server-side voor processor load problemen zorgen?
Nee, client side. (aangezien de school de client is).
wellicht werken ze met een terminal server, als de server waarop gewerkt word vast loopt (wat helaas kan gebeuren) dan kan dat voor leken een Centrale Processor Unit zijn die vast (of vol) loopt... beetje inleven in de leken kan geen kwaad zo af en toe ;)
Of uberhaupt een centrale server. Als de "Active Directory" vastloopt (idk wat dat is, schijnt belangrijk te zijn op Windows) dan ligt ook direct alles er uit op scholen. Of een centraal netwerkknooppunt omdat de Flashfilmpjes zo groot zijn :9

[Reactie gewijzigd door TvdW op 16 juli 2012 14:10]

Active Directory is, simpel gezegd, een databaseinfrastuctuur met gebruikersgegevens. Die zou nooit down mogen gaan (alleen al omdat het zooo gemakkelijk is dit redundant op te zetten). Bovendien wordt AD (meestal) eigenlijk alleen gebruikt voor authenticatie en authorisatie (wie ben je, wat mag je). Het zou dus zeer vreemd zijn mochten deze problemen iets met acive directory te maken hebben.
Ik denk dan eerder aan een applicatieserver die bij momenten het inkomend verkeer niet kon behappen, of een database die compleet fout (te klein) gesized is, of...
nee, eigenlijk weet ik het (ook) helemaal niet: daarvoor is de uitleg gewoon te vaag! 8)7
In een zin is dat ook een Centrale Processing Unit, alleen noemen wij ITers dat niet zo. Een beetje inleven kan inderdaad geen kwaad ;)

Wel grappig om te zien wat voor mentaliteit sommige mensen hebben als er een keer iets "een beetje dom" wordt gezegd.
Voor zover ik goed ge´nformeerd ben, kan ik me herinneren uit de aanbesteding die het CvE destijds heeft gedaan dat er een server op school moest staan zodat het doen van examens niet afhankelijk was van een internet verbinding. Zo te horen kon die de belasting niet aan, maar veel meer kan ik uit deze mededeling ook niet halen.

En nee, met de gebouwde software heb ik verder niks te maken, het project is uiteindelijk naar een ander bedrijf gegaan.
De aanbesteding waar je waarschijnlijk aan refereert http://www.cve.nl/item/aanbesteding_van_examensoftware is voor de opvolger van het huidige systeem.
De leerlinge werken op een normale desktop. (Client side)
Intern op het school netwerk draait een server met Cito software. (Server side)
Deze is oa. voor het beheer en toegang tot de examensoftware
De data op de lokale server (@school) wordt gesynchroniseerd met de externe servers van Cito.
"de centrale processor-unit in het netwerk is volgelopen" die ga ik gebruiken als een user een storing heeft...

OT: Blijf proberen jongens, en uiteraard pas implementeren als het goed werkt...
'de centrale processor-unit in het netwerk van de school te zijn volleeggelopen'
Die ga ik gebruiken als de koffie op is
Volgens het College bleek op sommige scholen 'de centrale processor-unit in het netwerk van de school te zijn volgelopen',
Mooi dat er zulke hooggekwalificeerde experts zich buigen over deze problematiek, zo kweek je tenminste vertrouwen bij je doelgroep.

:')
Ja maar dat is toch zo! Weet je dan niet wat er gebeurt met de bits van niet-bezorgbare mailtjes, geblokkeerde popups en webpagina's die worden verstuurd nadat je je browser hebt afgesloten? Die gaan allemaal in de centrale processor-unit, die de bits recyclet.

Het is natuurlijk gewoon lekentaal voor "Jullie kunnen niet met twintig man tegelijk online over je 1,5 Mbit ADSL-lijntje".
Dus leg maar glas tussen alle middelbare scholen en hallo bijna heel Nederland heeft dan FTTC.
Ik weet niet hoe je het hebt kunnen missen, maar onderwijs heeft echt geen geld over om allerlei infrastructuur aan te leggen. Of bedoel je dat jij je als sponsor aanbiedt?
Bij de meeste scholen ligt gewoon glas hoor.
Blijkbaar staat de "server" in dit geval gewoon op het lokale netwerk van de school. Dus aan het slome internet ligt het niet.
The ether has leaked out of the ethernet cable

ah... nostalgie ;-)

http://bofh.ntk.net/BOFH/
Bits recycled? Dat is niet nodig hoor. Volgens mij waren de IP pakketjes gewoon op. Gewoon even langs de winkel om nieuwe te halen, dan kun je weer een tijdje vooruit.
En als echt je processing-unit is volgelopen houdt je hem gewoon ondersteboven, dan valt vanzelf alles er uit en kun je ook weer verder.
Volgens het College bleek op sommige scholen 'de centrale processor-unit in het netwerk van de school te zijn volgelopen', maar wat daarmee wordt bedoeld, is onduidelijk.
Lijkt me vrij duidelijk. De CPU kon het niet aan en ging dus naar 100% load. Effecten daarvan kunnen uiteenlopen van lang wachten tot de volgende vraag komt als je op de volgende-knop klikt tot hitteproblemen in de server en uitvallen.

Daarnaast, Flash gebruiken op een gemiddelde schoolcomputer is niet erg handig. Vaak hebben ze 'm lang niet geŘpdatet, bijvoorbeeld als er elke herstart een image terug wordt gezet.

Edit: Hierbij ga ik er dus van uit dat de desktops, net als bij mij op school, virtual machines draaien en het dus om de server-CPU gaat.

[Reactie gewijzigd door TomasH op 16 juli 2012 14:01]

[...]De software was niet stabiel genoeg, Flash-objecten leidden tot storingen en de examensoftware werkte niet goed samen met ict-netwerken van scholen.[...]
Examensoftware schijven in flash?? Jakkes en jakkie en braak braak. De grootste fout die je ooit kunt maken.
[...]Volgens het College bleek op sommige scholen 'de centrale processor-unit in het netwerk van de school te zijn volgelopen', maar wat daarmee wordt bedoeld, is onduidelijk.[...]
Hier kan ik me alleen maar nij aansluiten. wat is een centrale processor eenheid in een netwerk.
[...]

Examensoftware schijven in flash?? Jakkes en jakkie en braak braak. De grootste fout die je ooit kunt maken.
Fout of niet als je die examens voor je kiezen krijgt zal je het er mee moeten doen. Wij hebben bij ons op school ook de nodige aanpassingen moeten doen omdat Cito het nodig vond om op het laatste moment de systeemvereisten te wijzigen van minimaal 512MB naar 1024MB.

Wat maar 512 MB? Ja.... maar 512 MB. Weet je meteen in wat voor positie sommige scholen zitten. Computers gaan hier gemiddeld 7 jaar mee (tegenover een afschrijving van 5 jaar).
Ja dat krijg je met flash, daar loopt je ram van vol. Het verbaasd me nog steeds hoe veel geheugen en cpu die rotzooi gebruiken als het alleen maar staat te idlen...
'de centrale processor-unit in het netwerk van de school te zijn volgelopen'

Dat zal wel de (web)server zijn waarvan de software draait of de domain controller die de authenticatie regelt.
Hoe grappig dat ik al sinds 1997 probleemloos Microsoft, Lotus, IBM, Novell, etc, etc examens digitaal afleg, waarbij er misschien hooguit 1x een storing optrad en wij hier in Nederland als het op automatisering & regering aankomt geen fluit voor elkaar krijgen?!?

Onbegrijpelijk dat dit land z'n digitale voorspring zo ontzettend te grabbel gooit..
Waarschijnlijk is de ICT afdeling bij microsoft ect iets kundiger dan bij CITO.
Ja inderdaad, waarom kan het CITO niet gewoon de software gebruiken die ook gebruik wordt door Pearson Education? Gaat al jaren goed en wereldwijd ook. Lijkt me toch niet zo lastig dat in licentie te nemen?
Dat kan niet. Scholen en overheden (en daaraan gerelateerd) moeten altijd het wiel opnieuw uitvinden. Of het nu een dynamisch belasting systeem is of een examen pakket (waar er waarschijnlijk wel honderden van zijn). Het moet altijd zelf worden ontwikkeld door een aanbesteder dit het goedkoopste was.
Ja, goed, maar dat is een beetje hetzelfde als dat de bakker zelf altijd prima brood eet. Het zou wel een blamage zijn als je als software/networkingsolution bouwer je eigen spul niet op orde hebt. I hate to say it, maar zoals dit nu weer gaat, dat is toch gewoon de normale manier van werken? Dat is het in ieder geval in de constructiesector, dus ik neem aan ook in IT - precies maken van de opdrachtgever verlangt, en als het dan niet werkt (dat wist je van tevoren ook al, maar ja, de opdrachtgever heeft dat niet gespecificeerd) voor ettelijke oplsag meerwerk uitvoeren. De club die deze oplossing gemaakt heeft krijgt namelijk weer de mogelijkheid om de problemen op te lossen. Hoppa weer een paar ton verdiend.
Over de ruggen van de toekomst van de Nederlandse leerlingen, dat dan weer wel.
Nogal logisch dat de Centrale Processor Unit is volgelopen, als je server onder de koffieautomaat zet blijft het vragen om moeilijkheden. De kantinejuf is immers al met vakantie..
Zeg maar gerust: wegbezuinigd.

Op dit item kan niet meer gereageerd worden.



Populair:Apple iPhone 6DestinyAssassin's Creed UnityFIFA 15Nexus 6Call of Duty: Advanced WarfareApple WatchWorld of Warcraft: Warlords of Draenor, PC (Windows)Microsoft Xbox OneApple iOS 8

© 1998 - 2014 Tweakers.net B.V. Tweakers is onderdeel van De Persgroep en partner van Computable, Autotrack en Carsom.nl Hosting door True

Beste nieuwssite en prijsvergelijker van het jaar 2013