Page Comparison

Kui eksamineeritavad lõpetavad testide tegemist, siis väikese viivitusega tekib Moodles testi tegemise juurde täiendav link View Proctorio Gradebook

Image Removed

Sellele vajutamisel kuvatakse Moodle keskkonnas Proctorio teenuse analüütika vaadet, kus kõik eksamineeritavad on nimekirjas koos juba antud esialgse hinnanguga nende tubliduse kohta. Lisaks tuleb märkida, et kui testitavate hulk on suurem, arvutab süsteem kõikide testitavate peale välja baastaseme, millest deviatsioone märgitakse ära Abnormalities väljal.

Image Removed

Antud näite puhul Siim Usin Tudeng on saanud endale kahtlustuse mitte nii väga korralikus käitumises, ning punasega on märgitud isikut tõendava dokumendi kehtivus. Lähemalt asja uurides selgub tõepoolest, et Siim on kasutanud ID kaardi asemel hoopis tankla kliendikaarti.

Image Removed

Eksamineeritava tegevuse paremaks hindamiseks on kogu tegevusest ka logi, kus kõik tegevused, mis võivad olla kahtlased on ajatempliga märgistatud. Logikirjele klikkides viiakse kohe ka video ja helipilt samasse kohta ajateljel, ning situatsiooni on võimalik õppejõu poolt läbi mängida ja hinnata, kas tegelikult oli ka tegemist kahtlase tegevusega.

Image Removed

Kuna masinad võivad eksida (algoritmid on ikkagi inimeste poolt kirjutatud), siis on Proctorio Settings lehel võimalus seadistada tasemeid, mis võivad kvalifitseeruda rikkumisena. Neid seadeid saab erinevalt testi enda  seadetest (mis peale esimese eksamineeritava alustamist lukustatakse) korduvalt muuta. Selle tagajärjel muutub iga kord ka eksamineeritavate käitumise riskiskoor. See aitab eemaldada mitte-vajalikku müra mida algoritmid võivad käsitleda kui kahtlast tegevust, ning paremini keskenduda päris probleemide kindlaks tegemisele.

Image Removed

Image Removed

...

Panel
borderColor #c4c4c4 bgColor #ffffff titleColor #000000 borderWidth 1 titleBGColor #ffffff borderStyle dashed
When the students finish taking the tests, a link View Proctorio Gradebook will appear next to Moodle test (with a slight delay). Image Added Clicking on the View Proctorio Gradebook link will display the analytics view of the Proctorio service in the Moodle environment, where all the results are shown. In addition, if the number of test subjects is larger, the system calculates a baseline for all test subjects, from which deviations are noted in the Abnormalities field. Image AddedIn this example, Siim Usin Tudeng has been marked for suspicious behaviour, and the validity of the identity document is marked in red. A closer look at the matter reveals that Siim has used a petrol station customer card instead of an ID card. Image Added Instructors can click along the timeline to jump to different points in the video. The webcam icon in the top-right will open the Incident Log where all possibly suspicious activities are time-stamped. By clicking on log entry, this specific point in video will be displayed and the educator can assess whether it actually was a suspicious activity or not. Image Added The Proctorio Behavior Settings page allows you to configure violation levels. Unlike the test itself (which is locked after the first examinee starts), these settings can be changed repeatedly. As a result, the risk score of the examinees' behavior also changes each time. This helps to remove unnecessary noise that algorithms may treat as suspicious activity, and to better focus on identifying real violations. Image Added Image Added That's about it! The system at all its complexity is actually quite easy to use.

Warning
icon false
For consultation please contact Siim Vene siim.vene@taltech.ee Silver Abozenko silver.abozenko@taltech.ee