Confidence level and response time as additional psychometric measures of task and test scores

Računalno testiranje omogućuje mjerenje dodatnih parametara pri primjeni različitih vrsta psihologijskih testova. Među tim parametrima su stupanj sigurnosti u točnost odgovora i brzina rada. Ovo istraživanje će analizirati opravdanost uključivanja stupnja sigurnosti i brzine rada kao potencijalno korisnih parametara pri konstrukciji testova i vrednovanju individualnih rezultata. Prijašnja istraživanja su potvrdila povezanost stupnja sigurnosti s ukupnim uratkom u testu (Buratti i Allwood, 2012b). Za povezanost brzine rada i ukupnog uratka, istraživanja ne daju jednoznačne zaključke (Troche i Rammsayer, 2005). U ovom istraživanju je na 168 sudionika računalno primijenjen test kognitivnih sposobnosti (Test S). Analize su provedene na razini karakteristika testovnih zadataka te uratka ispitanika u pojedinim zadacima i cijelom testu. Na razini karakteristika zadataka indeks lakoće je pokazao pozitivnu povezanost s prosječnim stupnjem sigurnosti te negativnu povezanost s prosječnom brzinom rada. Analiza na razini ispitanika je pokazala pozitivnu povezanost ukupnog uratka i prosječnog stupnja sigurnosti. Nije nađena povezanost prosječne brzine rada s prosječnim brojem točnih odgovora niti s prosječnim stupnjem sigurnosti u točnost odgovora. Kod regresijske analize, model predikcije je objasnio 68.3% varijance prosječnog stupnja sigurnosti. Model predikcije za brzinu rada nije bio značajan. Iako su potrebne dodatne provjere u budućim istraživanjima, svakako postoji potencijal za uključivanje stupnja sigurnosti i brzine rada u psihometrijsku analizu testovnih rezultata.Computer testing enables the measurement of additional parameters when applying various psychological tests. Those parameters include the level of confidence in the response correctness and the response time. This research will analyse the justification of including the level of confidence and response time as potentially useful parameters in the construction of tests and evaluation of individual results. Previous research has confirmed the connection between level of confidence and the overall score in the test (Buratti & Allwood, 2012b). For the correlation between response time and overall score researches provide equivocal conclusions (Troche & Rammsayer, 2005). In this research, 168 participants responded to a computer test of cognitive abilities (Test S). Analyses were conducted on the task characteristic level and participants' performance level in the individual tasks and the entire test. At the task characteristic level, the difficulty index showed a positive correlation with the average level of confidence and a negative correlation with the average response time. The analysis at the participants’ level showed a positive connection between the overall score and the average level of confidence in response correctness. No correlation was found between the average response time and the average overall score, nor with the average level of confidence. In the regression analysis, the prediction model explained 68.3% of the variance of the average level of confidence, but not of the response time. Although additional reviews are needed in future research, there is certainly potential for including the level of confidence and response time in the psychometric analysis of test results