The use of the Krippendorff’s coefficient in determining intra-rater reliability in human visual quality control of furniture manufacturing processes

The use of the Krippendorff’s Coefficient in determining intra-rater reliability in human visual quality control of furniture manufacturing processes. The article presents the results of research on the effectiveness of human visual quality control of furniture manufacturing processes. The aim of this experiment was to check the inter-rater reliability of three elements: the judge, the instruction of which the quality of individual objects made of laminated MDF was determined and the quality assessment by a human. The Krippendorff’s Coefficient was used as a measure of visual control effectiveness. The results of the experiment showed that the use of human visual quality control of furniture manufacturing processes can be a good solution. The values of all three coefficients K1, K2 and K3 gave alpha> 0.8, which is considered a guarantee of high compliance. Therefore, the tested judge turned out to be reliable and competent, the instructions were clear and sufficient, and the figures obtained were reliable. It turned out that the Krippendorff’s Coefficient values differ depending on the number of categories (for two categories K2 = 0.904, K3 = 0.902; for three categories K1 = 0.849). The way the categories were created did not affect the stability of the assessment. The alpha coefficient can undoubtedly be considered a good, convenient measure of monitoring the reliability of the measurement system, because by giving a specific numerical rating, it allows one to control the effectiveness of implemented improvement actions.Wykorzystanie współczynnika Krippendorffa do określania wiarygodności oceny ludzkiej w wizualnej kontroli jakości procesów produkcji mebli. W artykule zaprezentowano wyniki badań skuteczności ludzkiej wizualnej kontroli jakości procesów produkcji mebli. Eksperyment miał na celu sprawdzenie wiarygodności ocen wg. trzech elementów: wiarygodności oceniającego sędziego, instrukcji na podstawie której określano jakość poszczególnych przedmiotów wykonanych z laminowanej płyty MDF oraz oceny jakości przez człowieka. Jako miarę skuteczności kontroli wizualnej zastosowano współczynnik Krippendorffa. Wyniki eksperymentu pozwolił stwierdzić, że zastosowanie ludzkiej wizualnej kontroli jakości procesów produkcji mebli może być dobrym rozwiązaniem. Wartości wszystkich trzech współczynników K1, K2 oraz K3 dały alpha > 0,8, co uznaje się za gwarancję wysokiej zgodności. Sędzia JD okazał się, więc osobą rzetelną i kompetentną, zaproponowana instrukcja jasna i wystarczająca, a otrzymane dane liczbowe wiarygodne. Okazało się, że wartości Krippendorff’s Coefficient różnią się w zależności od ilości kategorii (dla dwóch kategorii K2=0,904, K3=0,902; dla trzech kategorii K1=0,849). Sposób tworzenia kategorii nie wpływał na stabilność oceny. Współczynnik alpha można niewątpliwie uznać za dobrą, wygodną miarę monitorowania wiarygodności systemu pomiarowego, gdyż dając konkretną ocenę liczbową, pozwala kontrolować skuteczność wprowadzanych działań doskonalących