Дослідження невизначеності результатів експертних вимірювань в системі управління якістю

Since the quality of measuring in international practice is assessed by uncertainty of the results, and an apparatus for its calculation in the area of expert measurement has not been developed yet, the study focuses on the methods of estimating uncertainty of expert measurement results.The authors have conducted analytical research on the sources of expert measurement results’ uncertainty, among which the main ones herewith singled out are: imperfection of experts, wrong choice of their number, and assessment conditions. The system of expert quality indices and the methods of their identification are suggested in the article. It enables making the right choice of the optimum methods of estimating the expert quality indices in any concrete case. The expert assessment of the significance of student activity components with regard to their uncertainty calculation has proved that the most important component is a “study activity”, and the least important one is a “social activity”.The suggested recommendations for standardizing the specialist experts’ quality indices suggest setting the lower limits of the admissible values. It allows normalizing their characteristics and optimizing the process of their attestation and hereby ensures coherence in expert measurements.В целях обеспечения достоверности результатов оценивания и контроля качества продукции, услуг, процессов, знаний и других объектов предложена методика расчета неопределенности результатов измерения, осуществленных экспертными методами. Методика апробирована путем исследования неопределенности экспертных измерений в системе управления качеством высшего образования. Сформированы рекомендации для нормирования характеристик персонала по оцениванию качества.З метою забезпечення достовірності результатів оцінювання та контролю якості продукції, послуг, процесів, знань та інших об’єктів запропоновано методику розрахунку невизначеності результатів вимірювання, здійснених експертними методами. Методику апробовано шляхом дослідження невизначеності експертних вимірювань в системі управління якістю вищої освіти. Сформовано рекомендації для нормування характеристик персоналу з оцінювання якості

The Design and Development of an Expert System Prototype for Enhancing Exam Quality

This paper discusses the development of an expert system prototype for use in college institutions. Our aim is to enhance exam quality and student performance by obtaining metrics pertaining to assignments, study materials, textbooks, and lecture quality, then learning dynamically from this information to create a human-readable course evaluation. The goal is to obtain a model which can be applied to courses in which students struggle, so we can identify ways to enhance the most determining factor of their grade: the quality of the exam. This expert system will serve as a prototype for a larger, more comprehensive automated system which will be proposed to enhance curricula