<?xml version="1.0" encoding="UTF-8"?>
<!DOCTYPE root>
<article xmlns:mml="http://www.w3.org/1998/Math/MathML" xmlns:xlink="http://www.w3.org/1999/xlink" xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance" xmlns:ali="http://www.niso.org/schemas/ali/1.0/" article-type="research-article" dtd-version="1.2" xml:lang="en"><front><journal-meta><journal-id journal-id-type="publisher-id">RUDN Journal of Informatization in Education</journal-id><journal-title-group><journal-title xml:lang="en">RUDN Journal of Informatization in Education</journal-title><trans-title-group xml:lang="ru"><trans-title>Вестник Российского университета дружбы народов. Серия: Информатизация образования</trans-title></trans-title-group></journal-title-group><issn publication-format="print">2312-8631</issn><issn publication-format="electronic">2312-864X</issn><publisher><publisher-name xml:lang="en">Peoples’ Friendship University of Russia named after Patrice Lumumba (RUDN University)</publisher-name></publisher></journal-meta><article-meta><article-id pub-id-type="publisher-id">32256</article-id><article-id pub-id-type="doi">10.22363/2312-8631-2022-19-3-196-207</article-id><article-categories><subj-group subj-group-type="toc-heading" xml:lang="en"><subject>EVOLUTION OF TEACHING AND LEARNING THROUGH TECHNOLOGY</subject></subj-group><subj-group subj-group-type="toc-heading" xml:lang="ru"><subject>ВЛИЯНИЕ ТЕХНОЛОГИЙ НА РАЗВИТИЕ ОБРАЗОВАНИЯ</subject></subj-group><subj-group subj-group-type="article-type"><subject>Research Article</subject></subj-group></article-categories><title-group><article-title xml:lang="en">Cluster approach to criteria evaluation of the quality of a student’s educational outcome</article-title><trans-title-group xml:lang="ru"><trans-title>Кластерный подход к критериальному оцениванию качества образовательного результата обучаемого</trans-title></trans-title-group></title-group><contrib-group><contrib contrib-type="author"><contrib-id contrib-id-type="orcid">https://orcid.org/0000-0003-2105-8861</contrib-id><name-alternatives><name xml:lang="en"><surname>Pak</surname><given-names>Nikolai I.</given-names></name><name xml:lang="ru"><surname>Пак</surname><given-names>Николай Инсебович</given-names></name></name-alternatives><bio xml:lang="en"><p>ScD in Education, Professor, Head of the Informatics and Information Technologies in Education Department</p></bio><bio xml:lang="ru"><p>доктор педагогических наук, профессор, заведующий кафедрой информатики и информационных технологий в образовании</p></bio><email>nik@kspu.ru</email><xref ref-type="aff" rid="aff1"/></contrib><contrib contrib-type="author"><contrib-id contrib-id-type="orcid">https://orcid.org/0000-0003-3657-1019</contrib-id><name-alternatives><name xml:lang="en"><surname>Klunnikova</surname><given-names>Margarita M.</given-names></name><name xml:lang="ru"><surname>Клунникова</surname><given-names>Маргарита Михайловна</given-names></name></name-alternatives><bio xml:lang="en"><p>PhD in Education, Associate Professor of the Computing and Information Technologies Basic Department</p></bio><bio xml:lang="ru"><p>кандидат педагогических наук, доцент базовой кафедры вычислительных и информационных технологий</p></bio><email>mklunnikova@sfu-kras.ru</email><xref ref-type="aff" rid="aff2"/></contrib></contrib-group><aff-alternatives id="aff1"><aff><institution xml:lang="en">Krasnoyarsk State Pedagogical University named after V.P. Astafyev</institution></aff><aff><institution xml:lang="ru">Красноярский государственный педагогический университет имени В.П. Астафьева</institution></aff></aff-alternatives><aff-alternatives id="aff2"><aff><institution xml:lang="en">Siberian Federal University</institution></aff><aff><institution xml:lang="ru">Сибирский федеральный университет</institution></aff></aff-alternatives><pub-date date-type="pub" iso-8601-date="2022-10-08" publication-format="electronic"><day>08</day><month>10</month><year>2022</year></pub-date><volume>19</volume><issue>3</issue><issue-title xml:lang="en">VOL 19, NO3 (2022)</issue-title><issue-title xml:lang="ru">ТОМ 19, №3 (2022)</issue-title><fpage>196</fpage><lpage>207</lpage><history><date date-type="received" iso-8601-date="2022-10-08"><day>08</day><month>10</month><year>2022</year></date></history><permissions><copyright-statement xml:lang="en">Copyright ©; 2022, Pak N.I., Klunnikova M.M.</copyright-statement><copyright-statement xml:lang="ru">Copyright ©; 2022, Пак Н.И., Клунникова М.М.</copyright-statement><copyright-year>2022</copyright-year><copyright-holder xml:lang="en">Pak N.I., Klunnikova M.M.</copyright-holder><copyright-holder xml:lang="ru">Пак Н.И., Клунникова М.М.</copyright-holder><ali:free_to_read xmlns:ali="http://www.niso.org/schemas/ali/1.0/"/><license><ali:license_ref xmlns:ali="http://www.niso.org/schemas/ali/1.0/">https://creativecommons.org/licenses/by-nc/4.0</ali:license_ref></license></permissions><self-uri xlink:href="https://journals.rudn.ru/informatization-education/article/view/32256">https://journals.rudn.ru/informatization-education/article/view/32256</self-uri><abstract xml:lang="en"><p style="text-align: justify;">Problem and goal . The issues of criteria-based evaluation of the student's educational results remain relevant for the modern theory and practice of education. As a rule, measures to monitor educational results and resources in educational institutions are carried out by expert, manual, non-automated methods. In accordance with the directions of digital transformation of education, it is necessary to create a technological assessment system that meets the requirements of modern society, subject to automation and intellectualization. The purpose of the work is to substantiate a new model of criteria-based assessment of the quality of the educational result, based on the mathematical methods of the theory of clustering and pattern recognition and allowing to automate the procedures for assessing the quality of educational objects, resources, educational and personal achievements of students. Methodology. The quality of an educational result or resource is determined by criteria indicators, which can be represented as features of the evaluated object using the information vector. By clustering the set of acceptable objects into three classes - with low, medium and high quality - it is possible to evaluate an object by its belonging to one of these classes. Clustering is carried out on the basis of a mining algorithm, the metric of city blocks is taken as a measure of the similarity of objects. Results. A program has been developed that consists of a source data module, a clustering module, and a recognition and training module. The model results of the program correlate with traditional rating assessments, in which the quality of the object is determined by a point scale. The obtained test results confirm the validity of the recognition algorithm and the correctness of the software product. Conclusion. Thus, the proposed model based on clustering and the recognition method showed the possibility of automated assessment of the quality of educational results of trainees and educational resources.</p></abstract><trans-abstract xml:lang="ru"><p style="text-align: justify;">Проблема и цель. Вопросы критериального оценивания образовательных результатов обучаемого сохраняют свою актуальность для современной теории и практики образования. Как правило, мероприятия по мониторингу образовательных результатов и ресурсов в учебных заведениях проводятся экспертными, ручными, неавтоматизированными способами. В соответствии с направлениями цифровой трансформации образования необходимо создание технологичной, отвечающей требованиям современного общества системы оценивания, подлежащей автоматизации и интеллектуализации. Цель работы - обоснование новой модели критериального оценивания качества образовательного результата, опирающейся на математические методы теории кластеризации и распознавания образов и позволяющей автоматизировать процедуры оценки качества образовательных объектов, ресурсов, учебных и личностных достижений обучаемых. Методология. Качество образовательного результата или ресурса определяется критериальными показателями, которые можно представить в виде признаков оцениваемого объекта с помощью информационного вектора. Путем кластеризации множества допустимых объектов на три класса - с низким, средним и высоким качеством - можно осуществлять оценку объекта по его принадлежности к одному из этих классов. Кластеризация проводится на основе горного алгоритма, в качестве меры сходства объектов принимается метрика городских кварталов. Результаты. Разработана программа, которая состоит из модуля исходных данных, модуля кластеризации и модуля распознавания и обучения. Модельные результаты работы программы коррелируют с традиционными рейтинговыми оценками, в которых качество объекта определяется по бальной шкале. Полученные тестовые результаты подтверждают валидность алгоритма распознавания и корректность работы программного продукта. Заключение. Предложенная модель на основе кластеризации и метода распознавания делает возможной автоматизированную оценку качества образовательных результатов обучаемых и образовательных ресурсов.</p></trans-abstract><kwd-group xml:lang="en"><kwd>criteria assessment</kwd><kwd>quality of educational results</kwd><kwd>clustering of educational results</kwd><kwd>recognition</kwd></kwd-group><kwd-group xml:lang="ru"><kwd>критериальное оценивание</kwd><kwd>качество образовательных результатов</kwd><kwd>кластеризация образовательных результатов</kwd><kwd>распознавание</kwd></kwd-group><funding-group><funding-statement xml:lang="en">The study was carried out with the support of Krasnoyarsk Regional Fund for Support of Scientific and Scientific-Technical Activities within the framework of the project No. 2021012106985 “Formation and Development of Students’ Computational Thinking based on Automated and Cognitive Learning Tools.”</funding-statement><funding-statement xml:lang="ru">Исследование выполнено при поддержке Красноярского краевого фонда поддержки научной и научно-технической деятельности в рамках реализации проекта № 2021012106985 «Формирование и развитие вычислительного мышления обучаемых на основе автоматизированных и когнитивных средств обучения».</funding-statement></funding-group></article-meta></front><body></body><back><ref-list><ref id="B1"><label>1.</label><citation-alternatives><mixed-citation xml:lang="en">Abekova ZhA, Oralbaev AB, Berdalieva M, Izbasarova ZhK. Criteria-based assessment technology, methods of its application in the educational process. International Journal of Experimental Education. 2016;(2–2):215–218. (In Russ.) Available from: https://expeducation.ru/ru/article/view? id=9559 (accessed: 14.01.2022).</mixed-citation><mixed-citation xml:lang="ru">Абекова Ж.А., Оралбаев А.Б., Бердалиева М., Избасарова Ж.К. Технология критериального оценивания, методика ее применения в учебном процессе // Международный журнал экспериментального образования. 2016. № 2-2. С. 215-218. URL: https://expeducation.ru/ru/article/view?id=9559 (дата обращения: 14.01.2022).</mixed-citation></citation-alternatives></ref><ref id="B2"><label>2.</label><citation-alternatives><mixed-citation xml:lang="en">Bazhenova IV, Klunnikova MM, Pak NI, Pushkareva TP, Khenner EK. Cluster of disciplines as a platform for the development of students' computational thinking. Krasnoyarsk: Siberian Federal University; 2021. (In Russ.)</mixed-citation><mixed-citation xml:lang="ru">Баженова И.В., Клунникова М.М., Пак Н.И., Пушкарева Т.П., Хеннер Е.К. Кластер дисциплин как платформа развития вычислительного мышления студентов. Красноярск: Сибирский федеральный университет, 2021. 184 с.</mixed-citation></citation-alternatives></ref><ref id="B3"><label>3.</label><citation-alternatives><mixed-citation xml:lang="en">Klunnikova MM. Development of computational thinking of students in the process of teaching the discipline “Numerical Methods” [dissertation]. Krasnoyarsk; 2020. (In Russ.) Available from: https://research.sfu-kras.ru/sites/research.sfu-kras.ru/files/dissertaciya_Klunnikova.pdf (accessed: 17.05.2022).</mixed-citation><mixed-citation xml:lang="ru">Клунникова М.М. Развитие вычислительного мышления студентов в процессе обучения дисциплине «Численные методы»: дис. … канд. пед. наук. Красноярск, 2020. URL: https://research.sfu-kras.ru/sites/research.sfu-kras.ru/files/dissertaciya_Klunnikova.pdf (дата обращения: 17.05.2022).</mixed-citation></citation-alternatives></ref><ref id="B4"><label>4.</label><citation-alternatives><mixed-citation xml:lang="en">Rubinshtein SL. Fundamentals of general psychology. St. Petersburg: Peter Publ.; 2002. (In Russ.)</mixed-citation><mixed-citation xml:lang="ru">Рубинштейн С.Л. Основы общей психологии. СПб.: Питер, 2002. 720 с.</mixed-citation></citation-alternatives></ref><ref id="B5"><label>5.</label><citation-alternatives><mixed-citation xml:lang="en">Markelova OV. Methodology for the development of cognitive activity of college students in the process of teaching computer science [dissertation]. Krasnoyarsk; 2019. (In Russ.) Available from: https://research.sfu-kras.ru/sites/research.sfu-kras.ru/files/Dissertaciya_Markelova.pdf (accessed: 17.05.2022).</mixed-citation><mixed-citation xml:lang="ru">Маркелова О.В. Методика развития познавательной активности студентов техникума в процессе обучения информатике: дис. … канд. пед. наук. Красноярск, 2019. URL: https://research.sfu-kras.ru/sites/research.sfu-kras.ru/files/Dissertaciya_Markelova.pdf (дата обращения: 17.05.2022).</mixed-citation></citation-alternatives></ref><ref id="B6"><label>6.</label><citation-alternatives><mixed-citation xml:lang="en">Avanesov VS. Application of test forms in Rasch Measurement. Pedagogical Measurements. 2005;(4):3–20. (In Russ).</mixed-citation><mixed-citation xml:lang="ru">Аванесов В.С. Применение тестовых форм в Rasch Measurement // Педагогические измерения. 2005. № 4. С. 3-20.</mixed-citation></citation-alternatives></ref><ref id="B7"><label>7.</label><citation-alternatives><mixed-citation xml:lang="en">Bespalko VP. Education and training with the participation of computers (pedagogy of the third millennium). Moscow: MPSI Publ.; 2002. (In Russ.)</mixed-citation><mixed-citation xml:lang="ru">Беспалько В.П. Образование и обучение с участием компьютеров (педагогика третьего тысячелетия) М.: МПСИ, 2002. 215 с.</mixed-citation></citation-alternatives></ref><ref id="B8"><label>8.</label><citation-alternatives><mixed-citation xml:lang="en">Tomashev MV, Dolzhenko SV. Intelligent testing systems in distance and modular learning. Polzunovskiy Almanakh. 2010;(2):179–180. (In Russ).</mixed-citation><mixed-citation xml:lang="ru">Томашев М.В. Интеллектуальные системы тестирования в дистанционном и модульном обучении // Ползуновский альманах. 2010. № 2. С. 179-180.</mixed-citation></citation-alternatives></ref><ref id="B9"><label>9.</label><citation-alternatives><mixed-citation xml:lang="en">Markovskaya IA, Narchuganov KN, Pak NI. Automated system of remote holding competitive and assessment procedures. Journal of Physics: Conference Series. 2020; 1691(1):012156.</mixed-citation><mixed-citation xml:lang="ru">Markovskaya I.A., Narchuganov K.N., Pak N.I. Automated system of remote holding competitive and assessment procedures // Journal of Physics: Conference Series. 2020. Vol. 1691. Issue 1. Article 012156.</mixed-citation></citation-alternatives></ref><ref id="B10"><label>10.</label><citation-alternatives><mixed-citation xml:lang="en">Sun L, Hu L, Zhou D, Yang W. Evaluation and developmental suggestions on undergraduates' computational thinking: a theoretical framework guided by Marzano's new taxonomy. Interactive Learning Environments. 2022. https://doi.org/10.1080/10494820.2022.2042311</mixed-citation><mixed-citation xml:lang="ru">Sun L., Hu L., Zhou D., Yang W. Evaluation and developmental suggestions on undergraduates' computational thinking: a theoretical framework guided by Marzano's new taxonomy // Interactive Learning Environments. 2022. https://doi.org/10.1080/10494820.2022.2042311</mixed-citation></citation-alternatives></ref></ref-list></back></article>
