1 January 2020 in Cogent Engineering
The paper describes development of a multi-criteria decision support system (MCDSS) to improve the quality of school education. It is proposed to apply interpretable machine learning models for making decisions on improving the quality of education in secondary schools. Existing DSS are based on the expert judgement, which can be subjective. In addition, the large amount of data and features makes manual analysis difficult. Our approach is referred to as MCDSS with “black boxes” explainer, it consists of three stages. First, we develop the target indicators that measure the quality of education. A set of four features of quality of education (Q-Edu) has been developed. Secondly, we build regression models that link the data of the national educational database (NEDB) with target indicators. Thirdly, we use machine learning model interpreters to develop recommendations. The disadvantage associated with the difficulties of interpreting the results of models is overcome by SHAP (SHapley Additive exPlanations), which is used as a basis for developing recommendations for what features of educational institution could be altered in order to improve quality indicators. Using the described process, we, in particular, revealed the positive impact of the location of the school, ratio of experienced teachers, sports, technical and art studios on Q-Edu indicators. The ratio of experienced teachers and, at the same time, young teachers younger than 25 year positively affects the number of significant student achievements. The proposed universal approach reduces the subjectivity and laboriousness of parameter significance determination in MCDSS.
23 October 2025 in Knowledge and Performance Management
Type of the article: Research ArticleThe study analyzes how academic excellence is conceptualized within Kazakhstani universities, focusing on two key internal stakeholder groups: faculty members and administrative staff. While academic excellence has become a global priority, little empirical evidence exists on how it is interpreted in emerging higher education systems. The paper addresses this gap by examining the Kazakhstani case, where government-led excellence initiatives are still in their early stages. A quota-based survey was conducted across 42 universities, producing weighted responses from 832 faculty and 155 administrators. Quantitative data were processed with IBM SPSS Statistics 25, employing descriptive statistics, Welch’s t-test, and two-way ANOVA to compare perceptions between the groups. Despite a broad consensus on the multidimensional nature of academic excellence (positive agreement averaged > 94%), the results reveal consistent differences in their interpretation of core parameters. Of the 32 indicators tested, only four showed no statistically significant difference between faculty and administrators: faculty numbers (p = 0.246), academic reputation and stakeholder recognition (p = 0.701), graduate employability and employer satisfaction (p = 0.106), and student enrollment (p = 0.588). Overall, administrators assigned systematically higher importance to institutional characteristics, enabling components, and barriers across all thematic blocks. Consistent with the conceptual framework integrating institutional and stakeholder perspectives, these patterns indicate that external policy pressures and role-specific responsibilities shape interpretations of excellence. These findings provide a data-driven basis for designing initiatives that couple system-level reforms with participatory governance and co-created metrics, thereby improving the translation of policy into practice.Acknowledgment This research was funded by the Science Committee of the Ministry of Science and Higher Education of the Republic of Kazakhstan (Grant No. BR21882373).
25 July 2019 in Международный научный журнал "Современные информационные технологии и ИТ-образование"
The article presents the results of experimental work comparing the performance metrics of machine learning algorithms on imbalanced text corpora using the method of synthetic data generation ADASYN and without it. The work was carried out on an imbalanced corpus, consisting of 5,211 news texts, formed by cluster sampling for one year. The corpus annotation is produced according to the indicators of the tonality of texts by categories: neutral, positive, and negative, with a significant predominance of articles of neutral tone. There are many widely used methods to overcome the problem of data imbalance. Often, when working with imbalanced data, the resulting accuracy provides acceptable results, but other performance indicators are low. Such contradictory results usually occur when it comes to indepth analysis of the text in the study of social or medical phenomena. This paper shows how performance metrics of the same machine learning algorithms change when using the ADASYN method while analyzing an imbalanced text corpus using the Knearest neighbors method and Naive Bayes. The study considers the issue of the application of the method and its results in solving the problem of text classification. Comparative characteristics of the machine algorithms operation before and after the application of ADASYN provide a researcher with a better understanding of which machine learning performance metrics are more suitable when working with imbalanced data. As a result, authors present the observations and conclusions about the features of the method and put forward a number of proposals for further research in this area to compare the results obtained with the effects of the application of another method. В статье представлены результаты экспериментальной работы по сравнению показателей эффективности алгоритмов машинного обучения на несбалансированных текстовых корпусах при помощи метода синтетического генерирования данныхADASYNи без него. Работа проведена на несбалансированном корпусе, состоящем из 5211 новостных текстов, сформированных методом кластерной выборки за один год. Разметка корпуса произведена по показателям тональности текстов по категориям: нейтральная, положительная и негативная, при значительном преобладании статей нейтральной тональности. Существует множество широко используемых методов для преодоления проблемы дисбаланса данных. Часто, при работе с несбалансированными данными итоговая точность дает приемлемые результаты, но другие показатели эффективности очень низки. Такие противоречивые результаты часто имеют место, когда речь идет о глубоком анализе текста при исследовании социальных или медицинских явлений. В данной работе на примере анализа несбалансированного текстового корпуса методами Кближайших соседей и Наивный Байес показано, как меняются распространенные метрики эффективности тех же самых алгоритмов машинного обучения при применении методаADASYN. Рассмотрен вопрос применения метода и его результаты при решении задачи классификации текстов. Сравнительные характеристики работы машинных алгоритмов до и после примененияADASYNпредоставляют исследователю лучшее понимание того, на какие метрики эффективности машинного обучения лучше ориентироваться при работе с несбалансированными данными. По итогам исследования представлены наблюдения и выводы авторов об особенностях применения метода и выдвинут ряд предложений по дальнейшим исследованиям в этой области для сравнения полученных результатов с эффектами от применения других методов.
26 September 2024 in Bulletin of Toraighyrov University. Pedagogics series
В данной статье проведен сравнительный анализ наукометрических показателей вузов Казахстана, России и США в контексте их соотношения с представленностью в ведущих мировых рейтингах университетов. Согласно проведенному анализу показателей в научной базе SciVal и сопоставления их с позициями вузов данных стран в рейтинге QS WUR, утверждается, что казахстанские университеты стали экспериментальной площадкой для реализации так называемой концепции «ускоренные университеты», в рамках которой с целью вхождения и продвижения в мировых рейтингах конкурентоспособности университетов применяется и воплощается определенная стратегия университетов, ориентированная на быстрые достижения индикаторов международных рейтингов конкурентоспособности вузов, что в свою очередь ведет к неустойчивости позиции и модели развития вуза, его представленности на мировой арене. Стремление подогнать KPI ППС и АУП вуза к индикаторам рейтинга, в результате выстраивает временные механизмы достижения показателей рейтинговых агентств внутри университетов, которые системно не влияют на саму экосистему вуза и его производных, его инновации и научную производительность. Ярким свидетельством таких «перекосов» в политике университетов является корреляция показателей по публикациям в хищнических журналах именно в первые годы вступления казахстанских вузов в рейтинги. Представленность вузов в мировых рейтингах конкурентоспособности университетов является значимой частью академического превосходства вузов. Соответственно, эта тема является весьма актуальной в контексте реализации Концепции развития высшего образования и науки РК на 2023–2029 гг., которая включает цель создания Центров Академического Превосходства в Казахстане. Соответственно выстраивание устойчивой модели казахстанских университетов в мировых рейтингах глобальной конкурентоспособности является важной задачей, где наукометрические показатели вузов занимает одну из наиболее весомых частей. Ключевые слова: наукометрия, глобальные рейтинги, конкурентоспособность университетов, наука, Казахстан, устойчивость.
25 May 2020 in Международный научный журнал "Современные информационные технологии и ИТ-образование"
Культура потребления населением онлайн-новостей продолжает формироваться и набирает популярность, увеличивая аудиторию читателей. В тоже время возрастает и число тех, кто попадает под негативное влияние недостоверных новостей. Перед исследователями встает задача анализа массмедиа. Одним из направлений анализа новостного контента является тематическое моделирование, распознавание фейковых новостей, сентимент-анализ. Однако для проведения исследований в данных областях необходим размеченный корпус. В данной работе представлены методологические основы формирования корпуса описывающих сбор данных и отбор источников для формирования корпуса. Также представлено описание теоретических основ представительности и сбалансированности и обосновано соответствие корпуса выдвигаемым требованиям. В ходе проведенного комплекса работ сформирован корпус новостных текстов, включающий 1,9 млн статей из 22 источников. Проведена разметка корпуса. Проведен анализ тематической структуры сформированного корпуса с применением модели LDA. Сформированный корпус позволит апробировать алгоритмы машинного обучения, направленные на распознавание отдельных информативных признаков, и выявить закономерности, присутствующие в массиве новостных публикаций. Также корпус будет полезен исследователям в области машинного обучения и NLP для тестирования алгоритмов машинного обучения согласно собственным целям. The culture of online-news consumption continues to take shape and is gaining popularity, increasing the audience of readers. At the same time, the number of those who fall under the negative influence of false news is growing. Researchers are faced with the task of analyzing mass media. One of the areas of news content analysis is thematic modelling, recognition of fake news, sentiment analysis. However, to research these areas, there is a need in a labelled corpus. This paper presents the methodological foundations of the corpus formation. It describes the process of data collection and the selection of sources to form the corpus. It also presents a description of the theoretical foundations of representativeness and balance and explains compliance of the corpus with the requirements. In the course of the composite work, authors gained a corpus of 1.9 million news texts from 22 news sources. They conducted corpus markup and carried-up the analysis of the thematic structure of the formed corps using the LDA model. The formed corpus will allow testing machine learning algorithms aimed at recognizing individual informative features and identifying patterns that are present in the array of news publications. Also, the corpus will be useful to machine learning and NLP researchers to test machine learning algorithms according to their own goals.